生成したファイルの文字コードを確認したいケースがある。
file コマンドを用いて確認することが可能
file --mime /tmp/xxx/csv
結果は以下の通り
$ file --mime /tmp/xxx/csv
/tmp/xxx/csv: text/csv; charset=utf-8
utf-8 であることを確認
月: 2022年12月
-
mac でファイルの文字コードを確認する
-
python dataframeで csv 出力する際の先頭の ,(カンマ)を削除する
以下のように pandas dataframe をcsv に変換すると
df.to_csv(f'/tmp/{output}', mode='w', encoding='utf-8')先頭に,(カンマ)が入ってしまう
,TITLE,NUMBER,xxx hoge,1,xxx
この対処法として
index=Falseを追加することによって回避が可能
df.to_csv(f'/tmp/{output}', mode='w', encoding='utf-8', index=False)結果は以下の通り
TITLE,NUMBER,xxx hoge,1,xxx
先頭の,(カンマ)が取り除かれた状態で csv が生成された。
-
jq コマンドのシングルクォート内に変数を渡す
シェルで jq コマンドで変数を渡す際、jq コマンドで シングルクォート が使われているために期待通り変数を渡すことができない。
今回は jq コマンドのシングルクォート内に変数を渡す方法を紹介。
(さらに…) -
GitHub Actions で requesting ‘id-token: write’, but is only allowed ‘id-token: none’. の対処
repository の settings を変更する
デフォルトで
Read repository contents permission
になっているが、
Read and write permissions
に変更して Save する
-
n日以降に ECR に push された image を調べる
今後もつかそうなのでメモ
aws ecr describe-images --repository-name $REPOSITORY --query "reverse(sort_by(imageDetails[*], &imagePushedAt))" | jq '.[] | select(.imagePushedAt > "2022-12-01T00:00:00+09:00")'
REPOSITORYに pushされた image を取得することができる -
ECR の全リポジトリ名を取得する
よく使うので tips として書き留めておく。
以下のコマンドで取得可能
aws ecr describe-repositories --output json | jq -re ".repositories[].repositoryName"
結果は、ECR のリポジトリが表示される
ecr-test-repo1 ecr-test-repo2