keiのTECブログ
某ゲーム会社のデータエンジニアが技術的なことを書くブログです。
2021/06/26 | docker AWS, centos, docker, EC2, gce, GCP, google cloud platform, install, yum, インストール
前置き dockerをcentos7にインストールしてみました。 最近、なにかのプロダクトを使うときはdockerイメージをもってきてdocker上で動かすことが多いです。 たとえ
続きを見る
2021/06/18 | awk, bash, 正規表現 awk, bash, gsub, 文字列, 正規表現, 置換, 集計
まえおき bashなどのシェルスクリプトで、lsした結果とかをつかってファイルを集計したいときってありますよね。 そのときに、同じ種類のファイルをまとめて、ユニークにしたいときとかってあ
2021/06/16 | bash bash, xargs, シェルスクリプト, マルチプロセス, 並列処理
並列処理とは 通常、意識せずにプログラムを書くと、大体の場合はシングルプロセスの動作をするプログラムになります。 シングルプロセスとは、処理が書かれた順番に実行されていくということです。
2021/06/15 | AWS, Redshift AWS, Redshift, ストレージ, テーブル, 容量
用途 AWS Redshfitのコンソールを見れば、使用中のストレージ容量はわかります。 しかし、自動化等でCLIやBot等から調べたくなることもありますよね。 ということで、Re
前置き dockerをcentos7にインストールしてみました
まえおき bashなどのシェルスクリプトで、lsした結果とかを
並列処理とは 通常、意識せずにプログラムを書くと、大体の場合は
用途 AWS Redshfitのコンソールを見れば、使用中のス
準備 pythonのインストールとかする。 このあたり。
→もっと見る