AWS batch + ECRなのか、fargate (EC2)なのか

定期的にコンテナを立ち上げて処理を流したい。 AWS batch + ECRというアプローチもあれば、 fargate (EC2)でタスクスケジュールというアプローチもある。 それぞれメリットデメリットをまとめた

GAE(Google App Engine)を試した

GAE(Google App Engine)を使い始めたので、一度ここで整理をした。

UnicodeDecodeError: ‘utf-8’ codec can’t decode byte

Pythonで機械学習の勉強をはじめるようになって、ファイルを読み込むことが多くなった。その際、UTF-8フォーマットじゃないと何かと面倒なので、手順をまとめる

VyOSでDoS対策をする

VyOSをFirewallとして使っている人向けのシンプルなDoS対策を紹介

行列演算の基礎

重回帰分析をするにあたり必要な計算があるので整理する。

線形代数 スカラー・ベクトル・行列を整理する

重回帰分析を進めるにあたりスカラー、ベクトル、行列を整理。ベクトルと行列の足し算・引き算についてまとめた。

単回帰分析の傾きをPython(numpy)で求める

単回帰分析をする際、重要になるのが、「傾き」と「切片」。「切片」はセンタリングを行うことにより省略可能だが、「傾き」を計算するのは複雑な式を用いる。単回帰分析の傾きaをnumpyで求める

Google App Engineをコマンドで起動停止する

コマンドでGoogle App Engineを停止する。 

csvデータを簡単にグラフに描写する

CSVファイルなどを手軽にグラフ化したいことがある。そんな時matplotlib.pyplotを使えば直ぐに簡易的なグラフに描写することができて便利だ

pandasでtab区切りのデータを読ませる

pandasでデータを読み込もうとした際、read_csvを使ったがタブが¥tとして読み込まれてしまい、期待通りの結果にならなかった