チャアーハン

開発ノートです。/エンベデッドテクニカルエンジニア他/Node.js大好き

Qwicklabsで機械学習を学ぶ(1)

GoogleのGCP学習サイトQwicklabsが月末まで無料。やろー。 上記の記事がありがたい。 申請したmailアドレスで1つのラボをクリアしないと無料サブスク状態にならなかった。…

CourseraでGCPの講座やる(終)

GCPの有料講座が1ヶ月無料とのことなのでよっしゃ~やるぞ! とりあえずArchitecting with Google Cloud Platformの1週目何とかクリア。 ・GCPの各サービスの紹介と簡…

node.jsを利用したクローラー作成(53)
古い収集データを自動削除する処理に対応。
・cloud storageのlifecycle設定でファイル追加時からの経過時間で自動削除する。

node.jsを利用したクローラー作成(52)

若干やる気を失ったけど、部屋掃除しまくったら治る。不思議! クローラーの新設計移行はちょっと時間かかりそうなので一旦保留。 収集済みのデータがちょっとおかしかった…

cheerioでの日本語出力

cheerioでparseしたデータをhtmlを出力する際には.html()を使うが、デフォルトだと日本語が実体参照文字になってしまう。 .html()の第2引数にdecodeEntities:falseを与え…

node.jsを利用したクローラー作成(51)

システム構成変更の試作など。 合わせて新規リトライアルゴリズムの実装した。 テストはまだ。CloudFunction用の検証環境も微妙に未整備。 やることは多い😅 新設計ではC…