マガジンのカバー画像

アプリ開発

100
アプリ開発でのtips。 主にSwift、Kotlin、Cordova。
運営しているクリエイター

#スクレイピング

スクレイピングしていいのかプログラムで確認してみた【python】(robotparser)

スクレイピングしていいのかプログラムで確認してみた【python】(robotparser)

私のYouTubeチャンネルではプログラミングについての動画を投稿してきました。
その中でよく再生されているのがPython関係、特にスクレイピング関連の動画です。
どうやらみなさんスクレイピングが大好きのようですね。

実は私はほとんどスクレイピングを使いません。
理由は3つあります。

1つ目はスクレイピングの対象となるwebサイトがスクレイピングしても良いのか調べるのがめんどくさいということ

もっとみる
GASでお手軽Webスクレイピング【Google Apps Script】

GASでお手軽Webスクレイピング【Google Apps Script】

こんにちは。

最近になって本格的にGoogle Apps Script、通称GASを使うようになりました。
自分専用のツール開発で使っています。

GASは基本的にはJavaScriptです。JavaScriptにGoogle関連のツールを操作できるメソッドがついたような感じです。JavaScriptを普段から使っている方なら違和感なくすぐに使えるようになるはずです。

GASは処理速度が遅

もっとみる
YouTube動画&コード全文公開 〜【基本】すぐできるWebスクレイピング(python)〜

YouTube動画&コード全文公開 〜【基本】すぐできるWebスクレイピング(python)〜

以前にYouTubeに「【基本】すぐできるWebスクレイピング(python)」というタイトルでスクレイピング解説の動画を投稿しました。

大人気というわけではありませんが、私の動画の中では比較的よく見られているようです。

動画内でコード全文を公開しているのですが、模写しているときに打ち間違い(スペル間違い、大文字小文字、大文字スペース等)があるようなので、実験的にnoteでもコードを全文公開す

もっとみる
Webスクレイピングによる画像保存を徹底解説!!(Python) + 雑談

Webスクレイピングによる画像保存を徹底解説!!(Python) + 雑談

こんにちは。
今回はPythonを使ってスクレイピングで画像保存する方法を動画で徹底解説しました!!

このノートでは動画の補足的なことを書きたいと思います。

補足的なことといっても、アプリ開発ではないので書くことはあんまりなかったりします(笑)
やっぱりスクレイピングのような単発のプログラムは難しいこともあまりないので。

元々学生時代は化学専攻でありプログラミングとは無縁でしたが、なぜか今は

もっとみる

すぐできるWebスクレイピング

Pythonを使って簡単にWebスクレイピングのプログラムを作りました。
使用しているライブラリはRequestsとBeautiful Soup4です。

プログラミングは意外と簡単です。
リモートワークもできるし他の仕事よりも単価が高いので、副業にも最適です。
なによりもプログラミングは楽しいです。
あまり難しく考えずにやってみましょう!