シェア
karupoimou
2020年2月20日 22:11
webサイト分析における次善の策は『検索フォーム』webサイトのデータ分析において基本となるのは多くの場合『そのサイトの運営者が公式に公開しているAPI』です。しかし、それが提供されていないwebサイトの場合には次善の策として、そのサイトが公開している『検索フォーム』を使うという方法があります。検索フォームは多くのサイトに設置されており、そのURLの構造を読み解くことで、効率的に欲しいデー
2020年2月20日 00:41
webスクレイピングなどでwebサイトをクローリングする際に行わなければならないことの一つに「robots.txt」の記載内容の確認が挙げられます。ここではnote.comのrobots.txtについて実際にどの様に記載されているのか読み解きながら、その内容を確認していきたいと思います。予備知識：「robots.txt」とはrobots.txtとは、サイトを巡回するクローラーの動作をコント
