非エンジニアでもできるWebスクレイピング入門 第2章

第2章　スクレイピングのお作法

2.1 サイト利用規約を確認する

まずサイトの利用規約を確認しましょう。最近は多くのサイトでス クレイピングについて禁止、または制限をしています。利用規約で 禁じられている場合は別の方法が提供されていないか調べてみま しょう。例えば Twitter は、利用規約の自動化ルール という項目 で明確にスクレイピングを禁止していますが、これは API の利用 が前提となっているためであって、プログラムによる利用自体を禁 じているわけではありません。