Web上の情報を効率的に集める方法：Webスクレイピング by Octoparse

はじめに今回は、データを扱う研究者向けの情報として、大量の検索結果一覧の情報を効率的に収集する方法を紹介します。 まず大前提として、情報を収集した後に研究に使用したり公開したりして良いのか、しっかりと確認してください。今回ご紹介する内容は、すでにデータが公開されているが煩雑な申請を必要とし、ほぼ同じ内容が一般公開されているような、出典を明記すれば誰でも情報を利用可能な場合に適したtipsとなっています。 Webスクレイピングとは？ まず、ウェブサイト内を周回するツールのこ