PythonでWebページの取得 (00)

URLを指定して、そのWebページ(HTMLファイル)を得る方法

sudo pip install requests
や
sudo pip3 install requests

を行って requests をインストールしてください。

次に、以下のプログラム (00.py)を作成して実行。

import requests
url = "https://www.google.com/"
r = requests.get(url)
print(r.text)

実行方法

python3 00.py

proxyの設定をしたい方は(例えばbashなら)以下の様にしてください。

export http_proxy=http://proxyのホスト名:ポート番号
export https_proxy=http://proxyのホスト名:ポート番号
export ftp_proxy=http://proxyのホスト名:ポート番号