requests

1import requests
2
3r = requests.get("URL")

ウェブページのソースを取得するにはrequestsモジュールを使います。 Beautiful Soup 4を組み合わせて使う場合が多いです。

リクエストしたURLを確認したい

1r.url

取得したコンテンツを確認したい

1r.content  # バイナリで表示
2r.text     # 文字列で表示

エンコーディングが適切でないと.textメソッドは文字化けすることがあります。

エンコーディングを確認したい

1r.encoding
2r.apparent_encoding