WebページとそのすべてのリソースファイルをPythonでダウンロードする

Question

Pythonを使用してページとそれに関連するすべてのリソース（イメージ、スタイルシート、スクリプトファイルなど）をダウンロードしたいと考えています。私は（やや）urllib2に精通していて、個々のURLをダウンロードする方法を知っていますが、BeautifulSoup + urllib2でハッキングを開始する前に、すでに「wget --page-requisites http://www.google.com」に相当するPythonがないことを確認したかったのです"

具体的には、すべてのリソースを含め、ウェブページ全体をダウンロードするのにかかる時間に関する統計情報を収集することに興味があります。

おかげ マーク

Answer 1

Websucker？ http://effbot.org/zone/websucker.htm

Answer 2

を参照してください。websucker.pyはCSSリンクをインポートしません。 HTTrack.comはPythonではなく、C/C++ですが、オフラインブラウジング用のWebサイトをダウンロードするための優れた管理されたユーティリティです。

http://www.mail-archive.com/python-bugs-list@python.org/msg13523.html [issue1124] Webcheckerは、CSS "@importのURL"

グイドを解析しない>これは、本質的にサポートされていないとunmaintanedコード例です。無料の でもパッチを提出してください！