Github: https://github.com/scrapy/scrapy
治療
概要
Scrapyは、高速な高レベルのWebクローリングとWebスクレイピングフレームワークで、Webサイトをクロールし、ページから構造化データを抽出するために使用されます。 データマイニングから監視、自動テストまで幅広い用途に使用できます。
機能の一覧を含む詳細については、Scrapyのホームページ( https://scrapy.org)をご確認ください。
要件
- Python 2.7またはPython 3.4以上
- Linux、Windows、Mac OSX、BSDで動作する
インストール
迅速な方法:
pip install scrapy
詳細については、ドキュメントのインストールセクションを参照してください: https : //doc.scrapy.org/en/latest/intro/install.html
ドキュメンテーション
ドキュメントは、 https://doc.scrapy.org/およびdocs
ディレクトリにオンラインで用意されています 。
リリース
リリースノートはhttps://doc.scrapy.org/en/latest/news.htmlで見つけることができます。
コミュニティ(ブログ、ツイッター、メールリスト、IRC)
https://scrapy.org/community/を参照してください。
貢献する
https://doc.scrapy.org/ja/master/contributing.htmlを参照してください。
行動規範
このプロジェクトはコントリビュータ行動規範( https://github.com/scrapy/scrapy/blob/master/CODE_OF_CONDUCT.mdを参照)で公開されています 。
このプロジェクトに参加することによって、その条件を遵守することに同意します。 受け入れがたい動作をopensource@scrapinghub.comに報告してください。
スクラップを使用する企業
https://scrapy.org/companies/を参照してください。