istresearch/scrapy-cluster
概要
This Scrapy project uses Redis and Kafka to create a distributed on demand scraping cluster.
リポジトリ情報
| スター数 | ★ 1,229 |
|---|---|
| フォーク数 | 322 |
| 言語 | Python |
| ライセンス | MIT |
| 作成日 | 2015/4/15 |
| 最終更新 | 2023/11/7 |
| Issue数 | 17 |
トピック
distributedkafkapythonredisscrapingscrapy
関連サービス
このOSSの運用に役立つサービス