2016年2月17日

kimonoに変わるスクレイピングサービス

クリックだけであらゆるサイトをスクレイピングできるWebサービス「kimono」が凄い(ソフトアンテナブログ)
WebスクレイパーサービスKimono LabsがPalantirに買収され、サービスは2月末に閉鎖へ(TechCrunch Japan)
そのデスクトップアプリケーションをFirebaseに統合して、クラウドからのAPIのエンドポイントを提供する。デスクトップバージョンのユーザーは3月31日までに、新たにホストされるサービスからAPIをインポートすること。

あるいはKimonoに代わるWebスクレイパーサービスとして、ScrapyFeedityなどを使ってもよい。
PythonとかScrapyとか使ってクローリングやスクレイピングするノウハウを公開してみる!(orangain flavor)

Scrapy 1.0が公開されました(orangain flavor)