サービスを探す
出品者を探す
悩み相談 カウンセリング・コーチング 恋愛・結婚相談 キャリア・就職相談 暮らし・住まいの相談 不動産・税金・保険・ローンの相談 子育て・教育・受験の相談 健康・医療の相談 旅行・おでかけの相談 趣味・娯楽
仕事・相談を探す

webサイト上からデータを収集します

クローラーを使って効率的にデータを大量収集

5.01 販売実績:1 残り:1枠(お願い中:0人)

サービス内容

pythonでクローラーを作成し、データを自動収集致します。クローラーというのはウェブサイト中のリンクを辿りながら、所定のデータを自動で収集するプログラムのことです。人手でやるよりミスが少なく、効率的にデータを集めることができます。

当方は現役でデータサイエンティストをしており、こういった作業には詳しいです。
質問は無料でできますので、こんなこと出来ますかというような質問でも気軽にして頂いて大丈夫です。

販売するのは収集したデータになりますが、ソースコードが欲しい場合はオプションで選択をお願いします。

◆ データ購入のメリット
- プログラムの実行環境を整えなくても良い
- 通信量の心配をしなくても良い

◆ ソースコード購入のメリット
- 収集先のページが更新された時など、自由に最新データを収集できる
- クローリング、スクレイピングの勉強をしたい場合、参考にできる

◆ 過去にスクレイピングしたサイト
- Project Gutenberg
- Huffpost news
- Yahoo!映画
- グッピー医療求人
- keirin.jp
- 保育士バンク
- 保育Fine

こちら公開しているクローラーです。実際に販売するものとは少し作りが違うのであまり参考にならないかもしれませんが記載しておきます。
https://qiita.com/shosone/items/ada4e16f075e43715380
https://qiita.com/shosone/items/64e439a816f2b3df58a6

すべて読む
  1. 提供形式
    テキストチャット

    ビデオチャット打ち合わせ可能

  2. お届け日数 要相談 
    用途
    • データクレンジング
    言語
    • Python

有料オプション


購入にあたってのお願い

- 1ドメイン分の販売とさせていただきます。
- ソースコードを購入される場合は、こちらではクローラーの動作確認をしますが、データ収集は原則行いませんのでご注意ください。
- 当方の開発環境はMax OS X、Ubuntuです。Windowsでの開発経験は1年弱ほどであまり詳しくありません。(winユーザへのクローラ販売経験はあります。必要であれば動作環境の構築をサポート致します)

すべて読む

評価・感想(1件) 5.0

読み込んでいます...

得意を購入しよう!

登録はたった30秒。ココナラに登録してサービスを購入しよう。

Eメールで新規登録(無料) Facebookで新規登録(無料) YahooIDで新規登録(無料)
既に登録されている方はこちら

関連サービス