公開されているWebページから、商品情報・店舗情報・一覧データなどを機械的に収集し、CSV/Excelの一覧にして納品します。手作業でコピー&ペーストを繰り返している作業の肩代わりです。対象URLのリストと、取りたい項目(例:商品名・価格・URLなど)を教えていただければ、あとは丸投げOKです。
この出品の特徴は、取得できなかった分を隠さないことです。ページが消えている・構造が違う・取得をブロックされた等で取れなかったURLは、「取得できなかったURL一覧」として理由つきでお渡しし、代表ページとの照合結果も付けます。「何件中何件取れたか」が分かる状態で納品します。
スポット収集(1回だけの収集)が基本です。定期的に同じ収集を繰り返したい場合は、オプションの「ツール化」で、ご自身で再実行できるスクリプトとして納品します。
※収集作業にはプログラムとAIツールを活用します。対象サイトの利用規約とrobots.txtを確認し、サーバーに負荷をかけない間隔でアクセスします。
【数え方の定義】基本価格の範囲:1サイト・同じ構造のページ60URLまで・取得項目5項目まで/サイトが異なる場合、ページ構造が大きく異なる場合はそれぞれ別枠として数えます
【料金】基本 3,000円/ツール化 +5,000円(合計8,000円〜)/URL追加(60URLごと)+2,000円/取得項目の追加(5項目ごと)+1,500円
【お届けするもの】収集データ(CSV/Excel)/取得できなかったURL一覧(理由つき)/照合メモ(対象件数・取得件数・代表ページとの照合結果)/ツール化オプションの場合:スクリプト本体+使い方メモ
【進め方】1. 購入前の相談で対象サイトのURLサンプルと取りたい項目を教えてください 2. 利用規約・robots.txtを確認し、対応可否と範囲・料金を提示します(対象外の場合はこの時点でお断りします)3. 収集→照合→納品 4. 納品データの形式ミス等の修正は1回まで対応(対象サイトの仕様変更による再収集は別途ご相談)
【注意事項・対象外】ログイン必須のサイト、CAPTCHAのあるサイトは対象外/利用規約やrobots.txtで自動収集が禁止されているサイトは対象外/個人情報(氏名・住所・電話番号等)の収集は対象外/SNSの投稿・フォロワー情報などの収集は対象外です/対象サイトの仕様変更により将来同じ収集ができなくなる場合があります
・対象は公開サイトのみです。ログインが必要なページは対応しません
・著作権のある文章・画像そのものの大量複製を目的とする収集はお受けできません(タイトル・価格・URL等の事実データの収集が対象です)
・収集データの利用は対象サイトの利用規約の範囲内でお願いします
・大量アクセスにならないよう収集には間隔を空けます。即時の大量収集はお受けできません