Web情報を集めてCSV・Excelにまとめます

Web上の一覧情報を集めたい方へ、指定項目をCSV / Excelに整理して納品します。 企業・店舗・案件・商品など、公開ページから必要な項目を抜き出します。 取得前に利用規約とrobots.txtを確認し、禁止されているサイトは取得しません。 対象URLと「名称・住所・価格・URL」などの必要項目を伺い、対象ページの構造と取得可否を確認します。scraper-jobsの仕組みを使い、一覧ページを自動でページ送りしながら巡回し、指定項目の抽出、相対URLの絶対URL化、重複除去を行います。納品形式は、Excelで扱いやすい文字コードのCSVと、列幅調整・見出し固定・絞り込み・URLリンク設定を行ったExcelです。 取得前には、対象サイトの利用規約とrobots.txtを確認します。robots.txtで禁止されているサイト、利用規約で自動収集が禁止されているサイトは取得しません。robots.txtが確認できない場合も、対象サイトへHTMLを取りに行きません。規約上の許可やデータ利用の適法性を判断するサービスではありません。 基本料金は、取得可能な1サイト・100件程度・5項目までを目安とします。作業時間の目安は2〜4時間です。JavaScriptで後から表示されるページ、ログインが必要なページ、個人名や個人の連絡先の収集には対応しません。決済、ログイン認証、既存システム改修、DB設計も受けていません。まずは対象URL、項目、件数、用途をお知らせください。確認とお見積りは無料です。 含まれるもの - 対象URLの構造、利用規約、robots.txtの確認 - 指定項目の収集、相対URLの変換、重複除去 - CSV納品（Excelで開きやすい形式） - 列幅・見出し固定・絞り込み・URLリンクを設定したExcel納品 - 納品前の件数・列内容の確認 含まれないもの - robots.txtまたは利用規約で禁止されているサイトの取得 - robots.txtを確認できないサイト、ログインが必要なページの取得 - JavaScriptで後から表示されるページのブラウザ自動操作 - 個人名・個人の連絡先などの個人情報の収集 - 決済・ログイン認証・既存システム改修・DB設計 - 収集用ツール本体の譲渡、定期実行、メール送信の仕組み