価格調査・競合情報・在庫状況などWeb上の情報収集を、定期実行できる形に自動化します。取得結果はCSV・スプレッドシートに出力します。ヒアリングでは対象サイトの構造を確認し、利用規約に抵触しない範囲で設計します。
【対応の流れ】
1. 対象サイト・取得したい項目を共有いただく
2. 利用規約・robots.txt等を確認
3. Pythonで実装し、実データで動作確認
4. 納品後、実行方法を説明
【できること】
・指定サイトからのデータ抽出スクリプト
・定期実行設定(タスクスケジューラー・クラウド)
・CSV・スプレッドシートへの自動出力
【対象外】
・利用規約でスクレイピングを禁止しているサイト
・ログイン必須で個人情報を扱う複雑なサイト(要相談)
・法令に抵触する用途
機械系エンジニアとして日々の業務でも自動化ツールを使っており、実際に運用しながら改善する視点を大事にしています。
ご依頼の際は、以下を教えていただけるとスムーズです。
・対象サイトのURL
・取得したい項目
・実行頻度
・出力形式の希望
対象サイトの利用規約によってはお受けできない場合があります。納期は目安のため、内容によって前後する場合があります。