データ監視工房

データ収集の自動化。停止検知と修正手順書までお渡しします

データ収集の自動化と、その運用サポートをしています。 Webサイトから必要な情報を定期的に集める仕組みを作り、 「作ったあとも動き続けること」までを含めてお渡しすることを大事にしています。 この種の仕組みは、対象サイトの構成が変わると必ず止まります。 止まったことに気づけないまま、古いデータで判断してしまう。 そこが一番の問題だと考えているため、納品時には 「停止を検知する設定」と「修正手順書」を必ずお付けしています。 ■ 対応できること ・Webサイトからのデータ収集の自動化（Python） ・収集した情報の整形と Excel／CSV への出力 ・定期実行の設定 ・動かなくなった既存スクリプトの調査と修復 ■ お受けできないこと ・対象サイトの利用規約で自動収集が禁止されている場合 ・収集対象に個人情報が含まれる場合 ・CAPTCHA等のbot対策を回避する必要がある場合 判断に迷う場合も、曖昧なまま進めず正直にお伝えします。