高速スクレイピングでデータ収集をし業務自動化します

ECサイト、不動産サイト、株価や為替の金融データ収集経験あり

Web上のデータスクレイピングもしくはAPIを用いて収集しご希望のファイル形式に出力するツールを作成します。 ✅ニュースサイトから記事を自動取得 ✅ECサイトのデータを取得し価格調査 ✅株価や為替などの情報を取得 ✅Webページの更新を定期的に監視 などが可能です。 また追加で費用が発生しますが、 ✅取得したデータをSNS(LINEなど)へ通知 ✅ログインが必要なサイトのデータを取得 なども承ります。 その他にもデータの収集やそのデータの加工など可能なのでお気軽にご相談ください。 ⚠️ツールはWindows、Mac、Linux(サーバー等)で利用可能な形式で納品いたします。 こちらでデータを収集し取得データのみの提供も可能です。 ツールの作成にはGo(golang)をメインに使用しており、一般的にスクレイピングでよく使用されているpythonに比べると実行速度が速くメモリの利用量も少ないためパソコンへの負荷も少なく高速に利用可能です。 要件などにより必要に応じてpythonも使用しています。 【注意事項】 ・スクレイピングを行うことが困難なサイトも存在しますのでご購入前に対象のサイト、取得したい項目等をご相談ください。 ・対象のサイトの利用規約をご確認の上、ツールの使用に関しては自己責任でお願いします。