Pythonでスクレイピング技術を習得しており、様々なスクレイピングに対応できます。
スクレイピングは3年間で、1000社以上のホームページを行ない、また検索サイト、求人サイトなどのスクレイピングツール開発を行なってきております。
他のクラウドソーシングで約30件、完了率90%の実績がございます。是非ご発注の候補として検討いただけると幸いです。
●スキル・経験概要
Pythonを活用したWebスクレイピング、データ収集・加工・解析業務に多くの経験を有し、業務の自動化・効率化に貢献できます。
動的ページ対応やログイン処理、自動通知機能など実用性に重きを置いたシステムを複数構築しております。また開発にはCursor、Antigravityを導入し、柔軟かつ迅速な機能拡張にも対応可能です。
さらにAIを活用したツール開発、データ分析や相談支援も行えます。
アプリの制作や画像生成、動画編集の自動化などのツール開発もおこないます。
●使用技術
- 言語・フレームワーク:Python, VBA, GAS, BeautifulSoup, Selenium 等
- 通信・データ取得:Requests
- データ整形・保存:Pandas, 正規表現(reモジュール), CSV / JSON / OpenPyXL 等
- 関連技術・知識:User-Agent設定、robots.txt確認、スクレイピング倫理・法的配慮、プロキシ/IPローテーション、ログイン処理、並列処理(マルチスレッド/マルチプロセシング)
- 使用ツール:Cursor(ノーコード/ローコード活用による開発高速化)
●主な実績・ポートフォリオ
- ECサイトの商品情報収集・Excel出力ツール
Seleniumでのページ遷移処理とPandasによるデータ整形を組み合わせ、定期的な商品価格・仕様の自動取得を実現。動的要素対応およびCSV/Excelへの一括出力に対応。
- 求人情報クローラー
種々サイトから職種・勤務地等の検索条件をURL合成、正規表現等を駆使して抽出し、CSV/Excelへ出力。
- 金融情報アラートシステム
特定銘柄・通貨の価格情報を定期取得し、設定条件を満たした場合にメール通知を自動送信。
- 企業ホームページの情報収集・所定フォーマット出力
企業サイトの「会社概要」欄から所在地・設立年など必要情報を抽出し、指定されたExcelテンプレートに自動転記。複数形式への対応も可能。
- OTA(オンライン旅行代理店)の価格情報スクレイピング
ホテル価格・在庫状況を定期取得し、CSV/Excelへ保存。価格変動の傾向分析用データ等に利用可能。
- AIチャットボット(翻訳ツール)
GPT APIを利用したチャットボットツールの作成