【サービス紹介】
スクレイピング・自動化が行えるPythonのサンプルスクリプトを提供いたします。
自分で作りたいけど取っ掛かりが欲しい方、すぐ作り始めたい方向けです。
・株価や企業の決算情報を定期的に収集したい。
・商品情報や価格などの情報を収集したい。
・Webサイト上の画像やPDFファイルを一括でダウンロードしたい。
・ログインが必要なページから必要な情報を収集したい。
などといった自動化・スクレイピングをご自身で作りたい方の取っ掛かりとなるプログラムをソースで提供いたします。
CloudFrontが導入されている環境でも動作できる様ライブラリを使ったプログラムを提供しています。
※CloudFrontを100%透過できるわけではないのでご注意ください。実行環境のIPアドレスの信頼度によって、CloudFrontを透過できない場合があります。
【サービスの特徴】
提供物は以下となります。
・スクレイピング環境セットアップツール
・サンプルプログラム2つ
1.ニュースを取得しLINEへ通知する
2.サイトへのログイン、キャンペーンへの自動エントリー
■実行環境
OS: RockyLinux 8(8.7で動作確認済み)
プログラム: Python
■注意点
スクレイピング環境は、ご自身で準備いただく必要があります。
スクレイピング環境セットアップツールで構築できる環境はRockyLinux8.7となります。
あらかじめ2パターンの自動化、スクレイピングが実装されたプログラムソース提供となります。
やりたいことをご依頼いただくものではないことにご注意ください。
不明点などございましたら、ご質問いただけますと幸いです。