毎朝決まった時間に、Webサイトの情報がGoogleスプレッドシートに
自動で書き込まれる仕組みをつくって、そのままお渡しします。
「毎朝同じページを開いて、数字をコピペしている」
その作業を、GAS(Google Apps Script)でスプレッドシートに置き換えます。
翌朝からは、シートを開けば昨日までのデータが並んでいる状態になります。
■ お渡しするもの
・GASスクリプト設定済みのGoogleスプレッドシート(毎朝の自動実行を設定済み)
・設定変更の手順書(取得時刻や項目を変えたいときに、どのセル・どの行を触ればよいか)
・止まったときの確認手順書(どこを見て、何を確認すればよいか)
■ 対象範囲(この価格でできること)
・対象は1サイト または 1データソース(公式APIやCSV配布など)
・取得する項目は5項目程度まで(例: 日付、商品名、価格、順位、在庫表示)
・実行は1日1回(毎朝)。シートには日付つきで蓄積されていきます
■ この出品の特徴
・スプレッドシートだけで完結します。サーバーやパソコンの常時起動は不要で、
月々の維持費は0円です(Googleアカウントの無料の範囲で動きます)
・仕組みはお客様ご自身のGoogleアカウント上に設定するので、
納品後はすべてお客様のものです。私の手元には何も残りません
■ 他の出品との違い
・「止まらない収集の仕組み」(15,000円〜)は、複数ページの巡回など本格的な収集を
Pythonで構築するものです。こちらは、GASで届く範囲のデータを
小さく・シンプルに毎朝集める入口の出品です
・「CSV・Excelデータ整形」(5,000円)は、いまあるデータを一度きれいにするものです。
こちらは、明日からのデータが毎朝自動で増えていく仕組みです
■ 進め方
1. 対象のURL・取得したい項目・希望の実行時刻を伺います
2. 対象サイトの利用規約とrobots.txtを確認します(必ず行います)
3. GASで取得できるかを技術面でも確認し、お受けできるかご返答します
4. 作成し、数日分の自動実行を確認したうえで、手順書とあわせて納品します
■ お受けできない場合
・対象サイトの利用規約で自動収集が禁止されている場合
・収集対象に個人情報(氏名・連絡先等)が含まれる場合
・ログインが必要なページ、CAPTCHA等のbot対策の回避が必要な場合
・JavaScriptでの描画が必要な等、GASでは取得できない構造のサイト
(この場合は、Pythonで構築する別出品をご案内します)
確認の結果お受けできない場合は、作業前にご連絡し、
キャンセルのご相談をさせていただきます。まずはお気軽にご相談ください。
ご購入前に、以下をお知らせください。お受けできるかを先にご返答します。
・対象サイトまたはデータソースのURL(1件)
・取得したい項目(5項目程度まで。例: 商品名、価格、順位)
・毎朝の実行時刻のご希望(例: 朝7時ごろ)
・データの利用目的(社内での確認・分析など)
次の場合はお受けできません。
・対象サイトの利用規約で自動収集が禁止されている場合
・収集対象に個人情報(氏名・住所・電話番号・メールアドレス等)が含まれる場合
・CAPTCHA等のbot対策の回避や、他人のアカウントでのログインが必要な場合
対象サイトの利用規約・robots.txtは、作業前に必ず確認します。
確認の結果お受けできない場合は、キャンセルのご相談をさせていただきます。
仕組みの設定にはお客様のGoogleアカウントが必要です(無料のもので構いません)。
設定方法は手順書とチャットでご案内しますので、詳しくない方でも大丈夫です。