【スクレイピング】サイト上からデータの取得

【初めに】 基本的に他所でも同時に募集しております。採用率が低く出るのはそのためですが、条件の合う方は積極的に採用させていただきますので、はやめのご応募をお願い致します。 ご応募頂く際は、納期の目安と予算を合わせてご相談ください。 【予算について】 工数や作業時間等が不明瞭なため、とりあえず適当な数値で掲載しています。 納期の目安と合わせてご提案いただければ幸いです。 【提出方法】 CSVではなくエクセルファイルでご提出ください。 数が多くなる場合は分割してください。 【取得対象ページ】 https://cosppi.net/sort/follower-rank に掲載されている全665位までのコスプレイヤーの各ページ 後半の一部ページはデータが無い場合がありました。 上位陣に関しては取得項目が多い傾向にありますが、平均100～500件程度、数十件程度のページもあります。 【取得項目】 ＊以下、https://cosppi.net/user/enako_cos を例に説明します。 ＊添付画像も併せてご覧ください。 ＊順番通りにお願いいたします。 ＊「いいね数順」に最初はなっていますが、必ず「新着順」のページで取得してください。 https://cosppi.net/user/enako_cos?sort=new ①TwitterのアイコンURL 例：https://pbs.twimg.com/profile_images/1535565627548930048/UhnGkSPf_400x400.jpg ②ユーザー名 例：えなこ ③ユーザーID 例：@enako_cos ④ツイート本文 例：夏コミ3日目はレム(リゼロ)のコスプレで一般参加してました！ 暑い中撮影してくださった皆さん、ありがとうございました…！ #C96 #C96コスプレ <span class="showText"></span>部分です 長めの本文の場合、クリックで開くようになって <span class="showText showText_add"></span>部分で表示されている部分になります。省略したままにならないようにお願い致します。 ⑤画像URL 例：https://pbs.twimg.com/media/EBrOoaSU4AAp4uW.jpg 画像クリック前の画像はhttps://pbs.twimg.com/media/EBrOoaSU4AAp4uW.jpg:smallのように:smallが末尾に付いていますが、:smallは削除してください。 ⑥画像URL ＊⑤と同じものです。納品後、こちらで整形する都合上、⑤と同じデータを6列目にお願いいたします。 ⑦リツイート数 例：38044 ⑧いいね数 例：159628 当該サイトの場合はいいね、リツイートの順ですが、取得はリツイート、いいねの順にお願いします。 ⑨日付 例：2019年08月11日 当該サイトの場合、2019/08/11のように表記されていますが、上記のように年月日の形式に直してください。 取得項目は以上です。①～③に関してはそのコスプレイヤーの投稿全部共通する形になります。添付のエクセルファイルも参考にしてください。