競馬サイトからのスクレイピング、集計、整形等

今回は、データのスクレイピング、集計、整形をして、可視化しやすい形にしていただきたく依頼のご連絡させていただきました。 まず、使うサイトは、5つです。 ①VUMA https://vuma.ai 有料のため、ログインが必要 ②競馬道(競馬Compass) https://www.keibado.ne.jp/sp 有料のため、ログインが必要 ③無料競馬AI https://muryou-keiba-ai.jp ④馬トク https://umatoku.hochi.co.jp 有料のため、ログインが必要 ⑤極ウマPremium https://goku-uma.nikkansports.com 有料のため、ログインが必要 最終的なものは以下のような形になります。 −−−−−−−−−−−−−−−−−−−−−−−−−−−−−−− 【9/28　1R】平穏(①-1) 2歳未勝利 中京 ダ1200m 9頭 曇 良 ８－３－７ (58,480円) コンパス : タイム(①-2) パターン① コンピ : 2・6・8・3・9・4 馬トク : 3・6・2・9・8・7 VUMA : 2・3・9・5・7・4 1️⃣: 5 2️⃣: 6・8・4・7・ 3️⃣: 2・3・9・ パターン② 無料競馬AI : 6・3・2・8・9・4 コンパス : 6・7・2・4・8・9 3️⃣: 7・ 4️⃣: 6・3・8・4・ 5️⃣: 2・9・ −−−−−−−−−−−−−−−−−−−−−−−−−−−−−−− 以下になぜそうなるのか書いていきます。 まず、基本的には①②③④⑤のサイトで、それぞれ上位６頭を抽出していきます。その抽出した馬が被ったら、1→2、2→3など増やしていきます。上記の例だったら、パターン①の馬番9は3回出てきたため、3️⃣のところに記している。 ①VUMA 上位6頭を抽出していく。 ②競馬道　:　競馬Compass ホームから「三」を押すと、 「競馬Compass」が候補として出てくる。 レースを選んでいくと、最初に出てくる画面が「結果」であり、上部タブの「予想」を押すと、 ・バランス重視型理論 ・実績重視理論 ・タイム重視理論 が候補として、出てくるがどの型でもいいので、押す。 レース詳細画面の右上のほうに、「高配含み」や「惑星注意」など(※①-1)様々なカテゴリがある。そのカテゴリ毎にデータを分け集計し、バランス型・実績型・タイム型(※①-2)それぞれの集計結果を出してほしいです。(バランス型・実績型・タイム型それぞれ印がついている馬が違ったりするため。) 上記の京都11Rではタイム型で行っているが、バランス型・実績型などでも見れるようにしたい。 ③無料競馬AI 上位6頭を抽出していく。 ④馬トク SA値を降順に並び替え、上位6頭を抽出していく。 ⑤極ウマPremium コンピ指数の上位6頭を抽出していく。 −−−−−−−−−−−−−−−−−−−−−−−−−−−−−−− 他にも ・東京競馬場や京都競馬場のみなど、競馬場毎に選べるようにしたい。 ・絞り込み機能がほしい。パターン①のみで的中だったり、○○と○○を掛け合わせた条件のみでの的中だったりなど。 「全体」 https://poe.com/preview/pzB6zVeCMRZjHYNc8YAK 「全体」の中の「競馬予想」とコンパス : タイムの間に置くと想定して作ったもの。何をパターン①、パターン②にするか決められるようにする。 https://poe.com/preview/MYfGh5zF6hyqafH5joOu 検索性、絞り込みなど https://poe.com/preview/hErpFH0A4NDIP5lwThEV