webスクレイピングについて

インターネットを経由して必要な情報の取得や、webの操作を自動化するには

seleniumを利用します。

標準モジュールではないので、pip install seleniumでインストールする必要があります。

chromeのドライバを指定して利用するには、

from selenium import webdriver

driver = webdriver.Chrome()

driver.get(URLを記載) 

で可能です。

しかし、chromeのバージョンとパソコン内のchromeドライバーのバージョンが同じでないとエラーが発生し、スクレイピングが中断してしまいます。

chromeのバージョンの確認は、chromeを開いて、『設定』→『chromeについて』を開くことで可能となります。

しかし、chromeのバージョンは突然変わることもあり、その度に

chromeのドライバーをインストールしなおすには手間がかかり、保守性が低下してしまいます。

そこで、この対処方法を次回のブログで紹介しようと思います。