Seleniumを使用してセレクトタグ（要素）にアクセスする場合には操作したり状態取得できることがいろいろとありますが、セレクトタグの選択する要素であるすべてのoptionを取得したいということもあるのではないかと思います。 (adsbygoogle = window.adsbyg…

今回はPythonとSeleniumを使って、Webスクレイピングの強力なテクニックであるXPathについて紹介します。 XPathはHTML要素を特定するための強力な言語であり、Webページからデータを抽出するのに役立ちます。 では、具体的な例を交えてXPathの使い方を紹介し…

seleniumを使用してWeb情報取得、操作を行っている場合に必要となることの１つにフレーム間移動があります。 Webサイトがフレーム構造となっており、親フレーム、子フレームなどの階層構造になっている場合があります。 そのような場合に該当する要素の情報…

Seleniumを活用して要素取得などをやり始めた頃に出るエラーの１つに「'WebDriver' objects has no attribute 'find_element_by_name'」というエラーがあります。 以下はその内容の説明と対処方法についてになります。 (adsbygoogle = window.adsbygoogle ||…

PythonでSeleniumを利用してWebサイトへウインドウアクセスする場合には、まずは、対象のウインドウを表示させるところからはじまります。 その後、画面内の要素の取得などを行いますがそれらについては、過去記事で記載しました。 kuku81kuku81.hatenablog.…

画面操作のRPA化を行うような場合にはSeleniumなどのライブラリを使用して行うことになります。 その中で画面操作に関しては、対象のウインドウを表示させ、操作したい要素を取得するところからはじまりますが、それについては、以下の過去記事などでも紹介…

今回はPython、Seleniumで新しいタブを開く方法の説明になります。 新タブはjavascriptの実行によりwindow.openを使用することで開くことができます。 尚、Seleniumのバージョンアップでウェブドライバーの設定方法が変わったこともあり、以下の例はSelenium…

Seleniumを使用してWeb情報取得、操作を行っている場合に必要となることの１つにフレーム間移動があります。 Webサイトがフレーム構造となっており、親フレーム、子フレームなどの階層構造になっている場合があります。 そのような場合に該当する要素の情報…

Seleniumを使用してスクレイピングしている場合の話ですが、ウェブドライバーから見て新規ウインドウが追加になった時に、新しいウインドウハンドルは必ずしもブラウザのドライバのハンドル（window_handles）の末尾に追加されるわけではないようです。

PythonでSeleniumを使用してWebサイトへのアクセスをする場合に必要になってくる機能の１つにウインドウの遷移（切替）があります。 Webサイト上でボタンなどをクリックした時に新規ウインドウが別タブ、別ウインドウとして開いた時は、自driverが操作できる…

今回は、Python、seleniumでのウインドウハンドル取得方法についての説明になります。 ウインドウハンドルとはウインドウごとに割り当てられている識別情報のことですが、seleniumでは、ウインドウの切替を行う場合には、この番号を使用して、switch_to_wind…

Pythonでseleniumを利用してウインドウアクセスする場合には、まずは、対象のウインドウを表示させるところからはじまります。 ということで、今回は、対象のウインドウのURLからウインドウの表示のさせ方とその後のウインドウのURLとタイトル取得方法につい…

Seleniumのバージョン４の場合のwebdriverの自動バージョンアップの方法の説明になります。 Seleniumのバージョン４の場合、途中のバージョンで仕様変更があったためSeleniumのバージョンによってやり方がかわることになります。 今回の例ではChromeの場合の…

PythonとSeleniumを使ってWebスクレイピングする場合についてですが、Seleniumのwebdriver設定についての仕様が変更になっていたことについてです。 webdriver設定に関してはいろいろとやり方はあると思いますが、これまではたとえば以下のようにしてやって…

最近使用しているＰＣの1台に問題が発生しインターネット接続ができなくなりました。 「プライマリDNSサーバーと通信できません」というエラー内容があり、DNSサーバーとの通信がうまくいっていないということだったので前回の記事でその場合の代替方法とし…

昨日まで問題なく使えていたインターネット接続が突然できなくなった。。。 そんなことがありました。 原因がわからずだったのですが、代替の解決方法があったので備忘録として残しておきます。 (adsbygoogle = window.adsbygoogle || []).push({}); １．エ…

Pythonでseleniumを利用してウインドウアクセスする場合には、通常は対象のウインドウを表示させるところからはじまります。 ということで、対象ウインドウのURLを元にしてウインドウを表示させる方法と、その逆に表示されているウインドウのURLとタイトルを…

SeleniumにてWebサイトアクセスなどを行っている時に発生するエラーには以下のようなものがあります（SessionNotCreatedException）。 (adsbygoogle = window.adsbygoogle || []).push({}); １．エラー発生内容 msedgedriverバージョン不一致エラー これは、…

Pythonでseleniumを利用してウインドウアクセスする場合の簡単な例の第2弾として、Google検索画面にアクセスし、キーワードを入力、表示された結果のタイトルとURLをExcelに書き込みするまでを載せておきたいと思います。 前回同様内容としては、各ブラウザ…

主にPythonでSelenium関連を通してRPA化などを行っていく場合に必要な情報として過去に載せてきた内容を一覧にして記載していますのでご参照ください。 (adsbygoogle = window.adsbygoogle || []).push({}); １．全体的な一通りの手順 ダウンロード、インス…

今回はPython、Seleniumで新しいタブを開く方法の説明になります。 新タブはjavascriptの実行によりwindow.openを使用することで開くことができます。 もう１つ、driver.switch_to.new_window("tab")使用による方法もありますが、それは以下の記事などで用例…

前回は、 「各ブラウザ用のドライバーを自動アップデートする方法」を記載しました。 その中でコード追加については、 from webdriver_manager.microsoft import EdgeChromiumDriverManager： ： ： custom_path=os.getcwd() driver_path=EdgeChromiumDriver…

Seleniumでスクレイピング、RPA化などを行っていると、時々ブラウザのバージョンとドライバーのバージョンがあっていないということでエラーが出ることがあります。 その都度、手動でブラウザのドライバーのアップデートを行います。 これが結構面倒なので、…