Python+Selenium+ChromeでウェブスクレイピングしてYouTubeの動画をダウンロードします.本稿では,OfflibertyをSeleniumでダウンロードします. 前回までの甘茶の音楽工房のダウンロードを実施していましたが,せっかくなのでseleniumをとうしたブラウザの操作をし ...
Pythonを何に使うのかにもよるが、私の場合はWebブラウザで特定のページにログインし、必要なデータファイルをダウンロード。それをExcelで加工という手順になるので、webブラウザ操作のためにWebDriverが必要になる。webブラウザがchromeでもEdgeでもこれは必要。
前回、Google Chromeを自動操縦するために、SeleniumとChromeDriverをインストールした。これを利用することで、ChromeブラウザをPythonから本格的に操作できる。Chromeを実際に操作するため、セッション機能を利用した会員制のサイトや、JavaScriptが多用されている動的 ...
PythonにはデータをWebから取得する命令がいろいろある。最も簡単なのは、Pythonに標準で用意されているurllib.requestだ。これを使うと任意のURLからデータを取得できる。しかし、最近のWebサイトは、セッションという仕組みを利用していたり、JavaScriptでページ ...
クレジットカードの利用明細はこまめにチェックする必要があるが、専用サイトにログインして明細をダウンロードするのは面倒だ。そこで、自動でダウンロードするプログラムを作ってみよう。前回に引き続き今回は、実際に会員制のサイトにログインし ...