Pythonでスクレイピングするのに使うもの
Pythonでスクレイピングするのに使うものと、ちょっとした使い方をメモとして記述する。
*スクレイピングする際は、操作するWebページの利用規約などを確認してからやりましょう。くれぐれも迷惑をかけてはいけません。
Pythonでスクレイピング
スクレイピングとは
簡単に言うと、Webページに表示されているデータを取得する技術のこと。
APIがなくてもデータ取得できるし、必要なデータに絞って取得できるのが強み。
スクレイピングを実現する技術一覧
ブラウザを操作する
puppeteer
html.parser
lxml
html5lib
BeautifulSoup4
pyquery
今度使ってみての感想を記事にしようかと思います。