kizataka/scraping_abs

個人開発：画像収集の自動化プログラム

概要

一言で言うと、スクレイピングのプログラムです。
具体的な内容としては、特定のキーワードを指定するとYahoo!画像検索サイトからキーワードに関する画像を自動で収集・保存するプログラムです。

abs_selenium.pyファイルの8行目のところで取得したい画像に関するキーワードを指定します。
その上でプログラムを実行するとimagesフォルダが作成され、そのフォルダに収集した画像が保存されていきます。

また、収集した画像がどこのサイトのものなのかを後で辿れるように、収集した画像のYahoo!検索サイト上のURL(yahoo_image_url)、その画像があるサイトのURL(raw_url)をデータ化し、CSVファイルとして出力されるようになっています。