【スプレイピング】PythonでWebページの画像をすべて保存する方法。【楽に画像収集】

※このサイトの記事内では広告を掲載している場合があります。

今回は、PythonでWebページ上の画像をすべて保存する方法を解説します。

環境はGoogle Colaboratoryです。ご自身のGoogle Driveに自動保存するようにプログラムを作成したので少しでも参考になれば幸いです。

無料オンライン相談を活用しよう！

Pythonというプログラミング言語は機械学習の人気の高まりなどもあり、様々なスクールが無料説明会を開催しています。

その中でも「Freeks(フリークス)｜業界初！10,780円のサブスク型プログラミングスクール」がオススメです。Pythonを効率よく学びたいという方はまずは適性を知るためにも無料説明会を利用しましょう。

無料説明会を参加してみる！

コンテンツ

1 実行環境
2 ソースコード
3 実行結果
4 まとめ

実行環境

今回は「Google Colaboratory」を使います。本プログラムはローカルの環境でも実行可能ですが、モジュールのインポート、ファイルパス等適宜変更する必要があります。

スクレイピングに関して、以下の記事も参考になると思います。

参考：PythonでWebページの見出しをすべて抽出する方法！【スクレイピング】CSVファイルからの抽出方法も解説！
参考：【PyScript】HTMLファイルに書くPythonを徹底解説！ローカルサーバでWebブラウザで実行してみよう！

ソースコード


import requests
from bs4 import BeautifulSoup
import os

# 画像を保存するディレクトリのパス
SAVE_DIR = "content/drive/Mydrive/images/"

# 画像のURLを抽出する関数
def extract_images(url):
    response = requests.get(url)
    soup = BeautifulSoup(response.text, "html.parser")
    img_tags = soup.find_all("img")

    image_urls = []
    for img_tag in img_tags:
        img_url = img_tag.get("src")
        if img_url and img_url.startswith("http"):
            image_urls.append(img_url)

    return image_urls

# 画像をダウンロードする関数
def download_image(url, save_dir):
    response = requests.get(url)
    if response.status_code == 200:
        image_data = response.content
        file_name = url.split("/")[-1]
        save_path = os.path.join(save_dir, file_name)

        with open(save_path, "wb") as f:
            f.write(image_data)
            print(f"Image saved: {save_path}")

# メインの処理
def main():
    # 画像保存用のディレクトリを作成
    os.makedirs(SAVE_DIR, exist_ok=True)

    # スクレイピングするURL
    url = "https://nano-toy-lab.com/miscellaneous-notes/excel_training/"

    # 画像のURLを抽出
    image_urls = extract_images(url)

    # 画像をダウンロード
    for image_url in image_urls:
        download_image(image_url, SAVE_DIR)

if __name__ == "__main__":
    main()