【Pythonで挑戦】Webスクレイピングで日経225の全銘柄リストを自動取得しよう！

pip install requests beautifulsoup4

import requests
from bs4 import BeautifulSoup
import csv

def get_nikkei225_stocks_from_html(html_content):
    """
    HTMLコンテンツから日経225の構成銘柄リストを解析して取得する関数
    """
    soup = BeautifulSoup(html_content, 'html.parser')
    
    # 業種ごとのセクション（div）をすべて取得
    sections = soup.find_all('div', class_='idx-index-components')
    
    if not sections:
        print("エラー: 銘柄情報セクションが見つかりませんでした。")
        return None

    all_stocks = []
    # 各セクションをループ処理
    for section in sections:
        # 業種名を取得
        industry_tag = section.find('h3', class_='idx-section-subheading')
        if not industry_tag:
            continue
        industry = industry_tag.text.strip()
        
        # セクション内のテーブルから銘柄情報を取得
        table = section.find('table')
        if not table:
            continue
            
        rows = table.find('tbody').find_all('tr')
        for row in rows:
            cols = row.find_all('td')
            if len(cols) >= 3:
                code = cols[0].text.strip()
                brand_name = cols[1].text.strip()
                company_name = cols[2].text.strip()
                
                # [コード, 銘柄名, 社名, 業種] の順でリストに追加
                all_stocks.append([code, brand_name, company_name, industry])

    return all_stocks

def save_to_csv(stocks, filename="nikkei225_stocks.csv"):
    """
    取得した銘柄リストをCSVファイルに保存する関数
    """
    if not stocks:
        print("データがありません。CSVファイルは作成されませんでした。")
        return
        
    header = ['コード', '銘柄名', '社名', '業種']
    
    try:
        # utf-8-sig を指定してExcelでの文字化けを防ぐ
        with open(filename, 'w', newline='', encoding='utf-8-sig') as f:
            writer = csv.writer(f)
            writer.writerow(header)
            writer.writerows(stocks)
        print(f"'{filename}' に銘柄情報を保存しました。")
    except IOError as e:
        print(f"エラー: ファイルの書き込みに失敗しました - {e}")

# --- メインの実行部分 ---
if __name__ == "__main__":
    url = "https://indexes.nikkei.co.jp/nkave/index/component?idx=nk225"
    headers = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36'
    }
    
    print(f"Webサイトからデータを取得しています... ({url})")
    
    try:
        response = requests.get(url, headers=headers)
        response.raise_for_status()
        response.encoding = response.apparent_encoding
        
        stock_list = get_nikkei225_stocks_from_html(response.text)
        
        if stock_list:
            save_to_csv(stock_list)
            
    except requests.exceptions.RequestException as e:
        print(f"エラー: Webサイトへのアクセスに失敗しました - {e}")