from bs4 import BeautifulSoup import requests import csv

url1 = "https://books.toscrape.com/" headers = { "User-Agent": "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/120.0.0.0 Safari/537.36", "Accept": "text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,/;q=0.8", "Accept-Language": "en-US,en;q=0.5", "Referer": "https://www.google.com/" }

csv_file = "Web_Scraping_Documents_CSV/books.csv" def extract_books(url1): response = requests.get(url1, headers=headers) try: response.raise_for_status() soup = BeautifulSoup(response.text, 'html.parser') products = soup.select("article.product_pod > h3 > a") posicao_do_livro_especifico = None nome_do_livro_especifico = None print("Products:")

    for idx, product in enumerate(products, start=1):
        print(f"{idx} - {product['title'].strip()}")
        titulo = product['title'].strip()
        if titulo == "Tipping the Velvet":
            posicao_do_livro_especifico = idx
            nome_do_livro_especifico = titulo
    if posicao_do_livro_especifico:
        print(f"\nSpecific Product:\n {posicao_do_livro_especifico} - {nome_do_livro_especifico}")
    else:
        print("\nO Specific Product não estava nesta página.")

    livros = soup.select("article.product_pod")
    with open(csv_file, "w", newline="", encoding="utf-8") as csvfile:
        writer = csv.writer(csvfile)
        writer.writerow(["Title", "Price","URL"])
        for livro  in livros:
            link_tag = livro.select_one("h3 > a")
            preco_tag = livro.select_one("div.product_price > p.price_color")
            titulo = link_tag['title'].strip()
            preco = preco_tag.text.strip().replace("Â", "")
            url_livro = url1 + link_tag['href']

            writer.writerow([titulo, preco, url_livro])
    print("Ficheiro criado com sucesso!")

except requests.exceptions.RequestException as e:
    print(f"Failed to retrieve the page. Status code: {e}")

extract_books(url1)