RError.com

RError.com Logo RError.com Logo

RError.com Navigation

  • 主页

Mobile menu

Close
  • 主页
  • 系统&网络
    • 热门问题
    • 最新问题
    • 标签
  • Ubuntu
    • 热门问题
    • 最新问题
    • 标签
  • 帮助
主页 / 问题 / 1133112
Accepted
Body
Body
Asked:2020-05-29 14:47:26 +0000 UTC2020-05-29 14:47:26 +0000 UTC 2020-05-29 14:47:26 +0000 UTC

存储最后一个元素而不是多个元素

  • 772

我制作了一个解析器来卸载带有图片的文本,为图片制作了一个单独的列表,我尝试将其添加到列表中以进行输出,但它不会保存所有元素,而只会保存最后一个元素。请告诉我该怎么办?

代码本身:

import uuid
import requests
from bs4 import BeautifulSoup
import csv
import os

URL = 'https://ptk-svarka.ru/catalog/apparaty-poluavtomaticheskoy-svarki-mig'
HEADERS = {'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36', 'accept': '*/*'}
FILE = 'svarka.csv'
HOST = 'upload/image/'


def get_html(url, params=None):
    r = requests.get(url, headers=HEADERS, params=params)
    return r

def get_Stranic(html):
    soup = BeautifulSoup(html, 'html.parser')
    items = soup.find_all('div', class_='b-grid__item js-product-item')
    stranica_svarka=[]
    for item in items:
        stranica_svarka.append(
            item.find('a', class_='b-products__text').get('href'),
            )
    return stranica_svarka

def get_image(html):
    soup = BeautifulSoup(html, 'html.parser')
    items = soup.find_all('div', class_='b-grid__item js-product-item')
    image = []
    for item in items:
        image.append(
            item.find('img', class_='lozad').get('data-src')
            )
    return  image

def get_html_vivod(stranic, img):
    for i in img:
        img_way = i.split('/')[-1]
    svarka = []
    for url in stranic:
        r = requests.get(url, headers=HEADERS)
        r = r.content
        soup = BeautifulSoup(r, 'html.parser')
        items = soup.find_all('article', class_='b-product__wrapper')
        for item in items:
            svarka.append({
                "title": item.find('h1', class_='b-product__title').get_text(strip=True),
                "articul": item.find('div', class_='b-product__meta').get_text(strip=True).replace('Артикул: ',''),
                "price": item.find('span', class_='b-products__price').find_next('span').get_text(strip=True).replace(' ', '').replace('р', '.00').replace('\xa0', ''),
                "text": item.find('div', class_='b-product-tab__main').get_text(strip=True),
                "image": HOST + img_way
                })
    return svarka

def save_file(svarka, path):
    with open(path, 'w', newline='') as file:
        writer = csv.writer(file, delimiter=';')
        writer.writerow(['Название', 'Артикул', 'Цена', 'Подробное описание', 'Картинка'])
        global item
        for item in svarka:
            writer.writerow((item.get("title"), item.get("articul"), item.get("price"), item.get("text"), item.get("image")))

def parse():
    URL = input('Введите URL: ')
    URL = URL.strip()
    html = get_html(URL)
    if html.status_code == 200:
        stranic = get_Stranic(html.text)
        img = get_image(html.text)
        svarka = get_html_vivod(stranic, img)
        save_file(svarka, FILE)
        print(f' Получено {len(svarka)} сварочных аппаратов')
        os.startfile(FILE)
    else:
        print('Error')


parse()
python
  • 1 1 个回答
  • 10 Views

1 个回答

  • Voted
  1. Best Answer
    Viewed
    2020-06-05T02:52:52Z2020-06-05T02:52:52Z

    与您的其他问题一样,问题在于方法的空循环get_html_vivod

    循环正确获取名称,但不会将它们存储在任何地方。

    for i in img:
        img_way = i.split('/')[-1]
    

    您可以使用带索引的循环

    for index, value in enumerate('hello, world'):
        print(index, value)
    

    在你的情况下,它看起来像这样

        for index, url in enumerate(stranic):
            ...
            for item in items:
                svarka.append({
                    ...
                    "image": HOST + img[index].split('/')[-1]
                    })
    

    完整版本

    def get_html_vivod(stranic, img):
        svarka = []
        for index, url in enumerate(stranic):
            r = requests.get(url, headers=HEADERS).content
            items = BeautifulSoup(r, 'html.parser').find_all('article', class_='b-product__wrapper')
            for item in items:
                svarka.append({
                    "title": item.find('h1', class_='b-product__title').get_text(strip=True),
                    "articul": item.find('div', class_='b-product__meta').get_text(strip=True).replace('Артикул: ',''),
                    "price": item.find('span', class_='b-products__price').find_next('span').get_text(strip=True).replace(' ', '').replace('р', '.00').replace('\xa0', ''),
                    "text": item.find('div', class_='b-product-tab__main').get_text(strip=True),
                    "image": HOST + img[index].split('/')[-1]
                    })
        return svarka
    
    • 1

相关问题

  • 是否可以以某种方式自定义 QTabWidget?

  • telebot.anihelper.ApiException 错误

  • Python。检查一个数字是否是 3 的幂。输出 无

  • 解析多个响应

  • 交换两个数组的元素,以便它们的新内容也反转

Sidebar

Stats

  • 问题 10021
  • Answers 30001
  • 最佳答案 8000
  • 用户 6900
  • 常问
  • 回答
  • Marko Smith

    如何从列表中打印最大元素(str 类型)的长度?

    • 2 个回答
  • Marko Smith

    如何在 PyQT5 中清除 QFrame 的内容

    • 1 个回答
  • Marko Smith

    如何将具有特定字符的字符串拆分为两个不同的列表?

    • 2 个回答
  • Marko Smith

    导航栏活动元素

    • 1 个回答
  • Marko Smith

    是否可以将文本放入数组中?[关闭]

    • 1 个回答
  • Marko Smith

    如何一次用多个分隔符拆分字符串?

    • 1 个回答
  • Marko Smith

    如何通过 ClassPath 创建 InputStream?

    • 2 个回答
  • Marko Smith

    在一个查询中连接多个表

    • 1 个回答
  • Marko Smith

    对列表列表中的所有值求和

    • 3 个回答
  • Marko Smith

    如何对齐 string.Format 中的列?

    • 1 个回答
  • Martin Hope
    Alexandr_TT 2020年新年大赛! 2020-12-20 18:20:21 +0000 UTC
  • Martin Hope
    Alexandr_TT 圣诞树动画 2020-12-23 00:38:08 +0000 UTC
  • Martin Hope
    Air 究竟是什么标识了网站访问者? 2020-11-03 15:49:20 +0000 UTC
  • Martin Hope
    Qwertiy 号码显示 9223372036854775807 2020-07-11 18:16:49 +0000 UTC
  • Martin Hope
    user216109 如何为黑客设下陷阱,或充分击退攻击? 2020-05-10 02:22:52 +0000 UTC
  • Martin Hope
    Qwertiy 并变成3个无穷大 2020-11-06 07:15:57 +0000 UTC
  • Martin Hope
    koks_rs 什么是样板代码? 2020-10-27 15:43:19 +0000 UTC
  • Martin Hope
    Sirop4ik 向 git 提交发布的正确方法是什么? 2020-10-05 00:02:00 +0000 UTC
  • Martin Hope
    faoxis 为什么在这么多示例中函数都称为 foo? 2020-08-15 04:42:49 +0000 UTC
  • Martin Hope
    Pavel Mayorov 如何从事件或回调函数中返回值?或者至少等他们完成。 2020-08-11 16:49:28 +0000 UTC

热门标签

javascript python java php c# c++ html android jquery mysql

Explore

  • 主页
  • 问题
    • 热门问题
    • 最新问题
  • 标签
  • 帮助

Footer

RError.com

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

帮助

© 2023 RError.com All Rights Reserve   沪ICP备12040472号-5