RError.com

RError.com Logo RError.com Logo

RError.com Navigation

  • 主页

Mobile menu

Close
  • 主页
  • 系统&网络
    • 热门问题
    • 最新问题
    • 标签
  • Ubuntu
    • 热门问题
    • 最新问题
    • 标签
  • 帮助
主页 / 问题 / 1021563
Accepted
Каролина
Каролина
Asked:2020-09-09 03:50:30 +0000 UTC2020-09-09 03:50:30 +0000 UTC 2020-09-09 03:50:30 +0000 UTC

python解析器没有提取所有数据

  • 772

我正在尝试编写一个解析器来从网站中提取电影标题。其结果是,而不是 135 片的电影清单。只有一个出来。你能告诉我有什么问题吗?

import requests
from bs4 import BeautifulSoup
import csv

def get_html(url):
    r = requests.get(url)    # Получим метод Response
    r.encoding = 'utf8'
    return r.text   # Вернем данные объекта text

def csv_read(data2):
    with open("data2.csv", 'a') as file:
        writer = csv.writer(file)
        writer.writerow(data2['head'])

def get_link(html):
    soup = BeautifulSoup(html, 'lxml')
    head = soup.find('span', class_='name').find_all('a')
    heads = []
    for i in head:
        heads.append(i.string)
        data2 = {'head': heads}
        print(i.string)
    csv_read(data2)


data = get_link(get_html('https://www.kinopoisk.ru/name/31969/'))

我试图从中取名字的一段代码:

  <span class="num">16</span>
                        <table>
                            <tr>
                                <td>
                                    <span class="name">
                                        <a href="/film/695609/" >
                                            Джуманджи: Зов джунглей&nbsp;(2017)</a>, <font style='color: #393; white-space: nowrap'>$ 20&nbsp;000&nbsp;000 </font></span>
                                    <span class="role">
                                        Jumanji: Welcome to the Jungle&nbsp;...&nbsp;Spencer<span style="font-weight:bold;">
                                                    </span>
                                            <!--&nbsp;-->
                                    </span>
                                </td>
                            </tr>
                        </table>
                    </div>
                                        <div class="item" data-fid="1100776" data-imdbr="6.20" data-imdbv="570">

                                                <div class="rating kp">
                                                            <a href="/film/1100776/votes/">
                                    5.99
                                </a>
                                <span>139</span>
                                                    </div>
                        <div class="vote_widget miniVoteDiv rating_user_1100776">&nbsp;</div>

                        <div class="MyKP_Folder_Select  folder_film_1100776">
                            <s class="dot"></s>
                            <div class="arrow"></div>
                        </div>

                                                <span class="num">17</span>
                        <table>
                            <tr>
                                <td>
                                    <span class="name">
                                        <a href="/film/1100776/" >
                                            Линия жизни&nbsp;(сериал,&nbsp;2017)</a></span>
                                    <span class="role">
                                        Lifeline&nbsp;...&nbsp;Lifeline Customer<span style="font-weight:bold;">
                                                    </span>
                                            <!--&nbsp;-->
                                    </span>
                                </td>
                            </tr>
                        </table>
                    </div>
                                        <div class="item" data-fid="468940" data-imdbr="5.50" data-imdbv="142449">

                                                <div class="rating kp">
                                                            <a href="/film/468940/votes/">
                                    5.74
                                </a>
                                <span>38209</span>
                                                    </div>
                        <div class="vote_widget miniVoteDiv rating_user_468940">&nbsp;</div>

                        <div class="MyKP_Folder_Select  folder_film_468940">
                            <s class="dot"></s>
                            <div class="arrow"></div>
                        </div>

那些。您需要一个名称,例如“生命线”

<span class="name"> 
<a href="/film/1100776/" >Линия жизни&nbsp;(сериал,&nbsp;2017)</a></span>
python
  • 1 1 个回答
  • 10 Views

1 个回答

  • Voted
  1. Best Answer
    Andrey
    2020-09-09T17:39:25Z2020-09-09T17:39:25Z

    该方法find('span', class_='name')将返回一个元素<span>。接下来,您正在查找<a>此元素内的所有标签,并且只找到一个这样的标签。

    In [19]: soup.find('span', class_='name')
    Out[19]: 
    <span class="name">
    <a class="gray" href="/film/1009017/">
                                                Чёрный Адам</a></span>
    

    获得一切的最简单方法可能是<a>使用CSS选择器:

    In [23]: links = soup.select('span.name a')
    
    In [24]: links[:5]
    Out[24]: 
    [<a class="gray" href="/film/1009017/">
                                                 Чёрный Адам</a>,
     <a class="gray" href="/film/464355/">
                                                 Сьюдад</a>,
     <a class="gray" href="/film/963897/">
                                                 Разлом Сан-Андреас 2</a>,
     <a class="gray" href="/film/542533/">
                                                 Предания</a>,
     <a class="gray" href="/film/518174/">
                                                 Защита</a>]
    
    In [25]: len(links)
    Out[25]: 391
    
    • 2

相关问题

Sidebar

Stats

  • 问题 10021
  • Answers 30001
  • 最佳答案 8000
  • 用户 6900
  • 常问
  • 回答
  • Marko Smith

    根据浏览器窗口的大小调整背景图案的大小

    • 2 个回答
  • Marko Smith

    理解for循环的执行逻辑

    • 1 个回答
  • Marko Smith

    复制动态数组时出错(C++)

    • 1 个回答
  • Marko Smith

    Or and If,elif,else 构造[重复]

    • 1 个回答
  • Marko Smith

    如何构建支持 x64 的 APK

    • 1 个回答
  • Marko Smith

    如何使按钮的输入宽度?

    • 2 个回答
  • Marko Smith

    如何显示对象变量的名称?

    • 3 个回答
  • Marko Smith

    如何循环一个函数?

    • 1 个回答
  • Marko Smith

    LOWORD 宏有什么作用?

    • 2 个回答
  • Marko Smith

    从字符串的开头删除直到并包括一个字符

    • 2 个回答
  • Martin Hope
    Alexandr_TT 2020年新年大赛! 2020-12-20 18:20:21 +0000 UTC
  • Martin Hope
    Alexandr_TT 圣诞树动画 2020-12-23 00:38:08 +0000 UTC
  • Martin Hope
    Air 究竟是什么标识了网站访问者? 2020-11-03 15:49:20 +0000 UTC
  • Martin Hope
    Qwertiy 号码显示 9223372036854775807 2020-07-11 18:16:49 +0000 UTC
  • Martin Hope
    user216109 如何为黑客设下陷阱,或充分击退攻击? 2020-05-10 02:22:52 +0000 UTC
  • Martin Hope
    Qwertiy 并变成3个无穷大 2020-11-06 07:15:57 +0000 UTC
  • Martin Hope
    koks_rs 什么是样板代码? 2020-10-27 15:43:19 +0000 UTC
  • Martin Hope
    Sirop4ik 向 git 提交发布的正确方法是什么? 2020-10-05 00:02:00 +0000 UTC
  • Martin Hope
    faoxis 为什么在这么多示例中函数都称为 foo? 2020-08-15 04:42:49 +0000 UTC
  • Martin Hope
    Pavel Mayorov 如何从事件或回调函数中返回值?或者至少等他们完成。 2020-08-11 16:49:28 +0000 UTC

热门标签

javascript python java php c# c++ html android jquery mysql

Explore

  • 主页
  • 问题
    • 热门问题
    • 最新问题
  • 标签
  • 帮助

Footer

RError.com

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

帮助

© 2023 RError.com All Rights Reserve   沪ICP备12040472号-5