主页 / 问题 / 1188391
Accepted
Kobets Matviy
Asked:2020-10-10 14:00:37 +0800 CST2020-10-10 14:00:37 +0800 CST

如何解析动态 PHP 页面

  • 772

任务：解析 YouTube 上动态加载的块（在 ID 为 #collapsible 的描述下的许可证块）。页面的初始 DOM 由编码脚本组成，因此 PHP 看不到所需的元素。只有在完全处理完 JS 后，才会加载所有其他数据。 在此处输入图像描述

澄清： YouTube API 和 oEmbed 不适合这些需求

告诉我如何使用 PHP（phpQuery 是否解决问题）或其他解决方案来解决这个问题。

经验：我连接了“Simple Html Dom Php”库，但它只适用于静态页面。

代码：我停止的解决方案

<?php
    require 'simple_html_dom.php'; //подключаем библиотеку
    $link = 'https://www.youtube.com/watch?v=kdmBTTAFlk0';
    $html = file_get_html( $link ); // получаем страницу

    $load = file_get_contents( $link );
    $html= str_get_html( $load );

    echo $element = $html->find('#collapsible', 0);
?>

php

1 个回答

  1. Best Answer

    如何用php解决它

    相当困难，因为 PHP 并不是为此而设计的。一种选择是V8js模块。

    其他解决方案

    以 Node.js 和Puppeteer为例：

    const puppeteer = require('puppeteer');

(async () => {
    const browser = await puppeteer.launch();
    const page = await browser.newPage();
    await page.goto('https://www.youtube.com/watch?v=Hc16Y9fiCvQ');

    await page.waitForSelector('paper-button#more');

    await page.click('paper-button#more');

    await page.waitForSelector('#collapsible ytd-metadata-row-header-renderer');

    let desc = await page.evaluate(() => {
        let innerText = [];
        document.querySelectorAll('ytd-metadata-row-renderer.ytd-metadata-row-container-renderer')
            .forEach(node => innerText.push(node.innerText));

        return Promise.resolve(innerText);
    })


    console.log(desc);

    await browser.close();
})();

    Python 也有一个，但我没有亲自尝试过。

    • 2

相关问题