我知道之前有人问过类似的问题，但似乎没有一个适用于这种特殊情况。我在几个网站上都遇到过这个问题，所以对于这个问题，我随机选择了SO 自己的标签列表的第一页。如果你看第一页上的第一个条目，你会看到这个：显示标签描述的开头、问题总数以及今天和本周提出的问题数量。这些信息很容易选择：from selenium.webdriver import Chromedriver = Chrome()driver.
2019-04-30
作为使用 Python、Selenium 和 BeautifulSoup 构建的大型网络爬虫的一部分，我试图获取此页面上所有工具提示的文本：https://www.legis.state.pa.us/CFDocs/Legis/BS/bs_action.cfm?SessId=20190&Sponsors=S|44|0|Katie%20J.%20Muth我当前的代码成功获取了所有链接并将鼠标悬停在每个
2019-07-23
我编写了以下代码来获取地图中所有蓝色标记的位置。from bs4 import BeautifulSoupfrom requests_html import HTMLSessionsession = HTMLSession()url="https://emf2.bundesnetzagentur.de/karte/Default.aspx?lat=52.4107723&lon=14.2930953
2020-02-03
我正在尝试弄清楚如何从此网址中的图表中抓取工具提示值。我无法通过检查 Chrome 中的任何图表元素来弄清楚它们是如何呈现的。此外，以下语句返回的 html 似乎与我在 Chrome 中看到的不同：r = requests.get("https://coronavirus.iowa.gov")任何帮助都值得感激。
2020-05-25
我正在尝试使用 selenium 从页面中抓取项目。目前我只能从项目工具提示中抓取文本。我使用开发人员工具 (f12) 看到的页面中某个项目的 HTML：<div class="offer-page-sale-item offer-page-sale-item__actual" data-real-id="12345" data-id="12345-4"><!-- Render product -
2021-03-07
当我在 puppeteer 中以非无头模式触发.click()事件时，什么都没有发生，甚至没有错误......“非无头模式，因此我可以直观地监控正在点击的内容”const scraper = {test: async () => {let browser, page;try {browser = await puppeteer.launch({headless: false,args: ["--n
2019-04-29
我使用 puppeteer 在 node 中编写了一些小脚本，以便循环点击来自网站着陆页的不同帖子的链接。我的脚本中使用的网站链接是一个占位符。而且，它们不是动态的。因此，puppeteer 可能有点矫枉过正。但是，我的目的是学习点击的逻辑。当我执行我的第一个脚本时，它会点击一次并在离开源时引发以下错误。const puppeteer = require("puppeteer");(async (
2019-05-28
我正尝试自动登录一个骗子发给我朋友的简单网站。我可以使用 puppeteer 填写文本输入，但当我尝试使用它点击按钮时，它所做的只是激活按钮颜色变化（当鼠标悬停在按钮上时会发生这种情况）。我还尝试在关注输入字段的同时点击回车键，但这似乎不起作用。当我在控制台中使用 document.buttonNode.click() 时，它可以工作，但我似乎无法用 puppeteer 模拟它我还尝试使用 wai
2019-07-31
我的目的是使用 Puppeteer 单击“开始测验”按钮。选择器 -> “#start-quiz”我在 puppeteer 中执行操作并尝试单击此锚点（“a”）元素，从我所做的分析来看，我很确定该元素附加了 jquery 事件侦听器。我似乎无法通过 puppeteer 单击按钮，我也尝试过 page.evaluate 和多种形式的评估函数。似乎都不起作用。奇怪的是，如果我通过网站的 javascr
2020-04-06
我正在使用 puppeteer 库来抓取网站。我通过以下方式获取所有精确类的元素：let items = await page.$$("li.item");for (let item of items) {let elementText = await page.evaluate((element) => element.textContent,item);console.log(elementT
2020-05-06
我的问题是，我需要使用 puppeteer 将评论选择器设置为“所有评论”，但在 puppeteer 单击正确的按钮“所有评论”后，评论不会呈现，评论部分就会消失，我将提供代码和浏览器运行的视频。const $ = require('cheerio');const puppeteer = require('puppeteer');const url = 'https://www.facebook.
2020-05-15
因此，我从网页中摘录了以下 HTML 内容：<li class="PaEvOc tv5olb wbTnP gws-horizon-textlists__li-ed">//random div/element stuff inside here</li><li class ="PaEvOc tv5olb gws-horizon-textlists__li-ed">//random div/eleme
2021-05-08