我正在尝试抓取https://www.tokopedia.com/chocoapple/ready-stock-bnib-iphone-128gb-7-plus-jet-black-garansi-apple-1-tahun-10?src=topads网页上的视频链接
有一些链接是通过“webyclip”服务生成的,该服务会在页面加载后加载数据。加载所有JavaScript和AJAX之后,我想要页面的更新HTML源(与在浏览器中执行“检查元素”时类似)。如何通过chromedp软件包(https://github.com/knq/chromedp)完成此操作。它是GoLang的无头浏览器。请帮忙。我是网络抓取的新手。
编辑:它与链接中提到的另一个问题不相似。因为这是特定于chromedp软件包的。注释中的一个询问如何/使用什么来刮取动态内容。

最佳答案

经过多次尝试,最终,我找到了解决方法并解决了我的查询。
您可以在我的GitHub存储库中查询此查询。
谢谢你。

关于go - Chromedp软件包: How to get updated HTML source of the webpage which has dynamically loaded contents by using chromedp,我们在Stack Overflow上找到一个类似的问题:https://stackoverflow.com/questions/45938288/

10-13 05:50