有了Cheerio,我决定在一个电子商务网站上搜索一下某一特定商品的价格。 代码可以在这里找到。 不幸的是,我得到的只是一片空白。 我做错了什么,我不知道。 我已经添加了所有的头太,但还没有得到价格。
我要刮的网站的URL可以在这里找到。
目标URL是一个SPA-web(单页应用程序)--它首先加载一个JS和基本HTML布局,然后加载带有XHR请求的内容。
这里有一篇关于使用Cheerio&; 公理。
https://medium.com/@andrejsabrickis/scrapping-the-content-of-single-page-application-spa-with-headless-chrome-and-puppeteer-D040025F752B