如何抓取ajax生成的网页


How to crawl an ajax generate web page?

我试着爬行https://world.taobao.com/search/search.htm?cat=50008090&amp_ksTS=1461999216322_20&spm=a21bp.7806943.banner_XX_cat.13.UxfRzO&amp_input_charset=utf-8&navigator=all&json=on&回调=__json_cb&cna=CKNtDjuNxTgCAdIGQMzvfvwH&abtest=_AB-LR517-LR854-LR895-PR517-PR854-PV895_2462

但没有成功,回复页面的来源与查看页面不匹配,有人知道怎么办吗?感谢

您将不得不使用一些可以捕获JS内容的库,这就是php-curl在这里不起作用的原因。

您可以使用各种库,如phantomjs、casperjs