什么模塊抓取網(wǎng)頁(yè)動(dòng)態(tài)數(shù)據(jù)比較好？

homedw

抓取淘寶商品評(píng)價(jià)和成交記錄

這塊沒(méi)研究過(guò)，對(duì)于iamlimeng以前寫(xiě)過(guò)的一段代碼來(lái)抓響應(yīng)頁(yè)面，但是找不到相應(yīng)評(píng)價(jià)的地址。
get_html($url) 也同樣抓不到我想要的內(nèi)容。不知道怎么樣才可以抓到用戶評(píng)價(jià)。
求指導(dǎo)，只給我說(shuō)下模塊也可以的。我自己來(lái)寫(xiě)

http://72891.cn/thread-1819833-2-1.html

x9x9

還是那些模塊就可以，只是評(píng)價(jià)的地址是js動(dòng)態(tài)構(gòu)造的，在頁(yè)面加載后通過(guò)調(diào)用 js 寫(xiě)到相應(yīng)的 css 標(biāo)簽位置上。所以重點(diǎn)是去看下js文件，找下構(gòu)造 url 的規(guī)則。
另外，這個(gè)評(píng)價(jià)的返回?cái)?shù)據(jù)是 json 格式。

homedw

好的。。很感謝。我再去研究下js動(dòng)態(tài)構(gòu)造url規(guī)則。。。�？纯从惺裁匆�(guī)律不

ace_fei

回復(fù) 3# homedw


    我最近抓的公司的網(wǎng)頁(yè)也遇到類(lèi)似問(wèn)題了，不知道樓主有什么解決方法沒(méi)？

zhh124

用了AJAX技術(shù)的呢? 填了某個(gè)空網(wǎng)頁(yè)就自動(dòng)更新部分內(nèi)容,這樣的怎么處理?
我試過(guò)抓HTTP包(不是用FF的那個(gè)插件)來(lái)看,不過(guò)還是分析不出來(lái).