問題描述

http://www.newrank.cn/public/...

如何模擬搜索請求得到返回的json數(shù)據(jù)

沒有返回?cái)?shù)據(jù) 請問 怎么解決這種情況

問題解答

有很多種情況會(huì)導(dǎo)致這樣的結(jié)果, 比較常見的就是, 請求頭的內(nèi)容沒有包含服務(wù)器需要信息, 或者是cookies里面的內(nèi)容, 沒有包含服務(wù)器需要的信息, 所以被服務(wù)器判斷為爬蟲, 所以無法取得正常的結(jié)果. 你可以試下將瀏覽器的請求頭和cookies分別拷貝到你的程序中再去請求, 如果還是不行, 只能用類似fiddler這樣的工具再做細(xì)致的分析了

有些請求是需要Referer才能請求到數(shù)據(jù)的，或者是有些是需要驗(yàn)證cookis 這些你需要查看下之前成功的案例是否有這些條件的限制導(dǎo)致的！