色综合图-色综合图片-色综合图片二区150p-色综合图区-玖玖国产精品视频-玖玖香蕉视频

您的位置:首頁技術(shù)文章
文章詳情頁

Ruby:無法抓取百度搜索結(jié)果

瀏覽:136日期:2022-09-24 14:09:51

問題描述

URL:http://www.baidu.com/s?wd=site:www.cnblogs.com代碼:

def get_html(url) uri = URI(url) p resp = Net::HTTP.get(uri)end

而獲取到的結(jié)果是百度首頁的源碼,并不是搜索site:www.cnblogs.com的結(jié)果

不知道,Ruby中有關(guān)于網(wǎng)絡(luò)編程方面的好書籍沒?剛接觸ruby,很多東西不知道從何找(目前都是到官網(wǎng)看文檔)。

使用PHP簡單實現(xiàn)了下:

<?phpset_time_limit(0);function _rand(){ $length = 26; $chars = '0123456789abcdefghijklmnopqrstuvwxyz'; $max = strlen($chars) - 1; mt_srand((double)microtime() * 1000000); $string = ’’; for ($i = 0; $i < $length; $i++) {$string.= $chars[mt_rand(0, $max) ]; } return $string;}$HTTP_SESSION = _rand();$HTTP_SESSION;$HTTP_Server = 'www.baidu.com';$HTTP_URL = '/s?wd=site:www.cnblogs.com';$ch = curl_init();curl_setopt($ch, CURLOPT_URL, 'http://' . $HTTP_Server . $HTTP_URL);curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322; .NET CLR 2.0.50727)');$res = curl_exec($ch);curl_close($ch);print_r($res);

問題解答

回答1:

不管你使用什么語言的代碼來抓取,你都不可能這么簡單就就抓到百度的內(nèi)容了。百度不是以前那個百度了,沒各種cookie認(rèn)證,屁都抓不到,你最好研究一下看看有沒有api吧,百度前端的代碼各種繞,目的就是不讓你抓到。

回答2:

http://www.baidu.com/s?wd=www.cnblogs.com&rsv_bp=0&ch=&tn=19045005_5_pg&bar=&rsv_spt=3&ie=utf-8&rsv_n=2&rsv_sug3=1&rsv_sug4=57&rsv_sug2=0&inputT=635樓主,這樣么一大堆扔出去才有回吧?

回答3:

樓主 ,你是要 抓取 baidu采集的 興趣點(diǎn)poi嗎?

Ruby:無法抓取百度搜索結(jié)果

標(biāo)簽: 百度
相關(guān)文章:
主站蜘蛛池模板: 亚洲高清免费观看 | 国产 magnet| 日韩国产午夜一区二区三区 | 中文字幕在线无限2021 | 欧美视频在线观 | 国产精品国产精品 | 国产在线观看精品香蕉v区 国产在线观看免费人成小说 | 夜夜春夜夜夜夜猛噜噜噜噜噜 | 成人精品视频在线 | 国产做爰一区二区 | 精品欧美高清一区二区免费 | 一区在线观看 | 毛片视频免费观看 | 日本vs欧美一区二区三区 | 三级黄色网 | 国产日产欧产精品精品推荐小说 | 午夜丝袜美腿福利视频在线看 | 99久久精品免费国产一区二区三区 | 美女黄页网站免费进入 | 国产精品大全国产精品 | 精品欧美日韩一区二区三区 | 亚洲一区二区三区中文字幕 | 久久久999国产精品 久久久99精品免费观看 | 亚洲精品综合一二三区在线 | 在线中文字幕视频 | 欧美jizz18性欧美 | 黄色美女视频免费 | 香港经典毛片a免费观看 | 国产午夜免费福利红片 | 国产成人久久综合二区 | 国产一区二区三区四区在线观看 | 色视频在线观看免费 | 97一级毛片全部免费播放 | 欧美日a | 欧美在线视频 一区二区 | 韩国毛片 免费 | 亚洲第一页在线 | 国产综合精品久久亚洲 | 996re免费热在线视频手机 | 色青青草原桃花久久综合 | 亚洲综合色自拍一区 |