[問題] 如何取得google全部搜尋結果?
User異想天開,想要把google關鍵字的結果(網址),通通存到資料庫
用google api雖然可以取得網址,但最多只能傳回64筆....
目前是用url的參數去換頁
http://www.google.com/search?q=XXXXX&start=11
然後取得每一頁的原始碼,在用Regex去取得每個的連結.....
而且還不能query太快,否則會被google鎖一段時間
不知道各位高手有沒有其他解呢??
謝謝
--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 123.110.222.166
→
06/06 09:19, , 1F
06/06 09:19, 1F
推
06/06 13:37, , 2F
06/06 13:37, 2F
→
06/06 14:52, , 3F
06/06 14:52, 3F
→
06/06 14:52, , 4F
06/06 14:52, 4F
→
06/06 14:53, , 5F
06/06 14:53, 5F
推
06/06 23:10, , 6F
06/06 23:10, 6F
→
06/07 14:45, , 7F
06/07 14:45, 7F
→
06/07 21:43, , 8F
06/07 21:43, 8F
→
06/07 21:44, , 9F
06/07 21:44, 9F
→
06/07 21:45, , 10F
06/07 21:45, 10F
→
06/07 22:10, , 11F
06/07 22:10, 11F