[請益] curl萬筆資料中斷的問題

看板PHP作者 (我的生命因你而發光)時間12年前 (2012/07/22 06:37), 編輯推噓0(0推 0噓 3→)
留言3則, 3人參與, 最新討論串1/1
各位好, 想請教一下目前我在擷取相關資料因為有多筆數據 所以跑回圈利用cron排程來做資料擷取然後儲存到資料庫中 整體正確跑完全部回圈應該要有40幾萬筆資料，不過每次都只有抓10幾萬筆就停止了 我在程式碼開頭有加入 set_time_limit(0); 另外在curl的部份程式也有加入 curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 300000); 最後curl_close($ch); 這樣不曉得會是哪邊的問題呢? 是主機 OR 程式? 不知道還可以從哪邊下手? 感謝 -- ※ 發信站: 批踢踢實業坊(ptt.cc) ◆ From: 114.46.85.60
→
07/22 08:24, , 1F
可使用記憶體也許爆了.可能發生狀況的點作log..
07/22 08:24, 1F
→
07/22 12:57, , 2F
有啥方式可以做確認嗎? 或有啥方法可以解決呢? 謝謝!
07/22 12:57, 2F
→
07/22 22:07, , 3F
curl都會吐狀態回來，看看他是吐什麼錯誤
07/22 22:07, 3F
‣ 更多 jami520 的文章
文章代碼(AID): #1G2oz3FK (PHP)