Re: [J2SE]資料庫新增幾萬筆資料

看板java作者silver8250 ((阿信))時間17年前 (2008/07/02 21:52)推噓9(9推 0噓 14→)

留言23則, 4人參與討論串2/2 (看更多)

請問您的問題有辦法用一條解決所有的問題嗎?? 因為如過要用程式全部來解決的話那請問您使用 DB 的用意只是要來存放 DATA 與純粹 query 嗎?? 因為小弟我之前也有碰過類似的問題，是需要從多個 tables 計算薪資最後將計算出的結果再寫回某個 table 一開始小弟跟您一樣，也是用程式暴力解決，後來發現，SQL其實很強大我就開始去"兜"SQL語法，結果給我"兜"出一條就可以解決的 SQL 該功能就幾乎以 0.1 秒以下的時間完成我要的工作我的意見是，您可以考慮 survey SQL，問題就會很輕鬆!! 以上是小弟的淺見~~ ※ 引述《slalala (WIKI大學生寫作業的題材)》之銘言： : 標題雖然是J2SE : 不過卻是JSP/SERVLET的應用 (￣□￣|||)a : 因為如果在jsp顯示上會有timeout等等的問題 : 所以有些疑問 : 目前程式流程大概是這樣(程式碼還沒寫大概寫一下假碼，SET不是java.util的Set) : DO : SET SQL= SQL Command; : SET ResultSet = executeQuery(SQL) //從資料庫取資料 : WHILE( ResultSet.next() ) //大概兩萬多筆 : BEGIN : SET DATA = ResultSet.getData() //從資料庫取得資料 : DATA = DoSomeThing( DATA) //處理資料 : Statement.Insert(DATA ) //新增到資料庫其他欄位 : END : END : 以上這樣的程式我估計大概要跑個幾分鐘 : 之前的經驗是用批次的方式結果會好很多 : 就假碼WHILE結束之後才執行statment.executeBatch() : 現在的疑問就是: : 要是一次兩萬多筆這些資料在executeBatch之前 : 都暫存在記憶體吧 : 這樣要是資料量很大的時候不就可能有爆炸的問題?! : 我現在的想法是 : 在ResulteSet的迴圈內計數 : 當到達特定的mod值(ex:100、1000) : 就執行executeBatch()與clearBatch() : 不知道這樣的想法對不對?! : 還是有更好的作法?? : 另外timeout的問題 : 我是想實作官方網站有教的JProgressBar : 或者是乾脆寫成Thread : 將頁面顯示跟SQL執行批次的程序分開 : 不知道這樣可行嗎? : (只擔心有Thread-safe的問題我JAVA很多觀念很粗淺ˋ(′_‵||)ˊ) -- ※ 發信站: 批踢踢實業坊(ptt.cc) ◆ From: 118.161.146.166 ※ 編輯: silver8250 來自: 118.161.146.166 (07/02 21:53)

推

slalala

07/03 00:43, , 1^F

07/03 00:43, 1^F

→

slalala

07/03 00:45, , 2^F

07/03 00:45, 2^F

→

slalala

07/03 00:46, , 3^F

07/03 00:46, 3^F