[技術] Hadoop不是萬能的

看板Soft_Job作者Lordaeron (Terry)時間11年前 (2013/01/10 23:29)推噓7(7推 0噓 6→)

留言13則, 8人參與討論串1/1

原文: http://www.programmer.com.cn/10416/ 重點: 1. 據韓軼平介紹，現在包括Facebook和Yahoo!在內的越來越多的公司都在向「實時處理」這個方向發展，而且會有更多的公司來關注怎樣真正地讓數據處理和分析能夠越來越實時，因為處理接近實時之後，會對業務產生深遠的影響。例如對在線廣告系統，如果處理時間從十分鐘、一小時減少到一分鐘，廣告收益會有本質的區別。 2. 從狹義上來說，Hadoop就是MapReduce+HDFS，也就是一種離線處理或者批處理的模式。一方面，如果需求是對在線請求馬上得到結果，Hadoop肯定不適合；另一方面，MapReduce是一個簡化的並行模型，假設硬件總是要壞的，所以它中間所有的交互模式都做得很可靠、簡單。這樣一來，Hadoop能夠處理的負載或者應用，就會相對較窄。 3. 韓軼平說：「在我們研發中心的每次Hadoop訓練班開學時，我都會告誡學員務必記住『Hadoop不是萬能的』。在做具體工作時，首先要考量它是否適合使用Hadoop。」 --> 總之，做到不迷信、不盲從。 -- ※ 發信站: 批踢踢實業坊(ptt.cc) ◆ From: 61.230.71.180

推

Ting1024

01/11 00:01, , 1^F

01/11 00:01, 1^F

推

ledia

01/11 00:38, , 2^F

01/11 00:38, 2^F

推

gmoz

01/11 09:36, , 3^F

01/11 09:36, 3^F