大數據存儲和大數據分析

　　大數據可以抽象的分為大數據存儲和大數據分析，這兩者的關(guān)系是：大數據存儲的目的是支撐大數據分析。到目前為止，還是兩種截然不同的計算機技術(shù)領(lǐng)域：大數據存儲致力于研發(fā)可以擴展至PB甚至EB級別的數據存儲平臺;大數據分析關(guān)注在最短時(shí)間內處理大量不同類(lèi)型的數據集。

　　提到存儲，有一個(gè)著(zhù)名的摩爾定律相信大家都聽(tīng)過(guò)：18個(gè)月集成電路的復雜性就增加一倍。所以，存儲器的成本大約每18-24個(gè)月就下降一半。成本的不斷下降也造就了大數據的可存儲性。

　　比如，Google大約管理著(zhù)超過(guò)50萬(wàn)臺服務(wù)器和100萬(wàn)塊硬盤(pán)，而且Google還在不斷的擴大計算能力和存儲能力，其中很多的擴展都是基于在廉價(jià)服務(wù)器和普通存儲硬盤(pán)的基礎上進(jìn)行的，這大大降低了其服務(wù)成本，因此可以將更多的資金投入到技術(shù)的研發(fā)當中。

　　以Amazon舉例，Amazon S3 是一種面向 Internet 的存儲服務(wù)。該服務(wù)旨在讓開(kāi)發(fā)人員能更輕松的進(jìn)行網(wǎng)絡(luò )規模計算。Amazon S3 提供一個(gè)簡(jiǎn)明的 Web 服務(wù)界面，用戶(hù)可通過(guò)它隨時(shí)在 Web 上的任何位置存儲和檢索的任意大小的數據。此服務(wù)讓所有開(kāi)發(fā)人員都能訪(fǎng)問(wèn)同一個(gè)具備高擴展性、可靠性、安全性和快速價(jià)廉的基礎設施，Amazon 用它來(lái)運行其全球的網(wǎng)站網(wǎng)絡(luò )。再看看S3的設計指標：在特定年度內為數據元提供 99.999999999% 的耐久性和 99.99% 的可用性，并能夠承受兩個(gè)設施中的數據同時(shí)丟失。

　　S3很成功也確實(shí)卓有成效，S3云的存儲對象已達到萬(wàn)億級別，而且性能表現相當良好。S3云已經(jīng)擁萬(wàn)億跨地域存儲對象，同時(shí)AWS的對象執行請求也達到百萬(wàn)的峰值數量。目前全球范圍內已經(jīng)有數以十萬(wàn)計的企業(yè)在通過(guò)AWS運行自己的全部或者部分日常業(yè)務(wù)。這些企業(yè)用戶(hù)遍布190多個(gè)國家，幾乎世界上的每個(gè)角落都有Amazon用戶(hù)的身影。