亚洲成精品动漫久久精久,九九在线精品视频播放,黄色成人免费观看,三级成人影院,久碰久,四虎成人欧美精品在永久在线

掃一掃
關注微信公眾號

當大數據遇上SSD
2015-01-06   企業網D1Net

大數據時代,人們越來越清楚地意識到數據中蘊藏的價值。海量數據的擁有者——運營商,銀行,物流公司等等——都在積極地尋求方法利用手中的數據。然而,爆發式增長的數據量正在超出傳統數據庫的處理能力。為了應對這樣的增長,企業需要對數據庫進行升級。基于小型機DB2或Oracle架構的傳統數據庫升級依靠縱向擴展,也就是通過提升服務器本身的性能來提高處理能力。更大更強的服務器價格高昂,但性能的提升卻是有限的。企業為自己的傳統數據庫做縱向擴展只會錢越花越多,收效越來越少。

Hadoop架構很好地解決了擴展的瓶頸,它設計部署在經濟實惠的硬件上,通過橫向擴展,便可無限地提升數據處理能力。基于Hadoop的大數據軟件因為其強大的處理能力和高性價比在數據分析市場嶄露頭角。星環信息科技(上海)有限公司(以下簡稱星環科技)的企業級一站式大數據綜合平臺Transwarp Data Hub (以下簡稱TDH)是Hadoop發行版中的佼佼者。它在國內擁有最多的上線案例,已經為眾多企業解決了棘手的大數據難題。TDH下的分布式內存分析引擎Transwarp Inceptor將數據和計算中間結果放在內存中,依靠內存的高速讀寫,克服了大數據處理中常見的I/O瓶頸,加上它對SQL和R的全面支持,可以輕松地應對海量數據的復雜計算,極大地提高了數據處理的效率,解放了企業的生產力。然而,星環科技的開發人員并不滿足于此。

一方面,Transwarp Inceptor運行在JVM上,使用大內存的時候,對GC的影響非常嚴重,用戶體驗不夠平滑;另一方面,完全使用內存作為存儲介質價格較高。星環科技的開發人員發現,隨著硬件技術的發展,SSD的讀寫速度已經遠遠甩開機械硬盤,向內存靠攏,但在價格上,SSD相對昂貴的內存有巨大的優勢,這讓SSD成為了內存強有力的競爭者。“我們相信,大數據分析應該朝著更經濟更普及的方向發展,”星環科技的CTO孫元浩說道,“我們的產品為企業提高生產力,而將內存替換為SSD可以在不影響性能的情況下提升用戶體驗并且降低成本。”

在為某省級移動通信運營商部署大數據解決方案時,星環科技第一次將SSD作為內存的替代應用在了生產中。在比較市場上各品牌型號的固態盤的信息之后,星環科技最終選擇了具備高穩定性技術的英特爾® 固態盤DC S3500系列來構建新的解決方案。對于固態盤而言,影響讀寫能力的最大因素在于固態盤的控制芯片和固件算法。英特爾在芯片技術和固件算法上的優勢讓英特爾® 固態盤DC S3500系列在處理讀寫任務時擁有得天獨厚的優勢。英特爾® 固態盤DC S3500系列具有50微秒的順序讀取延遲,在 99.9% 的時間內 500 微秒的最大讀取延遲,以及4KB 隨機讀取性能高達75,000的每秒輸入輸出操作次數(IOPS)。同時具備較低的有功讀取 功率(小于 1.3 瓦)。這些特點保證了英特爾® 固態盤數據存儲和讀取的出色能力以及在頻繁操作情況下的性能穩定性。作為一款優秀的企業級固態盤,除了高性能優勢之外,英特爾® 固態盤DC S3500系列還具備防止數據丟失和損壞的特性。英特爾® 固態盤DC S3500系列提供能夠端到端數據安全性保護,使數據從進入硬盤到離開硬盤時刻處于保護之中。此外,英特爾還將固態盤將NAND、SRAM和DRAM內存的高級錯誤糾正方案結合起來,通過奇偶校驗、循環冗余檢查(CRC),以及邏輯塊地址(LBA)標記驗證來保護傳輸中的數據。它還使用高級加密標準(AES)和增強的電源損耗保護進一步增強數據的安全性。英特爾® 固態盤DC S3500系列產品穩定的高性能使星環科技的解決方案得到了有效的保障。而英特爾® 固態盤技術人員專業而嚴謹的前期產品測試、積極響應的售后服務方案和強大的渠道供貨能力,更是為項目提供了強有力的后盾。

與傳統方案相比,星環科技的解決方案有如下幾點優勢:

該省級移動運營商單月清單數量在1000億條左右,每月數據量達100TB,完全超出了原有數據庫架構的處理能力,無法為用戶提供優質服務。星環科技的解決方案使用了800G英特爾® 固態盤DC S3500替換了256G的內存。測試環境下,在單張表統計操作中,傳統方案需耗時230秒,Transwarp Inceptor僅耗時3秒,查詢速度是原有方案的76倍。而在多張數據表關聯操作中,傳統方案需耗時414秒,Transwarp Inceptor耗時僅為26秒,原有方案的效率僅是新方案的6%。可見,在處理大數據量、復雜賬單等情況的環境下,新解決方案完勝傳統方案,能夠應對移動通信行業爆發式的大數據需求,支持數百萬用戶同時在線查詢,極大地提高用戶體驗。跟完全使用內存的Transwarp Inceptor相比,這套解決方案的性能也不遑多讓,英特爾® 固態盤 DC S3500表現出了與內存極其接近的反應速度:

從成本上來看,256G內存成本在2萬元左右,而5000元左右便能買到800G的DC S3500,絕對成本大約下降了75%;從價格容量比來看,內存所需成本約為78元/GB,而DC S3500 800G僅為6.25元/GB,單位容量成本大約下降了92%,大大降低方案成本。這個項目中,SSD顯示了其極大的優越性——在極少影響性能的情形下,SSD可以為企業節省開支。

“我們已經習慣了用SSD來替代傳統硬盤。現在我們欣喜地看到SSD的技術已經發展到可以在某些場景取代內存。”英特爾非易失性存儲解決方案事業部中國區市場總監劉鋼說道,“大數據是現在最熱門的應用之一,大數據分析處理所需要的持續、多路并發、快速讀寫對計算平臺帶來了極大的挑戰,基于傳統硬盤的存儲方案已成為瓶頸。英特爾® 固態盤具備快速穩定的并發讀寫能力、出色的可靠性以及數據保護功能,尤其是最新發布的基于NVMe的PCIe SSD是大數據分析處理的完美搭配。我們很高興能夠和星環科技合作,提供一流的大數據解決方案。希望在未來,使用SSD作為緩存的大數據解決方案會成為行業標準。”隨著SSD技術的成熟,其性價比優勢將繼續增強。未來,星環科技還將繼續與英特爾緊密合作,借助性能出色的企業級固態盤來有效增強解決方案,為用戶提供更優質、更可靠的服務。請拭目以待。

熱詞搜索:

上一篇:分區管理:飛魚星無線云入駐足球名校
下一篇:IDCE中國數據中心展攜手國際數據中心聯盟(DCA)發力機房建設設備產業

分享到: 收藏