NEC發布大數據處理引擎Inforame DataBooster V5.1中文版

2014-8-28

        2014年8月28日，NEC（中國）有限公司正式發布“內存型高速數據處理引擎”——Inforame DataBooster V5.1中文版。

        信息化高速發展的今天，隨之而產生的是海量級的數據。針對如此龐大的數據，快速有效地做出各種分析是目前面臨的迫切需求。由此應運而生的NEC InfoFrame DataBooster系列，屬于內存型高速數據處理引擎，擁有列存儲和內存型數據處理技術，能夠高速處理海量數據，相比傳統的RDB，數據處理速度可提高40倍，實現通過數據庫優化無法達到的處理速度。

【背景】

       隨著數據量的增加，增強CPU性能固然能縮短處理時間，但是縮短I/O時間才是更加有效的方法。為此產生了一個新方法：不在傳統硬盤中保持數據，而是保持在內存里。特別是從2010年開始，單臺服務器搭載的內存量急劇增加，成本也變得更加便宜，這使得僅靠內存來保持數據更便于推廣，大幅縮短了I/O處理時間。今后服務器搭載的內存會越來越多，在內存中處理數據也將會受到愈來愈多的關注。

【課題】

?夜間批處理未能及時處理結束，影響了正常工作

?無法對堆積的大量歷史數據進行分析

?數據量太大而無法做成數據集市從而放棄了理想的分析模式

?即使進行了調優，數據庫的性能改善無法達到預期的效果

?數據統計花費了大量時間，無法立刻獲得想要的數據

NEC基于性能和成本的考慮，為有上述課題的用戶提供了新型高速內存型數據處理技術產品DataBooster的解決方案。

【技術特點】

1）列存儲和內存處理技術

?Inforame DataBooster采用了列存儲且內存最優化的處理技術，通過特有的數據構造方式，減少了內存使用量。同時把傳統RDB的行記錄的逐條處理轉變成列單位的批量處理，提高了處理速度。

2）多樣化接口

?Inforame DataBooster提供標準的C語言和Java語言的API接口以及SQL接口，通過C語言或者Java語言，把排序、統計、查詢、結合、計算等操作寫成批處理程序，實現自動化處理。

?自動生成Java代碼功能，也大大提高了生產性，降低了重復編碼帶來的風險。

?SQL接口的開發使用了PostgreSQL，支持大部分SELECT、INSERT、UPDATE、DELETE的SQL操作，除此之外，還可以執行REPARE、EXECUTE、EXPLAIN等操作。

?簡單易用的圖形化操作工具、檢索、統計、結合、批量更新等功能可一邊確認結果一邊處理數據，最后導出CSV形式的處理結果。

        NEC擁有完整的大數據產品線，可結合客戶具體需求提供實現大數據處理的多樣化技術，和客戶共同確定利用數據的目的及分析方法，為客戶制訂個性化的大數據解決方案。NEC在進軍大數據市場的路上腳踏實地，未來會不斷為市場帶來更多產品和解決方案。

************************************************************************************************************************************************

NEC(中國)有限公司：是IT&通信巨頭NEC公司在國內的全資子公司，主要業務包括IT解決方案、IT/網絡平臺、通信網絡、通用信息產品以及系統開發等。NEC是較早倡導智慧城市建設的企業之一，依托在物聯網和云計算上的技術優勢和對各行業的理解和經驗，NEC側重在智慧城市的三大領域——安心安全、養老健康管理、節能環保貢獻自己的力量。詳情請參考：http://www.hzlbqc.com/