超越雲巅CyInsight ,是一套經過調優和(hé)功能增強的(de)Hadoop與Spark企業發行版，包含Hadoop生态中的(de)20+主要組件，幫助客戶輕松應對(duì)海量數據的(de)采集、存儲、計算(suàn)、分(fēn)析挖掘和(hé)數據安全等應用(yòng)場(chǎng)景
多(duō)源數據的(de)高(gāo)效集成
雲巅CyInsight 提供多(duō)源數據（包含結構化(huà)、半結構化(huà)和(hé)非結構化(huà)數據）的(de)集成能力，提供高(gāo)吞吐、可(kě)擴展的(de)數據總線和(hé)數據分(fēn)發功能，支持批量加載、實時(shí)加載、數據庫加載、文件加載等多(duō)種加載方式。
異構數據的(de)海量存儲
雲巅CyInsight 提供基于分(fēn)布式文件系統和(hé)并行架構的(de)大(dà)數據存儲能力，支持PB級數據規模的(de)高(gāo)可(kě)靠和(hé)高(gāo)可(kě)用(yòng)存儲，支持存放多(duō)種文件格式，例如關系數據庫等結構化(huà)數據，日志、網頁等半結構化(huà)數據，以及視頻(pín)、圖片、文檔等非結構化(huà)數據。
多(duō)場(chǎng)景下(xià)的(de)數據計算(suàn)框架
面向不同業務場(chǎng)景，雲巅CyInsight提供離線計算(suàn)、流式計算(suàn)、内存計算(suàn)、圖計算(suàn)等豐富的(de)計算(suàn)框架，支持計算(suàn)任務流程編排、計劃安排，提供标準SQL的(de)數據訪問能力。
基于機器學習(xí)的(de)大(dà)數據分(fēn)析
雲巅CyInsight 提供涵蓋多(duō)源數據接入、數據特征提取、算(suàn)法模型管理(lǐ)、算(suàn)法模型評估和(hé)結果預測等完整機器學習(xí)過程的(de)可(kě)視化(huà)大(dà)數據分(fēn)析功能。支持多(duō)元分(fēn)類、回歸分(fēn)析、協同推薦等分(fēn)析模式，SVM、樸素貝葉斯、K-Means、線性回歸等10+種算(suàn)法，支持批量預測和(hé)實時(shí)預測功能并提供API。預測過程基于内存進行叠代式計算(suàn)，并且支持分(fēn)布式計算(suàn)，可(kě)以應對(duì)海量數據分(fēn)析。
安全有效的(de)資源隔離與共享
雲巅CyInsight 提供對(duì)結構化(huà)、非結構化(huà)數據的(de)多(duō)用(yòng)戶資源管理(lǐ)，滿足對(duì)數據資源的(de)權限隔離、安全授權和(hé)資源調度。提供多(duō)用(yòng)戶的(de)可(kě)視化(huà)數據空間管理(lǐ)功能，支持數據空間大(dà)小、文件數、計算(suàn)隊列等的(de)配額設置；支持多(duō)用(yòng)戶間數據資源的(de)開放訂閱和(hé)指定共享，共享權限可(kě)控制到文件目錄、表及列族級；支持對(duì)數據訪問的(de)審計和(hé)監控。
統一的(de)大(dà)數據平台運維管理(lǐ)
雲巅CyInsight 提供針對(duì)HDFS、MapReduce、Hive、HBase、ZooKeeper、Oozie和(hé)Spark等20+組件的(de)自動化(huà)安裝部署，并爲平台提供完善的(de)配置管理(lǐ)、監控告警等能力。
産品詳情
産品參數
1、 性能指标
測試環境：8節點集群；節點典型配置：CPU:2*E5-2640，内存：256G，硬盤：SATA盤
|
分(fēn)類 |
指标項 |
規格 |
|
|
MapReduce性能指标 |
WordCount：平均每節點處理(lǐ)能力
|
8GB/分(fēn)鐘(zhōng) |
|
|
Terasort：平均每節點處理(lǐ)能力 |
6.4GB/分(fēn)鐘(zhōng) |
||
|
Spark性能指标 |
WordCount：平均每節點處理(lǐ)能力 |
30GB/分(fēn)鐘(zhōng)/Node |
|
|
Terasort：平均每節點處理(lǐ)能力 |
9GB/分(fēn)鐘(zhōng)/Node |
||
|
SQL on Hadoop |
Aggregation：平均每節點處理(lǐ)能力 |
8GB/分(fēn)鐘(zhōng) |
|
|
Join：平均每節點處理(lǐ)能力 |
4GB/分(fēn)鐘(zhōng) |
||
|
HBase |
100%随機讀：平均每節點讀取記錄條數（每條記錄1KB），響應時(shí)間小于50MS |
30,000 Records/s |
|
|
100%随機寫：平均每節點寫入記錄條數（每條記錄1KB），響應時(shí)間小于50MS |
40,000 Records/s |
||
|
順序掃描：平均每節點scan記錄條數（每條記錄1KB），響應時(shí)間小于50MS |
15,000 Records/s |
||
|
50%随機寫+50%随機讀：平均每節點寫入記錄條數（每條記錄1KB），響應時(shí)間小于50MS |
寫25,000 Records/s 讀18,000 Records/s
|
||
|
50%随機寫+50%掃描讀：平均每節點寫入記錄條數（每條記錄1KB），響應時(shí)間小于50MS |
寫30,000 Records/s 讀10,000 Records/s
|
||
2、産品兼容性
2.1 CPU兼容性
超越雲巅CyInsight大(dà)數據平台兼容主流硬件架構：X86、ARM
2.2 操作系統兼容性
|
序号 |
操作系統 |
|
1 |
CentOS |
|
2 |
Redhat |
|
3 |
銀河(hé)麒麟 |
|
4 |
中标麒麟 |
|
5 |
麒麟OS |
|
6 |
EulerOS |
