大数据

Hadoop离线存储方案|Hadoop 压缩扩容方案


Hadoop离线存储方案

方案痛点:

        传统Hadoop绑定计算与存储资源,在很多应用场景造成资源浪费。这种情况在离线数据中尤为显著,客户经常面临两难问题:一方面高规格CPU的原生Hadoop集群采购成本过高,另一方面对象存储又不能满足离线分析的性能要求。

方案架构:

        捷誊推出计算与存储分离解决方案, 在硬件上采用高密度低成本服务器构造计算集群、高密度低成本微服务器构造存储集群,并在软件上采用JetLake高可靠分布式存储软件,兼容原生HDFS的Hadoop Connector类库, 可无缝支持Hadoop/Spark MR,HBase, 和各类SQL引擎 (Hive/Phonix/Impala) 。 

方案特点:

1563417002891537.png


方案价值:

        产品在不降低性能情况下比传统 Hadoop方案节省50%以上成本。


Hadoop 压缩扩容方案

方案痛点:

       对客户已经部署好的Hadoop系统,传统扩容方案需按比例增加Hadoop节点,但客户数据中心机房经常空间紧张,或者客户预算不足,因此在不大规模增加节点的前提下扩充系统容量成为难点 。

方案架构:

       捷誊在不改变客户集群架构的情况下,只在每台服务器配置捷誊智能数据加速卡,用FPGA芯片存入硬盘的物理数据,从而提高硬盘有效容量,并通过算法大幅提升单机处理能力,减少客户大规模集群扩容的成本支出。

        1564018874127946.png

方案价值:

        捷誊在Hadoop领域为客户提供无损压缩/纠删码等多种Data Reduction机制,扩展物理存储的有效容量和性能,在存量市场为有扩容需求的客户节省50%以上综合成本。



查看更多