cncommunitymgr
3 Argentium

【微信群提问分享】Isilon Hadoop兼容版本问题

转到解答

微信群用户“haryy”提问:

Isilon Hadoop除了结合CHD,还支持别的大数据产品吗?

标签 (1)
标记 (1)
0 项奖励
4 条回复4
Jeffey1
4 Ruthenium

Re: 【微信群提问分享】Isilon Hadoop兼容版本问题

转到解答

大部分将Hadoop产品化的平台都可以跑在Isilon上,比如Hortonworks和mapr都可以泡在Isilon上,并且Isilon已经通过这些平台的官方认证。

0 项奖励
Highlighted
born_chen
4 Germanium

Re: 【微信群提问分享】Isilon Hadoop兼容版本问题

转到解答

请教想了解下,具体Isilon 怎样和HD结合,比如用到了哪些Isilon 的技术,以及哪些HD的技术,然后同比其他存储,又有哪些优势呢?

0 项奖励
Jeffey1
4 Ruthenium

Re: 【微信群提问分享】Isilon Hadoop兼容版本问题

转到解答

born_chen

       现有的大数据分析平台绝大部分是基于HDFS文件系统,因此用户选择的存储系统最好支持HDFS协议。否则用户就需要额外的准备一个数据分析平台,每次分析时需要将原数据从存储系统抽取到数据分析平台,这将导致用户不能进行大数据的实时分析,而且Hadoop进行数据分析时需要拷贝3份原数据,对于动不动数P的大数据分析原数据,这会占用极大的额外存储空间。用户选择Isilon就是因为它能帮助用户解决这些问题,此外Isilon支持横向扩展,最大可以扩展到144节点,几十个PB,这解决了用户日后容量扩展的后顾之忧,这就是竞争优势所在吧。



Jeffey1
4 Ruthenium

Re: 【微信群提问分享】Isilon Hadoop兼容版本问题

转到解答

born_chen

我再介绍一下现在大数据分析生态圈和十年前有哪些区别。十年前Hadoop最早只有二个组件:HDFS文件系统和MapReduce分析引擎。而现在已经发展成为一个拥有几十个组件众多巨头的生态圈,从原来的2层架构变成了4层架构。

现有架构中,底层用于存储,通常使用HDFS文件系统,当然也有极少Kudu这类不使用HDFS文件协议,EMC的存储硬件产品主要就是解决底层存储问题。解决完存储数据问题后,数据分析还需要一个成熟平台,Cloudera这类公司会发布一些成熟的Hadoop版本,以解决用户在进行大数据分析时遇到的安全性、运维能力、社区同步性和兼容性等问题。最上面会有Pivatol或者Splunk这类公司提供行业分析解决方案,通常都是根据不同的场景提供不同解决方案滴!