传统以来,英特尔是一家基于半导体芯片制造和技术创新的公司,在推动行业创新引领业界发展方面贡献不遗余力。而大数据时代的到来,将加速英特尔从产品提供商到服务提供商的转型,围绕应用提供包括产品、技术和平台的整体解决方案。
根据IDC在大数据方面的预测,中国将成为大数据最重要的市场。作为以半导体芯片为特长的英特尔公司来说,很早就在中国开设有(英特尔中国也是英特尔全球部署最全面的第二大机构)研究院,并且在软件行业每年都有大量的开源技术专家参与开源项目(比如去年成立的通软英特尔博锐技术解决方案中心)。而作为英特尔发行版Hadoop,也恰恰是众多开源项目中的一个,是一套基于Hadoop可满足不同行业需求的完整解决方案。在去年,英特尔为此还发布了基于Hadoop的发行版和免费版产品。
英特尔Hadoop发行版管理工具(一站式安装、部署、配置、监控和告警)
相比传统的Hadoop开源版本,英特尔发行版专门从软硬件层面分别进行了深度优化。有助于提供相比其他Hadoop平台更可靠、更高性能、更多和更易于管理的大数据解决方案。
基于英特尔Hadoop发行版,在原有的开源版本基础上进行了特殊强化,包括HDFS、MapReduce以及 HBase都有重新改写,同时并支持SQL查询指令语言Hive,对于SQL指令的查询速度提升了8.5倍。另外,它还可以直接支持Xeon进阶运算加密指令集AES-NI,来提高数据运算速度,还能让数据收集、储存到HBase的过程,可以被芯片原生的加密功能保护,而性能又不会因为加密受到影响。在成熟且广阔开放的x86平台上,基于英特尔发行版Hadoop可以实现深度融合,其免费版Hadoop也有助于化解Hadoop开源版本部署技术门槛高的问题。
最值的称道的是,英特尔还将Hadoop直接固化到底层的处理器芯片中,并且通过固态驱动器与缓存加速来实现优化(参考《融入“芯” 英特尔Hadoop应对大数据应用》)。
从以上的各大Hadoop发行版平台来看,得益于英特尔在计算领域的独特专长(大数据价值挖掘的最重要任务就是计算处理)以及在内存、存储等技术上的创新和行业经验的成熟,使得英特尔Hadoop发行版在功能、管理、扩展、性能方面都具有长足优势。当前,通过中国电信、智能城市、医疗等行业领域的合作,英特尔Hadoop发行版针对中国市场的行业和应用特点还有更进一步的优化。这些对于中国大数据市场来说,英特尔Hadoop发行版势必拥有更多实战舞台的空间。
或许,基于英特尔软硬件的大数据解决方案,将更多地会以服务和成品的形式,在大数据时代“独领风骚”。