首页      商超       烟酒       冷冻       乳品        肉品      糖业       调料       粮油       保健      饮品      餐饮       日化
当前位置:主页 > 消费安全 >
支撑PB级 南大通用新版数据库向大数据分析迈进
时间:2014-04-22 19:21  浏览次数:

  大数据在诞生之初,并非是一个确切的概念,最初是指需要处理的信息量过大,且超出一般电脑处理数据时所使用的内存量,因此工程师们必须要改进处理数据的工具。所以围绕着大数据你总能看到像Hadoop这样的名字。新技术使人们可以处理的数据量大大增加,但更为重要的是,这些数据不再需要传统的数据库表格来整齐地排列。在大数据时代,一种数据库架构支持多类应用已经行不通了,多种架构支持多类应用成为了数据库发展的新思路。

  这一新思路造就了目前数据库市场OldSQL、NewSQL、NoSQL三分天下的格局,其中NewSQL成为了行业大数据的理想架构,在这一阵营中,国内市场能够与EMC的Greenplum,惠普的Vertica争夺市场的就不得不提,国产新型数据库厂商南大通用,南大通用的GBase 8a Mpp Cluster是目前能够处理PB级的数据库产品。近日这一产品也迎来了具有里程碑意义的新一代版本。

  专注行业大数据分析的新型数据库

  区别于互联网大数据,行业大数据的软件资源要较为欠缺,尤其是数据库方面。GBase 8a MPP Cluster是目前南大通用面对集群处理的数据库产品,主要用于行业大数据的分析工作。所采用的MPP技术,代表着大规模并行计算,具有高性能和高扩展性等特点。

  区别于使用共享存储的架构,该产品采用了Shared Nothing架构,该架构的特点,是每一个服务器只能看到数据的一部分,使其具有更好的横向扩展能力。加之通过列存储、粗粒度索引等多项大数据处理技术,结合MPP高效的分布式计算模式,能够完成对PB级结构化数据分析类应用的支撑。

  在发布会当天,南大通用的高级副总裁兼CTO武新博士对该产品也是抱以厚望,并表示:“这款产品在制作之初,就定位于数据库的细分市场,将数据分析作为主要的发展方向,随着大数据的出现,这一方向的价值也得以体现。与此同时数据的类型也从结构化转变成为非结构化,新版的数据库将会对结构化、半结构化到非结构的数据达到更全面的支持。”

  更快更高更强的新版数据库

  新版GBase 8a MPP Cluster的特性,武新博士通过几个数字,描述了新版产品的不同之处。他表示:“新版产品的研发费用达到了千万水平,产品经过3年的成长,南大通用将新版本定位为一代里程碑的产品,加入了100多个新功能,主要目标是能够有效支撑PB级的企业级数据仓库。”

  新版数据库在性能上整体要比老版快一倍,在高可用上也要更好,武新强调:“高可用对用户来说,能用就是高可用,而对于产品来说,需要在细节上达到高可用,例如在线状态下,能够替换服务器之类的功能。”在新版本中,加入了许多类似这样的细节处理,使得应用的可用价值得到提升。新版数据库的另一个特点则是向着企业级应用的方向发展。企业级的层面对于产品的要求也更加严格,从产品的安装到使用都需要有一个品质的保证。

  谈到企业级更多的人会联想到Hadoop,武新也指出,GBase 8a与Hadoop是不同的技术来源,GBase 8a是基于传统的关系型模型来进行开发的,采用C++等语言来完成,虽然技术根源不同,但却吸收了Hadoop的技术理念,使其架构上更加完善,而关系型数据库也有着更为成熟的优点,与Hadoop相比有着更强的数据一致性。

  面向电信、金融、安全、政企的新版数据库

  在数据库的实际使用情况方面,武新表示,目前已经在电信、金融、安全、政企这四个领域有应用落地使用,而从应用特征的角度来看,新版数据库涵盖了四类应用,第一是管理类应用,这一类应用体现在企业运营产生的数据,例如电信行业的用户账单,流量使用日志等。第二类为角色分析类,较为典型的是金融行业的审计系统。第三类是监管类应用,像食品安全所产生的数据。最后一类是专用类应用,这类数据主要体现在,地震产生的数据,卫星传感数据等。

  从实际的使用情况来看,数据库的使用涵盖了目前市场上的4大行业,在应用的支持上,也做到了较为全面的覆盖。对于未来的发展,武新也表示将会和更多的厂商进行合作,例如与一体机的整合,这样一方面能够扩大市场,另一方面也可以降低集群数据库的使用门槛。

  新版数据库标志着南大通用从数据分析向大数据分析的一次迈进,也是上百位工程师一年努力的成果,相信在大数据分析市场,南大通用作为国内本土厂商,在中国市场凭借自身的本土化属性能够进一步发展壮大。




上一篇:衡阳高新区全力开创食品药品安全监管工作新局面   下一篇:“地沟油去向”不能成“难解谜局” 四川新闻网 - 太阳鸟时评
分享到:
文章编辑: 网络整理员