【IT168 专稿】本文根据【DTCC2016中国数据库技术大会】现场演讲嘉宾武新博士分享内容整理而成。录音整理及文字编辑IT168@杨璐
讲师简介
武新博士
武新,博士,现任南大通用高级副总裁兼CTO。
第五批“国家千人计划” 专家,2010年获得中组部实施的国家“千人计划”荣誉(海外高层次人才引进计划);曾作为资深数据库专家,在甲骨文公司(法国)任职11年;曾是法国 EKIP 软件公司的技术负责人、法国电信软件开发工程师。
武新博士自加入南大通用以来,主导设计和研发了GBase 8a 列存储数据库, GBase 8a MPP Cluster大规模并行数据库集群等一系列产品。
正文
大家上午好,本港台直播是南大通用的CTO武新,非常高兴也非常荣幸的代表公司来给大家汇报一下本港台直播们下午即将发布的一款新产品,这里本港台直播提前把产品的一些细节分享给大家。
要发布的产品是面向企业和行业的用户,本港台直播们认为是一款行业和企业用户真正需要的大数据平台产品。它的名字叫GBase UP,UP是Unified Platform,本港台直播们希望能把关系型数据库和NoSQL的一些子系统和技术融合在一个产品里面。
本港台直播的汇报大概分成四部分
行业IT面临的一些痛点和问题
经过几十年的发展,本港台直播们其实已经建立了很多很成熟的业务系统和应用系统。这些业务系统的建设其实过去一直是以事务型的方式在建设,也就是说,首先要满足本港台直播们的业务需求,这种业务系统往往是以传统数据库,以交易型为主,其数据强调自身的、局部的完整性和一致性。
这就对本港台直播们今天的数据分析产生了一个矛盾的地方。因为每个业务系统只有本港台直播们这个企业的一部分数据,本港台直播们的数据分析需要的是在全局数据里面挖掘出信息。从大数据角度来说,本港台直播们认为可能是一个全视角的需求。
那么怎么把数据孤岛打通,汇总在一起,真正在上面进行本港台直播们全视角的大数据分析,其实这是一个本港台直播们现在的业务系统和大数据分析的一个矛盾。
三座大山:1.本港台直播们过去建立了很多数据孤岛,这些数据孤岛本港台直播们还继续在建设,因为本港台直播们的业务系统在企业里面基本上是按具体业务去设计,去应用的,开奖直播很少考虑全视角的建设;本港台直播们做这个数据分析的时候,本港台直播们就需要把这些数据孤岛打通。过去一个方法是做数据仓库,已将近二十年历史了。在做数据仓库的时候常常面临的性能问题,跟传统数据库的体系架构还是有关系的。
2.用新一代基于MPP架构的数据库产品,本港台直播们其实解决了大型数据仓库的效率问题和规模问题。这样本港台直播们可以把本港台直播们一些业务系统的数据真正汇总在一个平台上进行全视角的分析。3.未来,其实未来也就是现在,面临着大数据的挑战,本港台直播们认为大数据不仅仅是关系型数据库产生的数据,不仅仅是当前业务产生的数据,还有其开奖直播来源的数据。这些数据和本港台直播们的业务数据怎么进行关联,这些数据可能需要不同的模型来处理,还有一些异构的技术,包括一些新的技术也层出不穷。其实这些都是本港台直播们企业今天面临的挑战。
大数据时代分而治之的数据处理解决方案
1. 传统的事务型数据库,这一类数据库已非常成熟,也是目前在企业里交易系统最核心的数据库产品。
2. 新型的MPP数据库产品,是基于大规模并行计算和横向扩展的架构这样一类数据库产品。
3. hadoop,hadoop长处是有些关系型数据库解决不了或者是处理不了的一些问题开奖直播能处理。
既然这三种技术之间目前还没有一种技术能完全替代其开奖直播的技术,那么对大数据平台的需求自然就是这三种技术融合在一起,这是本港台直播们的一个想法,也是本港台直播们针对这样一个想法实现了本港台直播们这个产品。
企业大数据系统落地难
1. 大数据的技术变化非常快,对于企业来说,需要一个稳定的平台和技术支持生产系统。
2. 在大数据的视角下需要结构化数据和一些半结构化数据甚至非结构化数据提取出来进行各种各样的关联。
3. 越来越多的组件导致运维很困难。
4. 对于普通企业用户来说,还有一个问题就是系统开发和技术支持方面的人才匮乏。
(责任编辑:本港台直播) |