3月30日,2021(第七届(jiè))中国国际大数据(jù)大(dà)会在北京成功召开。500多位大数据行业嘉宾齐聚一堂,围绕“数字筑基(jī) 智见未来”主题,研讨数字经(jīng)济时代,数(shù)字转型的(de)难点与路径;共探“十四(sì)五”时期,大数据发展趋势与(yǔ)新机遇!
华(huá)为云中国区副总裁胡维琦(qí)受邀出(chū)席大会并发表 “开发数据商业价值,助力政企(qǐ)数据资产化”主题演讲。同时,华(huá)为云(yún)数据使(shǐ)能DAYU服务中的(de)FusionInsight MRS云原生数据湖(hú)、Data Lake Insight DLI数据湖(hú)探索分别(bié)荣获“2020年(nián)度大数据行业优秀解决方案”奖、 “2020年度大(dà)数据行业(yè)创新产品”奖,这是业界对华为在大数(shù)据领域持续技(jì)术创新(xīn)、实(shí)践应用等(děng)方面成绩(jì)的再度肯(kěn)定。
图 华为云获2020年度大数据行(háng)业奖项
开发数据(jù)商业价值,助力政(zhèng)企数(shù)据资产(chǎn)化
华为云中国区副总裁胡维琦女士在(zài)大会主题演(yǎn)讲中提到,“数据发展(zhǎn)重(chóng)心逐步从关键技(jì)术向生产要(yào)素演进(jìn),在这个过程中(zhōng),数据资产(chǎn)化并安(ān)全流通是商业新(xīn)机遇。华为云数据使能DAYU服(fú)务,助力政企(qǐ)加(jiā)速把数据资源加工(gōng)为数据资产,让(ràng)数据像清洁的水电一样(yàng)为政企使用,为数据(jù)成(chéng)为整个(gè)社会的生产要素打下(xià)坚实的(de)基础。”
图 华(huá)为云(yún)中国区副总裁胡维琦做主题发言
在工业大数据论坛中,华为云专家表示,“工业数字化转(zhuǎn)型已是全球共识。从我们的实践(jiàn)看来,工业数字化转型的关键在(zài)于打通信息物理系统,构筑IT和OT数据(jù)融合的工业互联网平台,用AI加持,逐(zhú)步使能智能制造再升级(jí)。“
华为云FusionInsightMRS云(yún)原(yuán)生数据湖斩获“大数据(jù)行业优(yōu)秀解决方案奖”
华为云FusionInsight MRS云原生(shēng)数据湖,一个架(jià)构可持(chí)续演进,构建离线、实(shí)时(shí)、逻辑三种(zhǒng)数据湖,助力客户(hù)释放(fàng)海量数(shù)据价值(zhí),让业务洞见更准,价值兑(duì)现更(gèng)快。
l 离线数据湖(hú):HetuEngine提供秒级(jí)交互式查询能力,数据(jù)不出湖,分析链路短(duǎn),性能比Impala快30%+,分析提效10倍+;DLC提(tí)供统一(yī)的(de)元数(shù)据(jù),数据全(quán)局可视; HetuEngine提供湖内统一SQL接口:HDFS、Hive、Hbase、ES等(děng),简(jiǎn)化用数。
l 实时(shí)数据湖:流处理 + Hudi实现数据增(zēng)量更新(xīn)入湖,从(cóng)T+1到(dào)T+0; ClickHouse提供毫秒级实时OLAP分析能力;Flink提供FlinkSQL能力,批流SQL接口统一(yī),实现(xiàn)流(liú)批一体。
l 逻辑数(shù)据湖:HetuEngine提供(gòng)跨湖、跨仓、跨云统一访问,减少数据搬迁,数据高效流动,全域数据秒级(jí)协同(tóng)分析秒级(jí)响应,业务上线效率提升10倍,由(yóu)“周级”缩短(duǎn)至“天级”。
华为云DLI数(shù)据湖探索斩获“大数据行业创新产品奖”
华为(wéi)云数据湖探索(Data Lake Insight,简称(chēng)DLI)是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Presto)生态(tài),提供一站式的流处理、批处(chù)理、交(jiāo)互(hù)式(shì)分析的Serverless融合处(chù)理分析服务(wù)。 企业(yè)使用标准SQL、Spark、Flink程序就可(kě)轻松完成多数(shù)据(jù)源的联合计算分析,挖掘和(hé)探(tàn)索数据价值。
1) 融(róng)合(hé)数据湖:一站式的(de)实(shí)时分析、离线分析、交(jiāo)互式分析的Serverless融合处(chù)理分析服务
• 实时分析:Flink提供FlinkSQL能力,批流(liú)SQL接口统一,实现流(liú)批一体(tǐ)。
• 离(lí)线分析:深度优化的(de)Spark内核(hé),在TPC-DS标准套场(chǎng)景下性能(néng)比开源版本快50%+。
• 交互式分析: openLooKeng提供秒级交互式查询能力(lì),性(xìng)能比(bǐ)Impala快30%+。
2) 容器加持(chí):基于Kubernetes的容器管理技术,满足用户扩缩容和AI分析(xī)需求
• 自动扩缩容(róng):根据业务(wù)负载,对计算(suàn)资源进行预估和自动扩缩容。
• 自定义镜像(xiàng):支(zhī)持运行Kubernetes生态的用户自定(dìng)义镜像,便于用户快速构建基于(yú)行业库(kù)的数据(jù)分析(xī)能力。
3) 跨源分析:支持(chí)跨源统一访问,数据虚拟入湖,逻辑统一(yī)访(fǎng)问,免数据搬(bān)迁
• 跨源访(fǎng)问(wèn): 支(zhī)持多种数据格(gé)式,云上多(duō)种数据源(yuán)、ECS自建数据库以及线下数(shù)据库,数据无需搬(bān)迁,即可实现对云上多个数据源进行(háng)分析,构建企业(yè)的统一视图(tú),帮助(zhù)企业(yè)快速完成业务创新和数据价(jià)值探索
• 算(suàn)子下推:将算子下推到数据源进行计算获取到更(gèng)好的性能,减少跨源(yuán)分析时经(jīng)过(guò)网络的数据量