当先基于批流一体,网易易数被入选浙江省软件产业高质量发展省市重点项目

近日,浙江省经信厅公布2020年浙江省软件产业高质量发展重点项目公示名单,经过企业自主申报、地方帮我推荐、专家评审等多个环节,凭借在技术创新性、先进性等方面的突出表现,网易数帆旗下网易易数批流一体实时地数据中台(以下简称"易数数据中台")完成被入选。易数数据中台是设计和实现网易杭州研究院十几年实践经验研发的下一代大数据一站式服务应用开发和管理平台。民间大数据计算出有两类比较多对象,批可以计算操作的对象是离线状态表,而流计算操作的对象是相册的数据流。两类计算的处理渐渐无法形成了两套不同的体系,这样的不单浪费掉更多的存储空间,也也让大数据的开发成本更上一层。易数数据中台数月前将批换算和流计算出的编程模型通过了统一,想提高了大数据应用开发的简明性,颇大减低了的新成本和运营成本。另外,数据中台基于条件批流异构计算数据统一管理,并研制开发了极大规模作业调度保障技术,是可以有效更注重数据分析和预测和基线运维能力,保障大规模行动古怪任务。目前,易数数据中台巳经形成了求全部的大数据解决方案,除开数据传输、离线开发、自助分析、任务运维中心、实时自动开发、数据质量中心、指标系统、数据资产中心、模型设计中心、数据地图、数据服务、流程协作与通知中心、问答中心等多个功能模块,这个可以集中系统管理可重构大数据源并可以提供实时计算分析能力,将从海量数据中发掘出来的结果以相册可视化的形式展示,为有大数据学习积累的中大型企业提供给数据集成、存储、计算、分析和开掘能力。易数数据中台实现方法接受1000个以内计算节点,单周去处理数据能力至少PB级别;实时计算能力接受可以计算100亿条数据/天的能力,可去处理达到15万条/秒的日志数据;批流统一规定存储和管理,数据存储空间会降低50%,能提供二十分钟级数据延迟;90%的作业预测误差在10分钟内,作业按时保质完成率80。网易云音乐在实际应用中,利用代码量减少35%,物理结点节约能源30%,而开发人员会减少了1/2。应用方面,网易易数与进口牌子鲲鹏生态紧密融合,也完成大数据兼容性测试,蓝月帝国华为ISV伙伴并完成华为鲲鹏认证。在智能制造、零售、金融、能源、医药、互联网等行业领域中,易数数据中台已我得到广泛应用,快速有效助力传统企业数字化转型升级,冲击大数据产业发展。

分享: