大数据技术,助力打造新一代车辆智能运维数据中台,明略科技 张敏,2019/6/28,大数据技术明略科技 张敏,关于明略科技,中国领先的行业人工智能产品与服务平台,国内估值最高的大数据公司，独角兽企业,深入行业，致力于服务企事业单位,关于明略科技中国领先的行业人工智能产品与服务平台,明略科技精英团队,教育背景,明略科技人,平均从业年限,5,年，拥有资深行业实战经验，部分资深技术专家从事数据挖掘,10,年；,大部分人才具有,华为、腾讯、,IBM,、,NEC,、埃森哲、,SAP,、亚马逊、铁道部、卡斯柯、交通部、公安部,等世界,500,强及企事业单位职业经历。,职业背景,明略科技集团核心技术团队对,大数据技术开源社区持续贡献,，,其中拥有,奥数金牌获得者、,ACM,金牌获得者、国际编程竞赛金奖获得者、并行计算引擎,Spark,贡献者、机器学习,TensorFlow,贡献者、查,询引擎,Kylin,核心,贡献者、,Apache Bigtop,代码贡献者、,phpHiveAdmin,的作者、,HACE Theorem,创立人,等顶级技术人才。,技术背景,明略科技集团目前拥有,2000+,员工，人才基数不断上涨；,大部分员工拥有名校教育背景，其中不乏来自,清华、北大、瑞典皇家理工、香港大学,等国内外顶尖名校精英组成的技术或商务团队。,明略科技人才关键词“高、精、尖”,明略科技精英团队教育背景明略科技人平均从业年限5年，拥有资,明略科技核心技术能力,海量数据处理和,动态请求响应能力,强大信息检索和,信息推荐技术,全球领先的,知识图谱技术,多模态人工智能技术,明略科技建设了市场上最大的广告效果监测评估和反作弊系统，服务众多,世界,500,强和中国,500,强,企业，覆盖,PC,端、移动端、数字电视等各种媒介形式的全部主流数字媒体。,在日均请求量超过,10,亿次，日均增量数据超过,10TB,的海量数据下，实现毫秒级响应，同时积累历史数据达到,10PB,级并可以在秒级完成复杂计算。,明略科技集团面向各行业提供了通用信息检索引擎及推荐平台，,支撑跨行业,PB,级体量的数据下的数据检索、分析、统计、及推荐服务。,在公共安全领域解决多地安保核查及维稳管控需求，每年的暑期安保期间，支撑民警,每周,10,万次查询,，及安保重地的万人并发。探索数据关联和业务知识的检索推荐，大大提升民警研判侦破效率，用数据服务保障国家安全。,明略科技,2015,年完成国内首个公安知识图谱的实践，,2018,年建立国内首个公安知识图谱标准,。,明略数据与公安部一所联合发布公共安全知识图谱白皮书,。,三十多大类,公安数据来源中的,6529,张表,和,1538,亿条数据,80%,以上,不同种类公安数据的处理经验。,2018,年建立国内银行业首个全行级知识图谱，建立国内领先的基于知识图谱的设备维护实践。,明略科技智慧餐饮解决方案，,利用视觉、音频和,AIOT,设备实现多模态识别，数字化线下门店的生产，服务和运营等过程，,从而建立起门店智能管理系统。通过洞察，分析和决策的闭环，提升经营管理和生产效率，规范服务质量，给客户提供超出预期的服务体验。,完善数据中台,搭建能力,明,略科技建设智慧坪山城市级数据中台，具有开放性的,智慧应用与数据治理能力、高扩展、高开放性、组件化、广泛兼容性,，同时满足人性化、可灵活配置的集成软件系统纵向贯通坪山区各层级的信息资源系统与城市智慧应用的垂直通道，,构建统一、高效、准确、安全的信息加工平台；,横向通过大数据平台的各功能组件，满足跨部门、跨领域的信息交互，达到资源共享、业务协同的目标。,明略科技核心技术能力海量数据处理和强大信息检索和全球领先的多,AI,三步走：数据在线，分析洞察，闭环智能,分析洞察,闭环智能,Step,3,Step,2,Step,1,数据在线,AI三步走：数据在线，分析洞察，闭环智能分析洞察闭环智能St,明略参与轨交的案例等,数据共享平台,车辆智能运维平台,协会大数据平台技术规范,轨道交通示范工程,明略参与轨交的案例等数据共享平台车辆智能运维平台协会大数据平,目录,目录,content,1,2,3,为什么要中台框架,什么是数据中台,数据中台,车辆专业中的应用,数据中台产生价值,目录目录content123为什么要中台框架数据中台数据中台,车辆运维业务正全面朝着信息化、智能化方向发展,1.0,2.0,3.0,4.0,数据统计分析,资料文件的管理,统计分析为主,信息电子化,必要业务的信息化,电子化管理,业务应用智能化,智能化驱动业务,业务数据线上化,数据服务驱动化,业务场景驱动,数据应用闭环,车辆运维业务正全面朝着信息化、智能化方向发展1.02.03.,支撑车辆智能运维信息化建设的应用系统,专家业务,应用,PHM,系统,车辆知识库系统,维修规程管理系统,智能维修管理系统,故障诊断,健康评估,整车级,子设备级,车辆资料文库,列车全寿命周期,设备履历,工单履历,库存履历,规程业务流管理,规程影响因素管理,维修手册,作业指导书,可靠性分析,设备指标参数,故障综合管理,故障去重,故障模式,智能故障建议,智能排班管理,基础业务,应用,企业资源管理系统,库存管理系统,施工管理系统,OA,管理系统,生产辅助管理,智能业务,应用,在线监测系统,轨旁监测系统,点巡检系统,鹰眼系统,工具箱系统,移动端管理,支撑车辆智能运维信息化建设的应用系统专家业务PHM系统车辆知,我们看看建设的业务系统在使用中会遇到有哪些问题？,现有信息化建设中遇到的问题,效率问题,为什么业务系统开发一个报表需要以周为单位？,为什么有了好的想法到系统建完，要用近,1,年时间？,为什么获取的数据总是有问题？,如何知道企业都有什么数据？,同一个业务分类，不同的系统中会有不同的数据？,同样的数据逻辑为什么要重复开发？,只是因为不同的实施团队？,协作问题,标准问题,重复问题,我们看看建设的业务系统在使用中会遇到有哪些问题？现有信息化建,我们是如何建设信息化系统,服务器,搭建服务器,Oracle,Mysql,搭建数据库,逻辑,A,逻辑,C,逻辑,B,逻辑,D,开发,业务逻辑,Weblogic,Tomcat,开发中间件,应用,1,应用,2,应用,3,应用,前台开发,工单管理系统,客户,测试,上线,设计,开发,需求理解,软件集成商,业务需求,工单,作业,得管起来，做个系统吧！,我们是如何建设信息化系统服务器搭建服务器OracleMysq,我们是如何建设信息化系统,服务器,搭建服务器,Oracle,Mysql,搭建数据库,逻辑,A,逻辑,C,逻辑,B,逻辑,D,开发,业务逻辑,Weblogic,Tomcat,开发中间件,应用,1,应用,2,应用,3,应用,前台开发,服务器,搭建服务器,Oracle,Mysql,搭建数据库,逻辑,A,逻辑,C,逻辑,B,逻辑,D,开发,业务逻辑,Weblogic,Tomcat,开发中间件,应用,1,应用,2,应用,3,应用,前台开发,工单管理系统,车地无线系统,PHM,系统,服务器,搭建服务器,Oracle,Mysql,搭建数据库,逻辑,A,逻辑,C,逻辑,B,逻辑,D,开发,业务逻辑,Weblogic,Tomcat,开发中间件,应用,1,应用,2,应用,3,应用,前台开发,我们是如何建设信息化系统服务器搭建服务器OracleMysq,有没有重复投入,？,有没有可以重复利用的功能？,工单管理系统,服务器,Oracle,Mysql,逻辑,A,逻辑,C,逻辑,B,逻辑,D,Weblogic,Tomcat,开发中间件,应用,1,应用,2,应用,3,搭建服务器,搭建数据库,开发,业务逻辑,应用,前台开发,车地无线系统,服务器,Oracle,Mysql,逻辑,A,逻辑,C,逻辑,B,逻辑,D,Weblogic,Tomcat,应用,1,应用,2,应用,3,PHM,系统,服务器,Oracle,Mysql,逻辑,A,逻辑,C,逻辑,B,逻辑,D,Weblogic,Tomcat,应用,1,应用,2,应用,3,搭建服务器,搭建数据库,开发,业务逻辑,开发中间件,应用,前台开发,搭建服务器,搭建数据库,开发,业务逻辑,开发中间件,应用,前台开发,我们是如何建设信息化系统,打破各系统数据独立应用，形成统一建设和管理！,服务器集群化统筹管理 资源共享,减少数据资源浪费和数据资产管理不一致,形成统一数据资产管理能力,实现业务所产生的数据资产全局化管理,相同功能不重复开发，实现技术、逻辑的复用,不再烟囱式开发，实现全业务应用顶层建设,有没有重复投入？工单管理系统服务器OracleMysql逻辑,我们应该搭建怎么样的平台,内核能力是以业务视角而非纯技术视角智能化构建,建设智能数据和催生数据智能的引擎,管理数据资产，并提供数据调用、数据监控、数据分析与数据展现等多种服务,数据资产化,数据智能化,数据价值化,数据资产管理：,从业务视角建设既“准、快、全、统、通”的智能大数据体系，同时极致化追求技术上的降低成本和提高效率,数据智能创新：,致力于智能大数据与业务场景深度融合的各类应用与智能化价值创新,数据中台,企业业务数据全局出发考虑,用技术实现业务数据价值化,我们应该搭建怎么样的平台内核能力是以业务视角而非纯技术视角智,为什么不是大数据平台而需要中台架构,业务数据化：资产先行、数据打通、治理管控，为业务系统提供数据或分析结果的共享，被动方式,数据业务化：集团战略、顶层设计、业务融合、微服务化、服务的共享，主动方式,数据价值化,业务数据化,平台架构,中台架构,出发点：业务需要什么服务,出发点：我有什么数据,度量点：数据治理如何,度量点：业务对我的服务满意度,为什么不是大数据平台而需要中台架构业务数据化：资产先行、数据,基础设施层,中台架构层,应用展现层,车辆业务的中台架构,基础设施层中台架构层应用展现层车辆业务的中台架构,中台架构的建设思考,中台框架,数据中台,大数据平台,全局考虑,顶层设计,业务抽象,应用解耦,标准建设,服务共享,应用前台,企业资源管理,库存管理系统,施工管理系统,OA,管理,生产辅助管理,PHM,管理,车辆知识库,（一车一档）,在线监测,轨旁监测,业务,中台,主数据,业务数据,标准协议,消息推送,规则引擎,库存接口,查询页面,状态数据,故障数据,数据共享,接口共享,通用报表,中台架构的建设思考中台框架数据中台大数据平台全局考虑业务抽象,中台架构的业务价值,是否有共性业务功能,是否有共性技术组件,是否有共性数据库,有公用技术组件,数据接口,不用再独立开发数据接口,有公用业务功能,消息推送,不用再独立开发消息推送,车辆智能运维平台（中台架构）,数据中台,业务中台,核心业务功能开发,业务应用完成,设计阶段,客户,需求理解,软件集成商,业务需求,建设个新系统！,有公用数据库,Hbase,不用再独立建数据库,效率问题,重复问题,解决,协作问题,标准问题,中台架构的业务价值是否有共性业务功能是否有共性技术组件是否有,中台架构的意义,&,目的,场景驱动,搭建灵活快速应对变化的架构,帮助企业用数据思维激活行业沉淀，形成发展新动力,业务创新,经验沉淀,借助中台沉淀能的能力，支持快速创新,研发更灵活，业务更敏捷,快速应对不断变化的市场需求,更快实现前端需求,避免高度服用的功能重复建设,敏捷开发，提高效率,意义,目的,让企业更专注业务,让开发变得更高效,中台架构的意义&目的场景驱动搭建灵活快速应对变化的架构业务创,车辆智能运维参与者,地铁公司,主机厂,设备供应商,明略科技,列车原理清晰,了解故障机理,列车整体把握力强,中台架构搭建,前沿技术开发,数据挖掘分析,部件原理清晰,针对性强,参数认识丰富,运维需求明确,业务流程熟悉,运维经验丰富,车辆智能运维平台,（中台架构）,需求分析,业务主导,整车设计、制造支持,整车级,PHM,部件设计、制造支持,部件级,PHM,平台搭建,技术支持,车辆智能运维参与者地铁公司主机厂设备供应商明略科技列车原理清,车辆智能运维平台,（中台架构）,地铁公司,主机厂,设备供应