单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,数据中心,DataCenter,Linux,分布式文件系统,Distributed File System,任务调度,Job Scheduling,集群部署,Deployment,集群监控,Monitoring,弹性计算服务,(ECS),开放结构化数据服务,(OTS),开放存储服务,(OSS),开放数据处理服务,(ODPS),云引擎,(ACE),地图、电邮、搜索、安全、渲染、,PW,社区,云市场及第三方服务,大规模分布式计算系统(飞天),关系型数据库服务,(RDS),资源管理,Resource Management,安全管理,Security Management,远程过程调用,Remote Procedure Call,分布协同服务,Distributed Coordination Service,开放缓存服务,(OCS),阿里云体系架构,-1,级架构图,2024/11/18,管理飞天以及上层应用服务的部署和配置、支持集群增量扩容和应用服务的在线升级,监控飞天集群和上层应用服务的运行状况和性能指标,支持在线离线的性能剖析和故障诊断。,管理飞天以及上层应用服务的部署和配置、支持集群增量扩容和应用服务的在线升级,监控飞天集群和上层应用服务的运行状况和性能指标,支持在线离线的性能剖析和故障诊断。,门类齐全的云服务产品,满足用户存储,计算,数据库,大数据分析的需求,以飞天大规模分布式计算系统为平台支撑,统一管理集群的系统资源,控制分布式应用的运行,多用户的运行环境,资源共享,安全隔离,Linux,数据中心,Data Center,基于,Kerberos,的用户认证,基于权能机制的访问控制和授权。,提供点对点的进程间远程调用服务,支持通讯信道的数据压缩和一致性校验。,提供命名服务、状态同步服务和分布式锁服务。,调度和分配集群的内存和计算等资源,管理进程的生命周期和资源使用。确保多用户之间公平有效地共享集群资源。,分布式文件系统,Distributed File System,任务调度,Job Scheduling,一个,10PB,级别、上亿个文件的文件系统,提供类,POSIX,的,API,支持随机读、追加写。,面向海量数据处理和大规模计算类型的复杂应用,提供了灵活高效的数据驱动的多级流水线并行计算框架。,开放存储,服务,(OSS),开放结构化数据服务,(OTS),开放数据处理服务,(ODPS),弹性计算,服务,(ECS),关系型数,据库服务,(RDS),Aliyun API,Deployment,集群布署,Monitoring,集群监控,以绿色高效的云数据中心和大规模,Linux,服务器集群为基础,资源管理,Resource Management,安全管理,Security Management,远程过程调用,Remote Procedure Call,分布协同服务,Distributed Coordination Service,飞天大规模分布式计算系统,(Apsara),阿里云体系架构,-1,级架构图,2024/11/18,阿里云的,技术层次(云计算,&,大数据),业务应用,基础,设施,飞天分布式,云操作系统,联机事物处理,(OLTP),联机分析处理,(OLAP),大数据,分析及处理,内容管理,搜索检索,x8,6,服务器,&Linux,弹性计算服务SLB/ECS,(,分布式,),关系,数据库DRDS/RDS,大数据ODPS/ADS,开放,存储,OSS,分布式文件系统,分布协同服务,任务调度,安全管理,远程过程调用,资源管理,集,群,部,署,集,群,监,控,网络设备,机房环境,云计算,大数据,产品,/,服务,阿里云系统架构,数据中心,DataCenter,Linux,分布式文件系统,Distributed File System,任务调度,Job Scheduling,集群部署,Deployment,集群监控,Monitoring,弹性计算服务,(ECS),开放结构化数据服务,(OTS),开放存储服务,(OSS),开放数据处理服务,(ODPS),云引擎,(ACE),地图、电邮、搜索、安全、渲染、,PW,社区,云市场及第三方服务,大规模分布式计算系统(飞天),关系型数据库服务,(RDS),资源管理,Resource Management,安全管理,Security Management,远程过程调用,Remote Procedure Call,分布协同服务,Distributed Coordination Service,开放缓存服务,(OCS),2024/11/18,阿里云,技术架构,业务应用,基础,设施,飞天分布式云操作系统,联机事物处理,(OLTP),联机分析处理,(OLAP),大数据,分析及处理,内容管理,搜索检索,x8,6,服务器,&Linux,弹性计算服务SLB/ECS,(,分布式,),关系,数据库DRDS/RDS,大数据ODPS/ADS,开放,存储,OSS,分布式文件系统,分布协同服务,任务调度,安全管理,远程过程调用,资源管理,集,群,部,署,集,群,监,控,网络设备,机房,环境,云计算和大数据,产品,/,服务,分布式文件系统,-,(一层结构),分布式文件系统,-,盘古,客户端主要为:,ECS,OSS/OSA,ODPS/Opensearch,OTS/SLS,2024/11/18,分布式文件系统,-,二层结构,Paxos,2024/11/18,任务调度系统,-,伏羲,2024/11/18,物理部署示意图,2024/11/18,IAAS,基础服务,-ECS,弹性服务器,2024/11/18,IAAS,基础服务,-SLB,负载均衡,2024/11/18,IAAS,基础服务,-ESS,弹性伸缩服务,2024/11/18,IAAS,基础服务,-OSS,基础架构,2024/11/18,http:/ API,或者操作管理控制台来使用,OTS,服务,2024/11/18,阿里云体系架构,PAAS-,开放表格服务,2024/11/18,大规模:,基于 阿里云云操作系统,通用性:,支持 表,视图,事务,增删更新 查 等 功能,支持,partition,primay key,高可用:,通过自动故障迁移,来提供,高,可用性;通过,存储的冗余备份来确保数据,的安全。,实时性:,支持实时的数据插,入、删除和更新;支持实时,的随机查询、范围查询和偏,移查询,并可通过视图和分,页的方式让查询更高效。,一致性:,通过数据分区内的,事务,使得数据的更改和查,询保持强一致性,宜用性:,通过提供多语言,SDK,(包括,C+,、,Python,、,C#,等),让用户的开发更便捷。,经济性:,仅按用户的实际资,源使用进行计费,。,PAAS-,开放表结构服务,(OTS),2024/11/18,PAAS-,大数据计算服务,ODPS,功能组成,2024/11/18,PAAS-,大数据计算服务,ODPS,架构图,2024/11/18,PAAS-,大数据计算服务,ODPS,多数据中心,2024/11/18,PAAS-,大数据计算服务多租户,2024/11/18,PAAS-,大数据计算服务,-,数据交换,2024/11/18,PAAS-,云数据库服务,-RDS,云数据库,-,关系型数据库服务,是一种稳定、可靠、可弹性伸缩的在线服务数据库。,在线的关系数据库服务,即开即用,支持四种,DB,引擎,;MySQL,、,SQLServer,、,postgreSQL,,,PPAS,支持在线的扩容、备份回滚、性能监控,和分析等功能,安全性,抵御,90%,的攻击,可用性,多重容灾,可用性,99.95%,易用性,自动备份、恢复、审计,和自动监控,可扩展性,配置可弹性伸缩,RDS,采用主从备份架构,具有高可用和数据可靠性,2024/11/18,PAAS-,云数据库服务,-RDS,总体架构,2024/11/18,PAAS-,云数据库服务,-RDS,数据量性能瓶颈,单实例最大,14000IOPS,、,25000OPS,,承载,2T,2024/11/18,PAAS-,云数据库服务,-RDS,2024/11/18,PAAS,中间件,-,分布式关系数据库,DRDS,分布式关系数据库,DRDS,,是一种水平拆分、可平滑扩缩容,读写分离的在线分布式数据库服务。,DRDS,使用中间件产品。,2024/11/18,PAAS,中间件,-,分布式关系数据库,DRDS,2024/11/18,PAAS,中间件,-,分布式关系数据库,DRDS,2024/11/18,PAAS,中间件,-,分布式关系数据库,DRDS,2024/11/18,PAAS,中间件,-,分布式关系数据库,DRDS,2024/11/18,Paas,中间件,-,分布式关系数据库,DRDS-,功能栈,2024/11/18,PAAS,中间件,-,分布式关系数据库,DRDS-,读写分离,2024/11/18,PAAS,中间件,-DRDS-,分库分表,2024/11/18,PAAS,中间件,-DRDS-,分库分表,1,F,2,F,3,F,4,M,5,F,6,M,7,M,8,M,9,M,10,F,2,F,4,M,6,M,8,M,10,F,1,F,3,F,5,F,7,M,2,F,10,F,4,M,6,M,8,M,1,F,3,F,5,F,7,M,9,M,分库,ID,分表,Gender,2024/11/18,PAAS,中间件,-DRDS-SQL,路由,Select,*,from customer,Where id=7,And gender=M,按照查询条件做路由:,1,:定位数据库,2,:定位表分片,2024/11/18,PAAS,中间件,-DRDS-,扩容,用户视角,系统视角,2024/11/18,PAAS,中间件,-DRDS-,平滑扩容,2024/11/18,阿里云分析性数据库为什么快,底层存储使用,SSD,盘,更强的磁盘,IO,能力,表关联的时候,使用快速,hash join,智能索引自动结合数据状况创建合理的索引,数据做就近处理、没有传输的开销,尽量在内存中做各种表的关联和计算,2024/11/18,thankyou,2024/11/18,