云和大数据服务平台方案

阅读: 评论:0

云和大数据服务平台方案
1.云和大数据服务平台
基础资源池采用国产自研的云和大数据服务组件实现服务器资源池化,构建统一服务器池和架构标准,形成云平台和大数据引擎平台,实现云主机、裸金属服务器、容器、大数据的自动化供给。
1.1.云平台
基于国产自研云平台,构建云资源池,提供虚拟机、裸金属等计算资源池服务,提升资源利用率、简化运维,并满足人工智能计算中心业务部署需求。
1.1.1.授权
包括可纳管不小于65台裸金属服务器和30台云大数据服务器,提供1.4PB对象存储等。
1.1.
2.计算虚拟化
1、支持基于开源KVM等虚拟化引擎技术,云服务器具备创建、删除、修改、查询、调整配置的能力。
2、支持将当前运行的虚拟服务器打包为模板,并通过自定义模板批量快速生成虚拟服务器的能力。具备大规模部署特性的同时具备良好的性能保障,满足大规模资源快速创建的需求。
3、支持通过浏览器界面直接访问和管理云服务器,能够查看云服务器的启动、运行、关机等整个生命周期状态;支持云服务器在线或者离线迁移到指定物理节点,在线迁移过程中云服务器业务不中断;支持云服务器的高可用调度,支持对宿主机的指标进行多维度监控,并根据配置策略判断宿主机健康状况,对云服务器进行自动化的高可用调度。
1.1.3.云服务器管理
1、支持对云服务器的生命周期进行管理,包括云服务器的创建,重启、重装、删除,开机、关机、挂起、硬重启等。
2、支持对云服务器生命周期的批量管理、在线验证资源创建云服务器资源是否充足、指定IP创建,云服务器实例的IP注入、支持云服务器多种登陆方式通过密码、SSH、VNC登录;支持设定云服务器密码;支持云服务器克隆;支持云服务器在线升降配(扩缩容),保证业务的不中断,连续性;支持在线/离线快照,支持云服务器整机在线快照的创建、删除、修改、查询、回滚,支持定时快照;支持虚拟整机备份、恢复,支持根据时间策略进行定时备份;
支持云服务器在线挂载ISO。
3、支持映射物理机上的USB设备、磁盘、PCI设备给云服务器使用;支持云服务器在线或者离线迁移到指定物理节点,在线迁移过程中云服务器业务不中断,云服务器支持挂载/卸载多个云硬盘;支持云服务器反亲和组;支持云服务器主机安全管理,支持新建、删除、查询安全组,支持安全策略的创建;支持资源回收站功能,支持无删除资源回,提供操作安全保证;支持云服务器的HA,宿主机发生硬件故障或其他错误导致计算节点宕机失联,导致其上的云服务器及其服务异常时,该故障计算节点上的云服务器可以在其它可用节点上启动并恢复其上的服务。
1.1.4.弹性伸缩
1、支持弹性伸缩,根据业务特点可以让云主机数量在访问量上升时自动增加,在访问量下降时自动缩减,支持伸缩组管理、伸缩策略管理;支持伸缩组的创建、启用、禁用、修改、删除等。
2、支持弹出的云服务器自动添加到负载均衡中。
1.1.5.裸金属服务器管理
1、支持在云计算平台用户界面自助申请物理主机,无须人工介入即可完成自动化操作系统安装、网络配置支持通过云计算平台带外管理协议登录跳转访问物理主机控制台。
2、支持通过云计算平台带外管理协议登录跳转访问物理主机控制台。
3、支持通过云计算平台可以管理物理主机电源,包括启动、关机、维护、停止维护、重启,支持物理主机删除,支持物理服务器绑定弹性IP、解绑弹性IP。
1.1.6.计算资源池管理
1、支持主机(计算节点)的远程电源管理,包括启动,关机和重启。
2、支持自动发现可用的主机(宿主机/计算节点),并可以将主机添加至资源池,支持主机信息查看、支持删除主机。
3、支持创建主机集合,支持为主机集合和可以域添加或移除主机(计算节点),支持查看主机集合信息,删除主机集合。
1.1.7.存储虚拟化
1、支持弹性伸缩,根据业务特点可以让云主机数量在访问量上升时自动增加,在访问量下降时自动缩减,支持伸缩组管理、伸缩策略管理;支持伸缩组的创建、启用、禁用、修改、
删除等。
2、支持弹出的云服务器自动添加到负载均衡中。
1.1.8.块存储
提供分布式存储架构,将数据分散存储到物理主机的本地硬盘上,并为云主机、云硬盘、镜像提供统一存储空间。并通过系统的实时多副本技术,实现数据副本数量和复制策略的按需设置,避免单点故障。
1.1.9.对象存储
提供对象存储功能,支持对象的简单上传、追加上传、下载、删除、列举、复制,获取对象的元数据、创建多段上传任务。支持列举存储空间、创建存储空间、删除存储空间、列举存储空间内对象、获取存储空间的元数据。支持基于三副本和EC校验模式的数据多重冗余备份。
1.1.10.文件存储
提供可按需扩展的共享文件存储服务。支持标准的NFS、CIFS协议,支持多台云服务器或裸金属服务器挂载相同的文件系统,数据可以共享操作和访问。
1.1.11.存储池管理
提供存储池管理服务,存储池是对物理存储资源的池化,存储池由后端存储服务节点构成,用于创建
和存储云硬盘。在存储池管理中,支持自动发现或添加存储池,并根据不同存储池的存储特性创建不同的云硬盘类型;支持通过云硬盘类型定义了云硬盘的QoS及加密特性。
1.1.1
2.安全组
提供安全组服务,安全组能够过滤进出云服务器的流量以及云服务器之间的流量,是重要的网络安全隔离手段,并能够与虚拟防火墙配合来控制用户对虚拟网络中资源的访问。支持通过安全组实现云服务器之间的访问隔离。用户能够自定义安全组所包含的网络访问控制规则,并能够实时编辑云服务器安全组。
1.1.13.网络拓扑
提供全局网络拓扑视图,可通过图形化界面直观的查看虚拟网络拓扑,包括所有创建的虚拟网络资源以及云服务器的网络配置和连通状态,方便用户进行网络规划。
1.1.14.容器管理和编排
提供容器管理和编排服务,容器应用商店,支持应用上传、应用审核、应用上架与分类、应用部署,为用户提供应用全生命周期管理功能。支持应用程序模板,一键式模板应用部署。
1.1.15.存储扩展功能支持
提供扩展插件服务,支持标准协议存储,比如块存储,文件存储,对象存储。
1.2.大数据引擎平台
国产自研云平台构建大数据平台服务,支持Hadoop/Spark技术生态中丰富的组件,可支持用户根据自身的应用场景灵活选择不同的大数据组件快速构建独享的大数据存储和处理分析环境,能够为用户提供高性能、高可用、安全可靠的大数据平台,提供面向海量结构化、半结构化、非结构化数据混合架构的大数据采集、存储、计算、分析挖掘、管理服务,为数据创新提供统一的数据整合及存储能力,涵盖离线计算、实时计算、流式计算、分析挖掘与机器学习方案,有效支撑全局大数据处理流程。还可以提供基于PaaS平台的大数据治理服务,包含数据采集、数据接入、数据处理、数据治理、数据组织、数据服务。
平台将建立以分布式文件系统、NoSQL数据库为基础、适用于云计算和大数据处理的新型框架,实现大规模分布式计算,提高面向海量数据的任务执行效率,保证任务执行的可靠性,满足大数据处理的需要,提升多应用场景下的大数据采集、组织、存储、计算、数据共享、综合分析与深度应用能力。
云大数据平台服务遵循国内外主要的云计算和大数据相关技术标准或事实标准,并采用当前主流的技术架构体系,与关键技术的长期发展方向保持一致性,确保技术实用性和先进性。
分布式架构技术:分布式架构是为高并发和大数据处理的需求而设计,为各种应用提供分布式计算、分布式存储、大数据分析、统一消息引擎、统一资源管理等基础支撑服务能力。
云数平台融合:采用基于云计算平台的大数据服务,支持用户通过云端申请大数据集,云平台会为大数据集分配和管理主机资源,用户只需专注于自己的业务层面,按需购买大数据服务,并可为大数据集提供扩容、缩容的功能。提供两种部署方式:裸金属与虚拟化。虚拟机部署适合小数据量、性能要求不高的应用场景,提升服务器资源利用率;裸金属部署适合大数据量、高性能场景,提升用户业务能力。裸金属和虚拟化部署方式均基于国产处理器架构的基础计算平台,在充分保证大数据内容安全可靠的同时,为用户带来极致的性能体

本文发布于:2023-05-12 08:52:20,感谢您对本站的认可!

本文链接:https://patent.en369.cn/patent/4/96538.html

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。

标签:支持   服务器   数据   管理   平台   计算   提供   应用
留言与评论(共有 0 条评论)
   
验证码:
Copyright ©2019-2022 Comsenz Inc.Powered by © 369专利查询检索平台 豫ICP备2021025688号-20 网站地图