求真百科歡迎當事人提供第一手真實資料,洗刷冤屈,終結網路霸凌。

中国电信天翼云诸葛AI平台查看源代码讨论查看历史

跳转至: 导航搜索

来自 搜狐网 的图片

中国电信天翼云诸葛AI平台中国电信股份有限公司云计算分公司(以下简称天翼云)是中国电信旗下直属专业公司,是集市场营销、运营服务、产品研发于一体的云计算[1]基础服务提供商。

中国电信天翼云在“2+4+31+X+O”资源池战略布局的基础上,发挥5G云网融合的领先优势,努力打造5G+天翼云+AI新动能。中国电信天翼云位列全球运营商云之首,中国电信也是唯一一家进入全球IaaS市场前十的运营商。

中国电信天翼云作为全球领先的云服务商及运营商云的领军者,拥有先进的云网基础设施和定制化解决方案,正在成为中国电信全方位建设能力体系的核心承载,依托自主研发的云平台和5s安全体系,以及运营商央企底蕴与互联网[2]创新机制,为用户提供安全云服务。

案例概述

中国电信天翼云诸葛AI平台由云公司自主研发,是中国电信云公司落实集团自主掌控核心技术的要求,瞄准行业发展趋势,对标腾讯、阿里等领先企业,结合中国电信大数据多年实践经验,基于Apache Hadoop 3.2全新版,打造的自主掌控、技术领先、稳定安全的大数据AI一体化平台。

2020年11月8日,天翼云诸葛AI开放平台在天翼智能生态博览会上正式发布。天翼云诸葛AI平台总体建设思路是提供一站式大数据存储、大数据开发、大数据治理、机器学习和人工智能模型开发平台。

案例突破性:

天翼云诸葛AI平台主要成果优势如下:

(1)大数据底座先进:支持大规模集群部署及高可靠性需求:单集群设计规模达到8000台,已完成验证的集群规模3000+台。

(2)全栈能力一体化融合:平台融合电信云计算+大数据+AI能力的优势,为客户提供全栈大数据与AI能力开放。

(3)助力企业数字化转型:一站式开发套件,以及运维自动化和可视化设计,大大降低用户使用的技术门槛,成为传统企业数字化转型的有力保障。

商用落地广泛:平台发布以来,陆续在政务、工业、金融、公安、环保等多个领域落地交付,其中单集群最大部署节点超2000台,实现销售收入数千万元。

技术要点

(一)先进性和主要技术指标

诸葛AI平台的各项能力均对标业内顶尖能力,利用后发优势,打造业界领先的大数据平台。

1、大数据基础能力平台底座先进

大数据基础能力平台,对标CDH和HDP进行电信化封装,基于完全开源、社区活跃的Apache Hadoop 3.2为核心,单集群设计规模达到8000台,已完成验证的集群规模3000+台,整合构建大数据平台,部署给客户的的大数据平台源代码完全开放,无技术绑定风险,无协议风险,支持滚动升级。

2、 AI能力准确率业界领先

AI能力达到业界领先水准,车牌识别准确率达到99.93%,物体识别精度map达到94%,人脸识别精度达到99.7%。

3、数据开发运维平台先进

一站式数据开发与服务平台,对标阿里DataWorks,打造高可用,高可靠,高并发支持的一站式开发套件。

用户基于一站式开发套件编辑并提交大数据作业,可以10倍以上提升数据应用开发的效率,节约大数据项目落地成本; 同时避免开发人员直接操作集群的风险,并对资源和数据进行严格的监管,提高集群安全性。

运维平台从架构上超越了Ambria与CloudManager工具,具有架构上的先进性,基于微服务架构,可支撑上万个大数据节点的自动化运维与监控,提升运维效率。

(二)创新点

1、自主可控

针对CDH商用版,自研拥有完全知识产权

2、大规模、弹性可扩展

可支持大规模集群部署及高可靠性需求:单集群设计规模达到8000台,目前已完成验证的集群规模3000+台;

3、融合电信云计算+大数据+AI能力的优势

整合电信级大数据PaaS能力和AI能力中台,为大数据应用和AI的SaaS提供算据,算力,算法的支持。同时,对CPU、GPU等资源进行弹性管理,极大提高AI算法训练和推理的资源利用率,为AI能力开放平台的建设提供坚实的底座。

4、运维自动化和可视化

提供统一的自动化集群运维平台,对集群可视化管理,解决运维人员脚本式维护痛点,降低操作风险,提升管理效率,具备运维大屏,CMDB,租户管理,存储分析等功能,进一步降低运营门槛,让客户的普通技术人员具备日常维护平台的能力,减少研发人员参与售后维护,降低交付运营成本。

5、GPU资源切片化与资源池管理

使用资源虚拟化服务,将稀缺GPU资源进行切片管理,云平台支持10万租户同时使用相关服务。实现了统一GPU资源池管理,兼容多种型号GPU,屏蔽差异性,构建统一GPU资源池。GPU细粒度切片,基于virtual CUDA技术,建立物理GPU逻辑镜像,实现GPU资源的细粒度划分。基于容器和Kubernetes,实现虚拟化GPU资源的重组和再利用,支持多机并发、挂起恢复等高级特性。

(三)应用前景

诸葛AI平台产品陆续在政务、工业、金融、公安、环保等多个领域落地交付,单集群最大部署节点超2000台,实现销售收入数千万元。以下主要介绍诸葛AI大数据平台在重要行业的典型应用案例,推广应用情况如下:

1. 中国工业互联网研究院

国家工业互联网大数据中心项目是一项复杂的系统工程,其内容涉及工业数据采集、边云融合、云计算基础平台、大数据和人工智能、数据服务层、工业应用、云安全、运维和灾备等各个方面。

其中,数据资源管理平台是整个工业互联网大数据中心的核心部分,提供工业大数据集中存储和数据分析计算引擎的基础大数据能力、AI开发和推理中台、数据开发和治理中台、账户和数据安全管理、平台运维等功能。

在这个项目中,诸葛AI产品的3个模块被被集成到数据资源管理平台。3个模块为:大数据基础能力、鲁班开发大数据平台、和AI开发平台。 这三个模块分别为数据资源管理平台提供:1)大数据存储、计算引擎;2)数据开发、任务调度、数据治理等能力;3)AI模型开发、模型训练、模型管理和模型发布、模型推理、以及用户使用计费能力。

工业互联网大数据作为工业互联网发展的核心要素,将有力支撑构建数字化、网络化、智能化的新型生产制造体系和服务体系,赋能制造业和实体经济转型升级。我国工业互联网大数据资源存在孤立、分散、封闭等问题,数据价值未能得到有效利用,数据主权和数据安全面临重大威胁。建设好、使用好国家工业互联网大数据中心,对于推进工业互联网数据资源整合利用和开放共享,提升我国工业互联网大数据资源的管理、服务和安全水平,发挥数据对于工业经济的基础资源作用和创新引擎作用,促进工业互联网创新发展,提升数据驱动的政府治理能力和数据赋能实体经济的能力,具有重要意义。

建设国家工业互联网大数据中心,就是要充分发掘全国工业互联网大数据资源的价值,通过整合汇聚工业互联网平台、网络、标识、安全和其他相关数据资源,打造工业互联网“平台之平台”,形成“覆盖全国、物理分散、逻辑集中、统筹调动、资源共享、深度应用”的数据资源服务体系,构建完善的工业互联网大数据获取、共享和应用机制,建设政府监管支撑、数据交易、安全监测分析、企业赋能与创新服务等应用服务平台,推进数据隐私保护、数据确权政策法规研究,形成覆盖全面的工业互联网大数据资源管理和安全服务能力。

参考文献