• 最近访问:
发表于 2024-07-05 20:18:20 股吧网页版
蚂蚁集团发布大模型密算平台 助力大模型破解数据供给挑战
来源:上海证券报·中国证券网 作者:宋薇萍

  上证报中国证券网讯(记者宋薇萍 )7月5日,2024年世界人工智能大会进入第二天,作为数据要素领域的主要技术服务商,蚂蚁集团在大会期间发布了“隐语Cloud”大模型密算平台,通过软硬件结合的可信隐私计算技术,在大模型托管和大模型推理等环节实现数据密态流转,保护模型资产、数据安全和用户隐私。

  蚂蚁密算CEO王磊介绍,“隐语Cloud”大模型密算平台首批推出两大服务,分别为大模型密态托管和大模型密态推理。大模型密态托管,指模型提供方可以将模型加密后托管在平台上,一键完成云上密态部署,保护模型资产不被泄漏和盗用;大模型密态推理,是指数据以密态形式完成推理,保护用户交互时的数据安全、商业机密等。

  此外,该平台支持GPU在可信执行环境下进行计算,使得大模型推理在密态形式下的响应时间和使用效率与明文大模型接近,实现大规模商业可用。在安全保障上,该产品利用内存、磁盘加密等方法,实现用户访问的端到端加密和托管模型的跨域访问控制。在易用性上,产品支持轻量化远程认证,用户在网页访问时就可以完成远程认证,不需要额外的操作步骤。

  当下,大模型在垂直行业应用时,许多企业通过私有化部署来应对数据安全挑战,这不仅增加企业的运维和服务成本,也影响对外服务的效率和质量。对行业的发展来说,私有化方案不利于多方数据跨领域、跨行业高效融合,无法进一步激发大模型的能力。

  据介绍,“隐语Cloud”大模型密算平台提供公有云和专有云交付方案,支持市面上主流的通用大模型。以公有云为例,无论用户重新构建新的垂直大模型,或者将已有的大模型重新部署在该平台,只需一键部署和接入,比如10分钟即可完成高可用推理服务的发布。在使用过程中,用户按需获取密态算力,即开即得。

  王磊透露,“隐语Cloud”大模型密算平台的服务,将逐步覆盖到垂直大模型从构建到对外服务的全链路数据安全。“接下来,我们将为垂直大模型从预训练、微调、评测、推理到用户交互的全程提供密态计算服务,在大模型提供方、数据提供方、大模型使用方等之间实现数据可信安全流转。平台还将提供密态大模型开发所需的全链路工具,提供的服务包括密态检索增强生成、密态提示词、Agent流程编排等。”

  据介绍, 蚂蚁集团从2016年开始探索隐私计算技术,能力涵盖了全栈可信技术、多方安全计算、联邦学习、同态加密、差分隐私、机密计算等隐私计算全谱技术域。“我们希望联合产业合作伙伴,把蚂蚁集团多年来在密态计算技术上的探索和创新,以开源和产品化的形式对外开放,助力推动产业向前发展,为实体经济和中小微企业创造新的价值,让数据价值的流动像自来水一样即开即用。”蚂蚁集团副总裁兼首席技术安全官、蚂蚁密算董事长韦韬说。

  目前,蚂蚁可信隐私计算的核心技术已全部开源,包括“隐语”可信隐私计算框架、“星绽”可信执行环境操作系统Occlum等。此外,参与制定了60多项国内外隐私计算技术标准,其中主导了9项国际标准。蚂蚁还与超过50所国内外高校紧密合作,并且与中国计算机学会联合设立了“隐私计算专项科研基金”。

  今年5月底,蚂蚁集团对外公布了以人工智能和数据要素技术为核心的科技战略,随后成立了独立运营的密态计算公司——浙江蚂蚁密算科技有限公司,将提供密算相关的产品和服务,包括一套端到端的数据安全保障、一套软硬件结合的计算加速解决方案和一个隐私计算云服务平台,推动数据安全可信的跨云跨端低成本流通。

郑重声明:用户在财富号/股吧/博客等社区发表的所有信息(包括但不限于文字、视频、音频、数据及图表)仅代表个人观点,与本网站立场无关,不对您构成任何投资建议,据此操作风险自担。请勿相信代客理财、免费荐股和炒股培训等宣传内容,远离非法证券活动。请勿添加发言用户的手机号码、公众号、微博、微信及QQ等信息,谨防上当受骗!
作者:您目前是匿名发表   登录 | 5秒注册 作者:,欢迎留言 退出发表新主题
郑重声明:用户在社区发表的所有资料、言论等仅代表个人观点,与本网站立场无关,不对您构成任何投资建议。用户应基于自己的独立判断,自行决定证券投资并承担相应风险。《东方财富社区管理规定》

扫一扫下载APP

扫一扫下载APP
信息网络传播视听节目许可证:0908328号 经营证券期货业务许可证编号:913101046312860336 违法和不良信息举报:021-34289898 举报邮箱:jubao@eastmoney.com
沪ICP证:沪B2-20070217 网站备案号:沪ICP备05006054号-11 沪公网安备 31010402000120号 版权所有:东方财富网 意见与建议:021-54509966/952500