2024世界人工智能大年夜会|以隐私计算助力大年夜模型与数据可托融合蚂蚁集团推出大年夜模型密算平台_模子_数据
当下,高质量数据供给和安全流利,成为大模型进入垂直家当运用的紧张寻衅。其一,行业大模型要得到办理专业问题的能力,首先要经由数量充足、质量高的专业数据演习。然而,专业数据每每分散在不同的机构、企业中,并且由于代价大、保密哀求高,难以流动。此外,在企业、大模型厂商和用户之间存在信赖壁垒,企业担心数据对外透露,大模型厂商担心模型资产安全,用户担心个人数据和隐私风险。
图源/采访工具供应
在发布会现场,蚂蚁密算CEO王磊先容,“瘦语Cloud”大模型密算平台首批推出两大做事,分别为大模型密态托管和大模型密态推理。大模型密态托管,指模型供应方可以将模型加密后托管在平台上,一键完成云上密态支配,保护模型资产不被泄露和盗用;大模型密态推理,是指数据以密态形式完成推理,保护用户交互时的数据安全、商业机密等。
此外,该平台支持GPU在可信实行环境下进行打算,使得大模型推理在密态形式下的相应韶光和利用效率与明文大模型靠近,实现大规模商业可用。在安全保障上,该产品利用内存、磁盘加密等方法,实现用户访问的端到端加密和托管模型的跨域访问掌握。在易用性上,产品支持轻量化远程认证,用户在网页访问时就可以完发展途认证,不须要额外的操作步骤。
当下,大模型在垂直行业运用时,许多企业通过私有化支配来应对数据安全寻衅,这不仅增加企业的运维和做事本钱,也影响对外做事的效率和质量。对行业的发展来说,私有化方案不利于多方数据跨领域、跨行业高效领悟,无法进一步引发大模型的能力。
据先容,“瘦语Cloud”大模型密算平台供应公有云和专有云交付方案,支持市情上主流的通用大模型。以公有云为例,无论用户重新构建新的垂直大模型,还是将已有的大模型重新支配在该平台,只需一键支配和接入,比如10分钟即可完成高可用推理做事的发布。在利用过程中,用户按需获取密态算力,即开即得。
王磊透露,“瘦语Cloud”大模型密算平台的做事,将逐步覆盖到垂直大模型从构建到对外做事的全链路数据安全,“接下来,我们将为垂直大模型从预演习、微调、评测、推理到用户交互的全程供应密态打算做事,在大模型供应方、数据供应方、大模型利用方等之间实现数据可信安全流转。平台还将供应密态大模型开拓所需的全链路工具,供应的做事包括密态检索增强天生、密态提示词、Agent流程编排等。”
蚂蚁集团副总裁兼首席技能安全官、蚂蚁密算董事长韦韬认为,数据供给决定了大模型运用能力的上限,而隐私打算技能决定了数据跨域供给的上限。昔时夜模型从通用走向专业运用,从技能想象力走向家当的生产力,必须要办理高质量数据集稀缺与专业数据阻滞的寻衅,否则大模型作为“智力引擎”,只会陷入空转。今后,高代价数据要深度领悟,一定须要以密态办法进行安全流转。
韦韬表示,蚂蚁集团从2016年开始探索隐私打算技能,能力涵盖了全栈可信技能、多方安全打算、联邦学习、同态加密、差分隐私、机密打算等隐私打算全谱技能域。“我们希望联合家当互助伙伴,把蚂蚁集团多年来在密态打算技能上的探索和创新,以开源和产品化的形式对外开放,助力推动家当向前发展,为实体经济和中小微企业创造新的代价,让数据代价的流动像自来水一样即开即用。”
目前,蚂蚁可信隐私打算的核心技能已全部开源,包括“瘦语”可信隐私打算框架、“星绽”可信实行环境操作系统Occlum等。此外,参与制订了60多项国内外隐私打算技能标准,个中主导了9项国际标准。蚂蚁还与超过50所国内外高校紧密互助,并且与中国打算机学会联合设立了“隐私打算专项科研基金”。
今年5月尾,蚂蚁集团对外公布了以人工智能和数据要素技能为核心的科技计策,随后成立了独立运营的密态打算公司——浙江蚂蚁密算科技有限公司,将供应密算干系的产品和做事,包括一套端到真个数据安全保障、一套软硬件结合的打算加速办理方案和一个隐私打算云做事平台,推动数据安全可信的跨云跨端低本钱流利。
新民 金志刚
本文系作者个人观点,不代表本站立场,转载请注明出处!