迄今为止,全球已有100多个国家颁布了数据保护和数据主权法律,数据主权成为了企业上云时考虑的主要问题。谈及数据处理,必然会提及生成式AI。企业采用生成式AI的目标都是为了提高生产力。根据埃森哲报告显示,各行各业40%的工作时间都会受到大型语言模型(LLM)的影响。在员工的总体工作时间中,语言任务占62%,而65%的语言任务时间可以通过增强措施和自动化,应用在更具生产力的活动中1。
当主权云碰到生成式AI,两者之间是竞争,协作,还是“亦敌亦友”?由于生成式AI需要庞大的算力和飞速处理大型数据集的能力,因此公有云成为了许多生成式AI应用的理想平台。但公有云的访问路径、速度和规模只是一方面,数据安全、隐私和主权要求同样至关重要,并且必须纳入企业考量。也就是说,最适合生成式AI的云并不是公有云,而是私有云。
主权云与生成式AI之间的关系取决于几个重要因素,需要在数据主权、隐私、合规和生成式AI带来的收益之间找到平衡点。这不仅需要深思熟虑,还要在开箱即用的公有云生成式AI以及主权数据使用限制之间做出权衡。
数据驻留与合规
生成式AI应用可能需要遵守一整套法规,比如《通用数据保护条例》(GDPR)中的数据保护规定,这部条例为企业负责任地采集、处理和存储个人数据建立了一个完整全面的框架2。但这只是冰山一角,以权利为基准的个人数据处理方法在各地区、国家乃至各行业不断扩展。
我国于2021年开始实施《个人信息保护法》,连同早年出台的《网络安全法》和《数据安全法》,对个人信息数据的合理使用做出了严格的规定。针对近年来利用“AI换脸” 技术进行视频合成、进而实施诈骗的现象,2023年7月国家网信办等七部门联合对外发布《生成式人工智能服务管理暂行办法》,旨在促进生成式人工智能健康发展和规范应用,保护公民、法人和其他组织的合法权益。
VMware全球副总裁、大中华区总裁陈学智表示: “对企业而言,如何将生成式AI用于提升生产力需要解决三大问题。一是探索具体的业务应用和使用场景,二是解决大型语言模型训练所需的算力不足问题,最后就是在数据训练和推理过程中,如何确保自身数据的安全性。企业需要构建能够实现数据透明和可见性、并严格控制数据驻留的云基础架构。由VMware Cloud Foundation (VCF) 建构的自主可控私有云及主权云不仅可以满足企业的上云需求,同时还能实现数据保护、合规和控制,帮助企业在当今的数字世界中蓬勃发展。”
数据主权和隐私
生成式AI应用可能需要访问个人或专有数据进行训练,因此带来数据主权和隐私相关风险。尽管主权云提供了强有力的数据控制手段以降低非法访问的风险,这些手段会限制生成式AI应用所使用数据的跨境转移和变现,但这也可能会减少或彻底丧失上述AI应用带来的好处。
尽管当生成式AI连接到主权云或位于主权云内时,可能会产生隐私相关的冲突,但主权云供应商仍可以构建(或授权使用)AI相关的服务和工具,在其基础架构内促进生成式AI应用的安全合规使用。
稳健的主权云战略可以通过保证数据驻留、数据安全和确保企业符合当地政府的法规,帮助企业以负责任的方式有效使用生成式AI技术。此类战略需要考虑AI的兼容性,AI运行成本、开发AI解决方案所需的资源和技能、主要的顾虑等因素,以及用于驱动AI训练的数据和由此产生的数据。简而言之,要使AI合规,就需要Private AI架构将AI的商业效益与企业的实际隐私和合规需求相结合。多年来,VMware云服务商就已经能够将用于多租户或独立Cloud Foundation主权云的Cloud Director与所支持的NVIDIA AI Enterprise人工智能软硬件解决方案系列相结合,提供NVIDIA vGPU即服务。因此,提供AI服务的能力已经存在,但需要投资构建自己的解决方案。
为了推动新一轮AI应用的发展浪潮,VMware在今年的VMware Explore美国大会上 宣布:
VMware Private AI Foundation联合NVIDIA为企业提供集成AI工具,尤其是为受到主权监管的行业。该解决方案借助VMware Cloud Foundation,常用于气隙式私有云类型的主权云,将VMware Private AI架构与NVIDIA AI Enterprise软件和加速计算相结合。这套交钥匙解决方案将为客户提供自定义模型和运行生成式AI应用(如聊天机器人、助手、搜索和摘要)所需的基础架构和软件。戴尔、慧与和联想将为采用NVIDIA技术的VMware Private AI Foundation提供支持。
VMware Private AI Reference Architecture for Open Source加入了最前沿的开源技术,为VMware Cloud Foundation上开源模型的开发和部署提供了一个开放框架。通过与包括Anyscale在内的AI行业主要企业合作,VMware正在将热门的开源Ray统一计算框架整合到VMware Cloud环境中,以此简化现有计算基础架构中AI和Python 工作负载的规模。另外,VMware还与Domino Data Lab和NVIDIA携手为金融行业的AI/ML部署提供一个量身定制的统一分析和数据科学平台。
VMware正在推出VMware AI Ready计划,旨在将专注于ML、LLM运维、数据工程、AI开发工具和嵌入式AI应用的独立软件厂商(ISV)与VMware Private AI Reference Architecture上的验证和认证资源对接。该计划预计将于2023年底启动。
主权云的核心是数据、控制以及创新。在日新月异的数字环境中,保持创新和竞争优势对企业至关重要。VMware主权云是实现这一目标的理想选择,其灵活性、可扩展性和敏捷性使企业能够迅速适应不断变化的市场环境,为企业注入创新信心。VMware强大的合作伙伴生态和领先的技术为企业提供推动创新的工具和资源。借助VMware主权云,企业既可以充分利用云的强大功能,同时又能保持对数据和基础架构的控制,从而打造踊跃创新、积极竞争、充满成功机会的环境。
本文由 计算杂谈 作者:云中子 发表,转载请注明来源!