运行基于云的生成式AI系统的几个优秀实践

译者 | 布加迪

审校 | 重楼

猜怎么着云计算会议现在是生成式AI会议。怎么会这样?很简单,云提供商将生成式AI视为销售更多云服务的最佳方式

随着企业转向AI驱动的生态系统,这一幕主要在云计算环境中上演在这里您通常可以找到最先进的生成式AI系统、可扩展性、可访问性和成本效益。当我们踏上这段旅程时,企业应该如何有效地运这些系统我们应该考虑哪些最佳实践

解云生成式AI

简而言之,生成式AI模型是从输入数据中获取模式和结构以生成新原创内容的系统。这些内容是输出数据,可以是任何类型的结构化或非结构化信息。

如果要在现有模式的基础上进行构建,这是一个数据操作问题。然而存在重大的差异,包括处理频繁得多以及数据输入和输出性能决定了生成式AI系统的性能。

基于云的生成式AI系统的流程

不妨定义一个基本流程或一系列最佳实践。运营人员喜欢核对清单,以下是我给出核对清单。

  • 设计系统。AI和云解决方案必须协同扩展,生成式AI模型需要有效地管理存储和计算资源。您编写的应用程序必须尽可能地利用云原生服务。这样既经济高效,又简化了操作。这时候Devops就有了用武之地,与开发团队协优化代码。

想法是,如果系统一开始就设计正确,就不需要处理操作问题。我遇到的大多数关于操作的问题都归结为系统的核心设计。

  • 垃圾输入等于垃圾输出。为了从AI中获得有意义的输出,应该将高质量和适当格式的数据输入系统。管理、验证和保护馈送到AI引擎的这些数据至关重要,从这些系统收集数据也很重要。这阶段实现自动化将大大节省时间,包括在摄取训练数据之前检查数据质量。我发现大多数生成型AI的幻觉都源于不到位和低质量的数据
  • 定期检查。生成式AI软件不是一种安装后就可以撒手不管的工具。这项技术从一开始就需要定期性能调优和优化。AI的动态性需要持续监控,以确保参数提供最佳的操作结果。这意味着要经常调整系统,可能每天都要调整。
  • 借助严格的访问控制解决安全问题。由于您的生成式AI系统,因此安全性必须包括数据加密和定期审计。最好确保那些合规策略落实到位,您在部署到生产环境期间和之后需要使这些策略实现自动化。想法是将尽可能多的不稳定因素放到一个单独的域中,从而广泛使用策略处理合规和安全参数。公共云上的生成式AI系统更是如此。
  • 设置系统故障警报。密切关注使用模式,执行定期维护,并保持补丁和新版本的更新,这些工作必不可少。自动化可以再次发挥作用,减轻负担,提高效率。不过,您仍得尽量提高自动化程度,以跟上需要实施变更的数量。

准备、瞄准、开火!

先让系统正常运行起来。这意味着在部署之前做好设计和更改代码。在许多情况下,企业试图一下子推出系统,希望运营团队能够解决导致性能和稳定性问题的设计缺陷,并确保整个系统的准确性。太多的企业对云生成式AI采取了“准备、开火、瞄准法。这种做法不仅花费太多的钱,还因基本上可以避免的生产问题降低了这些系统的价值。

我们应该通过部署第一代基于云的系统来正视这个问题,而且愿意解决许多技术问题。这些系统出差错带来的后果严重得多。我们尽量不要制造问题,不然问题在操作过程中只会愈加严重

原文标题:Best practices for operating cloud-based generative AI systems,作者:David Linthicum

文章来源网络,作者:管理,如若转载,请注明出处:https://shuyeidc.com/wp/287233.html<

(0)
管理的头像管理
上一篇2025-05-15 18:42
下一篇 2025-05-15 18:43

相关推荐

  • jsp空间购买和交换数据空间怎么买,有哪些注意事项?

    购买JSP空间时,是否考虑过数据交换空间的性能?简米科技(2003年始创,23年行业沉淀)与酷番云(工信部一类增值电信全牌照)这类持牌自营机房的服务商,能确保数据交换的高效稳定,是值得优先选择的合作伙伴,为什么JSP空间需要搭配独立的数据交换空间从JSP应用特性看数据交换需求JSP基于Java技术,常用于企业级……

    2026-08-11
    0
  • 建网站用香港空间效果怎么样,香港空间稳定吗?

    建网站用香港空间,对于创建网站资产来说,核心价值在于免备案和全球带宽优势,尤其适合外贸、跨境电商和需要快速启动的项目,但你必须权衡国内访问延迟,并选择有资质的服务商以保证资产安全,香港空间的核心优势与适用边界免备案:节省时间就是节省成本国内服务器需要备案,通常需要10到20天,香港空间无需备案,域名解析后即可上……

    2026-08-11
    0
  • Java连接云数据库的方法是什么,如何操作

    Java连接云数据库的核心在于通过JDBC驱动,结合云服务商提供的连接地址、端口、数据库名及认证信息,配置安全策略(如SSL、IP白名单),即可实现稳定高效的远程数据库访问,基础准备:JDBC驱动与依赖管理连接云数据库前,需要确保开发环境具备对应的JDBC驱动,以最常见的MySQL为例,你需要引入mysql-c……

    2026-08-11
    0
  • 建网站公安联网备案必须使用数据码吗,备案流程是什么

    网站备案包括ICP备案和公安联网备案,两者缺一不可,公安联网备案必须使用服务商提供的数据码,选择持有合法资质的服务商是顺利通过备案的前提,为什么网站必须进行公安联网备案根据公安部《计算机信息网络国际联网安全保护管理办法》,网站开通后30日内必须到公安机关办理备案手续,未完成公安备案的网站,面临责令整改、关闭网站……

    2026-08-10
    0
  • 建一个企业网站大概需要多少钱?,怎么收费?

    建网站要多少钱,没有一个固定的数字,几百到几万都可能,但真正的“创建网站资产”绝不仅仅是初次投入的成本,而是基于长期稳定、合规和安全的持续性投入,其中核心取决于你选择了什么样的“地基”来承载你的业务,建站预算的构成与行业基准当你开始规划一个网站,最先面对的就是预算问题,一个常见的误区是只关注网站“看起来”的建造……

    2026-08-10
    0

发表回复

您的邮箱地址不会被公开。必填项已用 * 标注