谷歌 Apigee 添加了内置的 LLM 治理 Model Armor(谷歌怎么添加)

谷歌 Apigee 添加了内置的 LLM 治理 Model Armor(谷歌怎么添加)

作者 | Leela Kumili

译者 | 刘雅梦

策划 | 丁晓昀

谷歌云推出了 Model Armor 的 公开预览版,这是一个集成到 Apigee API 管理平台的原生大语言模型(LLM)治理框架。一篇社区帖子中详细介 绍了 Model Armor,它引入了针对 LLM 特定策略的即开即用执行,例如提示验证、输出过滤和 API 层的 token 级控制。

这些策略可以检测到越狱尝试、提示注入和个人身份信息(PII)暴露等问题,允许根据需要对输出进行编辑、更改或阻止,而无需修改下游系统。根据谷歌的说法,“有了 Model Armor,企业可以像对待传统 API 一样严格地对 LLM 流量进行同样的治理”。

这些控制用 Apigee 基于 XML 的策略语言表示,允许团队将 LLM 安全规则集成到现有 API 中。一个 实践教程 展示了如何应用这些策略,涵盖了提示检查、token 配额和与 Vertex AI 的集成。教程包括一个可下载的代理模板和配置 Model Armor 执行规则的分步指导。策略执行在代理层应用,以实现服务和端点之间的一致性。

Apigee 和 Model Armor 架构(来源:谷歌社区帖子)

Model Armor 支持多个 LLM 提供商,包括 Vertex AI(Gemini、Meta Llama)、OpenAI、Anthropic 和自托管模型,允许在异构架构中进行集中治理。

此外,谷歌已将 Model Armor 与 Google Kubernetes Engine(GKE)和 Security Command Center 集成。这允许组织直接在 GKE 集群中运行的推理网关或在负载均衡器上部署 Model Armor 策略。这些策略在模型提示和响应到达内部服务之前进行检查。任何违规行为都会作为安全发现出现在 Security Command Center 中,提供集中监控、预警和修复工作流程。这种集成加强了 Model-Armor 作为 LLM 流量治理和更广泛的云安全运营之间桥梁的地位。

Apigee 作为 LLM 应用程序和模型之间的网关(来源:谷歌社区帖子)

该框架为每次策略评估记录了详细的元数据,包括触发的过滤器和执行结果。这些日志输入到 Apigee 的可观测性和日志管道中,支持监控、异常检测和 LLM 行为的事后分析。

虽然其他 API 网关也提供了通用流量控制,但它们通常需要自定义中间件来实现模型级安全。Model Armor 旨在通过在 Apigee 中提供原生的 LLM 特定策略执行来消除这种复杂性。

特别声明:[谷歌 Apigee 添加了内置的 LLM 治理 Model Armor(谷歌怎么添加)] 该文观点仅代表作者本人,今日霍州系信息发布平台,霍州网仅提供信息存储空间服务。

猜你喜欢

王志文:我落难时王宝强倾囊相助,但宝强落难借300万我却一分没给!(台词 王志文)

王宝强和王志文的友情纠葛,成了娱乐圈一场检验真情的特殊试炼。不能因为这一件事就否定王志文的为人和他们过去的友情。 这篇文章就是想通过王宝强和王志文的友情风波,让大家思考娱乐圈的真情,也提醒我们在现实生活中要珍…

王志文:我落难时王宝强倾囊相助,但宝强落难借300万我却一分没给!(台词 王志文)

56岁窦唯:隐居阿那亚,头发花白索性剃光头,活成了自己(56岁窦唯隐居阿那亚)

有人说他“堕落”了,但我倒觉得,他才是最早看明白这一切的人。那时,他站在舞台上,长发飘飘,眼神狂野,嗓音每一声都在质问体制:“你们看着我,怕了吗?” 有些人红了一辈子却没做过自己,而他在30岁时就选择了退场…

56岁窦唯:隐居阿那亚,头发花白索性剃光头,活成了自己(56岁窦唯隐居阿那亚)

约瑟电器 XJZJ-202X中间继电器 220VAC 板后接线 使用功耗低(上海约瑟电器科技有限公司电话号码)

XJZJ-202X中间继电器广泛应用于电力系统、工业自动化控制、通信设备、交通运输等领域,作为保护和自动控制线路中的辅助继电器,提高电路的可靠性和稳定性。 综上所述,XJZJ-202X中间继电器是一款性能优…

约瑟电器 XJZJ-202X中间继电器 220VAC 板后接线 使用功耗低(上海约瑟电器科技有限公司电话号码)

PA6美国杜邦一级代理商(美国杜邦ema)

特别是以杜邦生产的PA6产品为代表,一级代理商在供应链中扮演着关键角色,直接影响到下游客户的采购成本、供应稳定性及产品品质。 总结来说,在行业中的作用不仅仅是供应链的一环,更是企业品质保障和供应稳定的重要保障…

PA6美国杜邦一级代理商(美国杜邦ema)

印度首次成为美国智能手机最大制造来源国,苹果 iPhone 生产良率比中国低 10% 左右(印度 正在接管美国)

Canalys分析师指出,这一显著变化源于苹果大幅提升印度产能,以及智能手机厂商“因关税担忧而提前囤货”。这一举动引发了美国总统特朗普的不满,他一直敦促企业在美国本土增加制造活动。 苹果仍然在中国生产大部…

印度首次成为美国智能手机最大制造来源国,苹果 iPhone 生产良率比中国低 10% 左右(印度 正在接管美国)