Gemini Enterprise Agent Platform Vision(以前称为 Vertex AI Vision)是一个由 AI 提供支持的平台,用于注入、分析和存储视频数据。Agent Platform Vision 可让用户通过简化的界面构建和部署应用。
借助 Agent Platform Vision 与其他主要组件(即 Live Video Analytics、数据流和 Vision Warehouse)的集成,您可以构建端到端计算机图像解决方案。借助 Gemini Enterprise Agent Platform Vision API,您可以从低级 API 构建高级应用,并创建和更新将多个单独的 API 调用相结合的高级工作流。然后,您可以通过向 Agent Platform Vision 平台服务器发出单个部署请求,以单元形式执行工作流。
借助 Agent Platform Vision,您可以:
- 注入实时视频数据
- 使用通用和自定义视觉 AI 模型分析数据以获取数据分析结果
- 将分析结果存储在 Vision Warehouse 中,以便简化查询和元数据信息
Agent Platform Vision 工作流
您需要完成以下步骤才能使用 Agent Platform Vision:
注入实时数据
Agent Platform Vision 的架构可让您在公有云中快速方便地流式传输实时视频提取基础架构。
分析数据
注入数据后,Agent Platform Vision 的框架可让您轻松访问和编排大量不断增长的通用、自定义和专用分析模型。
存储和查询输出
应用分析数据后,您可以将这些信息发送到存储目的地(Vision Warehouse 或 BigQuery),也可以实时接收数据。借助 Vision Warehouse,您可以将应用输出发送到仓库,该仓库可概括您的搜索工作,并支持多种数据类型和使用情形。
关于 Responsible AI 的说明
在 Google Cloud,我们十分重视帮助客户使用 Gemini Enterprise Agent Platform Vision 安全地开发和实现解决方案。对于 Gemini Enterprise Agent Platform Vision,我们一直致力于根据 Google 的 AI 原则开发公平且公正的性能。
这项工作包括在开发过程中测试是否存在偏差(例如查看不同肤色的表现),以及开发可增强隐私保护和限制个人身份识别的产品功能,例如人物和面部模糊处理功能。我们致力于不断迭代和改进,并将继续将最佳实践和经验教训融入到 Vertex AI 产品中。
将 Gemini Enterprise Agent Platform Vision 集成到客户独特的组织环境中时,可能需要考虑其他 Responsible AI 注意事项。我们建议客户在实现 Gemini Enterprise Agent Platform Vision 时,尤其是构建自定义模型或 AutoML 训练的模型时,利用公平性、可解释性、隐私权和安全最佳实践。在整个技术文档中,我们提供了更多指南和资源来支持这项工作。如需了解详情,请参阅 Google 关于 Responsible AI 实践的建议。
后续步骤
- 如需了解详情,请参阅博文“Vertex AI Vision:轻松大规模构建和部署计算机视觉应用”。
- 如需详细了解特定模型,请参阅入住情况分析指南、人物模糊处理指南、人物/车辆检测器指南或运动过滤指南。
- 如需在 Google Cloud 控制台中试用 Agent Platform Vision,请参阅在控制台中构建应用快速入门。
- 设置本地环境以使用 Agent Platform Vision。