研究称,流行的人工智能基准 LMArena 据称有利于大型供应商

Salesforce AI Research发布多项创新,旨在解决企业AI系统在强大智能与稳定执行力之间的差距,即“锯齿状智能”。核心目标是构建更智能、可信、适用于企业应用的AI代理,并向“企业通用智能”(EGI)迈进。

研究重点在于量化和解决AI性能不一致性,推出了SIMPLE数据集作为公开基准。更重要的是,Salesforce推出了CRMArena,一个模拟真实CRM场景的基准测试框架,用于全面评估AI代理在服务、分析和管理等角色中的表现。早期测试显示,现有领先AI座席在函数调用成功率方面仍有提升空间。

人工智能 AI教育

在模型层面,Salesforce发布了SFR-Embedding,一种在文本嵌入基准测试中领先的新模型,旨在更深入地理解上下文。同时推出了针对代码搜索优化的SFR-Embedding-Code。此外,还推出了xLAM V2(大型动作模型),专注于预测和执行任务序列,尤其适用于需要与企业系统交互的自主代理。

为解决企业对AI安全性的担忧,Salesforce推出了SFR-Guard模型,增强了其信任层,为AI代理的行为提供保障。同时推出了ContextualJudgeBench,用于评估基于LLM的判断模型。在多模态领域,推出了TACO模型,通过思维行动链解决复杂的多步骤问题,并在相关基准测试中取得显著性能提升。

Salesforce强调与客户的共同创新,客户反馈是塑造企业AI路线图的关键。通过应用Atlas推理引擎等先进技术,AI性能已得到显著提升。

Salesforce的研究正值企业加速采用AI的关键时刻,其关注点在于将先进功能与可靠性能相结合。与追求更大模型的行业趋势不同,Salesforce更侧重于解决现实世界的业务需求。相关技术将在未来几个月内逐步推出,首先应用于数据云,并为Agentforce的未来版本提供支持。Salesforce认为,在企业AI竞争中,一致性和可靠性将最终胜出。

本文由「aiuc」编辑整理,文章链接:https://www.aiuc.net/53249

该文观点仅代表作者本人,平台仅提供信息存储空间服务。

(0)
aiucaiuc
上一篇 17小时前
下一篇 17小时前

相关推荐

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注