向量数据库初创公司 Pinecone 推出了 Pinecone Assistant,这是一个 AI 代理构建 API 服务,旨在加速 RAG 开发。
大型和小型生成式 AI 语言模型 (大语言模型) 通过查找请求与数学编码表示的项目多个方面或维度之间的相似性来生成响应,这些编码表示被称为向量嵌入。这些向量嵌入存储在具有搜索功能的数据库中。AI 代理用于对文本输入提供自动智能响应,并可以调用大语言模型来完成工作。大语言模型为代理提供自然语言处理能力,使其能够以类人方式与用户交互,理解复杂查询并生成详细响应。Pinecone Assistant 就是为构建这样的 AI 代理而设计的。
该公司表示:"Pinecone Assistant 是一个 API 服务,旨在精确且便捷地为基于聊天和代理的应用提供支持。" 该公司声称它抽象化了构建检索增强生成 (RAG) 应用所需的分块、嵌入、文件存储、查询规划、向量搜索、模型编排、重排序等步骤。
Pinecone Assistant 包括:
- 通过新的聊天和上下文 API 为代理应用优化的接口 - 可根据特定用例或要求定制助手行为和响应的自定义指令 - 新的输入和输出格式,现支持 JSON、.md、.docx、PDF 和 .txt 文件 - 可选择在欧盟或美国构建的区域控制
它提供了评估 API 和聊天 API,"通过简单的步骤提供带有引用的结构化、有据可依的响应。它支持流式和批处理模式,允许实时呈现引用或将其添加到最终输出中。"
还有一个上下文 API,可以提供结构化上下文 (即与输入查询最相关的数据集合),以扩展块的形式呈现,包含相关性分数和引用。Pinecone 表示,这使其成为代理工作流的强大工具,提供必要的上下文来验证源数据,防止幻觉,并识别最相关的数据以生成精确、可靠的响应。
上下文 API 可与客户首选的大语言模型一起使用,与其他数据源组合,或作为核心知识层集成到代理工作流中。
Pinecone Assistant 包括元数据过滤器,可按用户、组或类别限制向量搜索,还包括自定义指令,用户可以通过提供简短描述或指令来定制响应。例如,您可以将助手设置为法律专家以提供权威答案,或作为客户支持代理进行故障排除和用户协助。
它采用无服务器架构,具有直观的界面和内置的评估和基准测试框架。Pinecone 表示,只需"通过简单的 API 上传原始文件"即可轻松上手,并且可以快速实验和迭代。
Pinecone 在其基准测试中估计,Pinecone Assistant 的结果准确率比 OpenAI 助手高出最多 12%。
Pinecone Assistant 现已在美国和欧盟对所有用户全面开放,更多信息可在此处获取。它由 Pinecone 的全托管向量数据库提供支持。该公司表示,客户数据在静态和传输过程中都会加密,从不用于训练,并可随时永久删除。
好文章,需要你的鼓励
IBM Spyre加速器将于本月晚些时候正式推出,为z17大型机、LinuxONE 5和Power11系统等企业级硬件的AI能力提供显著提升。该加速器基于定制芯片的PCIe卡,配备32个独立加速器核心,专为处理AI工作负载需求而设计。系统最多可配置48张Spyre卡,支持多模型AI处理,包括生成式AI和大语言模型,主要应用于金融交易欺诈检测等关键业务场景。
加拿大女王大学研究团队首次对开源AI生态系统进行端到端许可证合规审计,发现35.5%的AI模型在集成到应用时存在许可证违规。他们开发的LicenseRec系统能自动检测冲突并修复86.4%的违规问题,揭示了AI供应链中系统性的"许可证漂移"现象及其法律风险。
意大利初创公司Ganiga开发了AI驱动的智能垃圾分拣机器人Hoooly,能自动识别并分类垃圾和可回收物。该公司产品包括机器人垃圾桶、智能盖子和废物追踪软件,旨在解决全球塑料回收率不足10%的问题。2024年公司收入50万美元,已向谷歌和多个机场销售超120台设备,计划融资300万美元并拓展美国市场。
这项由剑桥大学、清华大学和伊利诺伊大学合作的研究首次将扩散大语言模型引入语音识别领域,开发出Whisper-LLaDA系统。该系统具备双向理解能力,能够同时考虑语音的前后文信息,在LibriSpeech数据集上实现了12.3%的错误率相对改进,同时在大多数配置下提供了更快的推理速度,为语音识别技术开辟了新的发展方向。