企业需要准确且相关的数据,来驱动应用程序、平台以及旨在实现数字化变革的 AI 智能体。然而,即便数据在表面上看起来"无懈可击",其背后也可能存在隐患。
对数据进行严格审查和压力测试,能够有效防止企业基于错误信息做出决策——而这类问题往往并非源于 AI 本身。
在本期《InformationWeek 播客》中,Phison Electronics 首席技术官 Sebastien Jean 与 Ensemble Health Partners 首席技术官 Grant Veazey 共同探讨了他们在工作中接触到的数据类型、在测试数据时的优先考量事项、是否会使用"残缺数据"进行模拟测试,以及数据可视化的实际价值。
随后,节目中的"问题创意桌游"环节将对两位嘉宾的知识储备和实战经验发起挑战——他们将以临时高管的身份,协助一家虚构企业梳理并优化其数据测试策略。
Q&A
Q1:企业在数据测试中最应该优先考虑哪些因素?
A:根据两位 CTO 的经验,企业在测试数据时应优先关注数据的准确性与相关性。即使数据表面上看起来"完美",也可能存在隐患。因此,需要对数据进行严格审查和压力测试,防止企业基于错误信息做出错误决策,而这类问题往往并非由 AI 本身引起,而是数据质量本身的问题。
Q2:用"残缺数据"进行模拟测试有什么意义?
A:使用"残缺数据"进行模拟测试,是一种主动发现系统漏洞和数据处理缺陷的方法。通过故意引入错误或不完整的数据,企业可以提前识别系统在异常情况下的表现,从而提升数据管道和 AI 智能体的鲁棒性,避免在真实业务场景中因数据问题导致严重后果。
Q3:数据可视化在数据测试中能发挥哪些作用?
A:数据可视化能够帮助技术团队更直观地发现数据中潜在的异常或规律,是数据测试过程中的重要辅助手段。通过图表和可视化工具,CTO 及数据团队可以快速识别数据质量问题,提升决策效率,同时也便于向非技术背景的管理层清晰呈现数据测试的结果与风险点。
好文章,需要你的鼓励
OpenAI在与多家新闻机构的版权诉讼中陷入困境。以《纽约时报》为首的原告指控OpenAI在长达两年时间里向法庭撒谎,刻意隐瞒其已对ChatGPT日志进行大规模搜索的事实。据悉,OpenAI实际上已拥有包含1000万和7800万条记录的日志样本,并曾用于研究版权内容过滤器,却对外声称无法进行此类搜索。原告据此提出制裁动议,要求法院追责。OpenAI则否认相关指控,坚称其立场基于合理使用原则。
斯坦福与UC伯克利提出LLM-as-a-Verifier框架,通过提取AI模型内部概率分布生成连续评分,在代码、机器人、医疗领域均达到最优性能,且无需额外训练。
美国加州大学圣地亚哥分校研究团队在《自然》期刊发表研究成果:外科医生通过远程操控宇树G1仿人机器人,成功完成两例活体猪胆囊切除手术,创下全球首例。与造价数十至数百万美元的达芬奇手术机器人相比,仿人机器人成本更低、体积更小,未来有望部署于农村、战地乃至太空等资源匮乏的医疗场景。但目前仍存在需频繁重新校准、机械臂活动范围受限等挑战。
字节跳动Seed团队发现AI智能体在真实环境中学习的进步曲线精确遵循对数S形规律,R?达0.998,且前沿模型的学习速度每三个月翻倍。