随着企业将AI技术融入机器人、工业设备及其他实体基础设施,他们逐渐发现,AI在计算需求上与传统边缘应用存在本质差异。部分决策必须在设备本地即时完成,而AI模型本身则持续在云端学习与优化。
Luminous Robotics和先正达(Syngenta)这两家企业,清晰展示了这一架构在实际行业中的落地方式——在这些行业中,网络连接质量、时延表现以及物理运营需求,共同决定着AI的部署形态。
AWS生成式AI创新中心汇聚了应用科学家、数据科学家与机器学习架构师,为Luminous Robotics等企业提供AI模型构建与优化支持。AWS新兴技术与物理AI负责人Alla Simoneau在近期举办的AWS峰会上接受采访时表示,企业可以在该平台上构建大型基础模型或世界模型,也可以基于开源模型进行适配,以提升效率与精准度。
Simoneau指出,随着CIO们在边缘端与云端之间分配工作负载,他们需要在模型类型选择与基础设施建设上做出关键判断。
"作为一名企业CIO,我认为我们正经历一次根本性转变——从过去依赖大语言模型、智能体等纯数字化工具,转向全面重塑企业的运营可能。这意味着CIO必须思考:我需要构建哪类模型?需要什么样的基础设施?"Simoneau说道。
Luminous如何管理边缘端与云端之间的连接
Luminous为太阳能农场的能源基础设施建设部署了大规模机器人队伍。据Luminous CEO Jay Wong介绍,这些太阳能发电场的覆盖面积可延伸至15英里。机器人的任务是搬运重达100磅的太阳能板并将其安装到支架上。
对于工业场景下的IT负责人而言,如何规避云端与物理AI系统之间的时延是一大核心挑战。Simoneau指出,Luminous机器人的AI系统运行在两个截然不同的时间维度上:机器人在本地实时做出决策,而指导这些决策的AI模型则在更长的时间跨度内于云端完成训练与更新。
"模型的所有训练结果都必须在本地设备上实时运行,但这些信息的完整序列会被上传至云端,用于训练那个持续演进的更大模型。"Simoneau说。
Wong表示,数据上传云端的频率从每隔几小时一次到每班次结束时上传不等。"这些数据随后用于持续微调模型,更新后的模型再重新部署回机器人上。"他说。
Wong还提到,Luminous机器人每秒做出10次决策,但模型微调或新行为推送到机器人上则需要数天或数个班次的时间。
Luminous机器人整合了蜂窝网络连接与星链卫星,模型在部署前会提前推送至机器人本地。因此,机器人在边缘端进行决策时,并不需要时刻保持与云端的连接。Luminous Robotics物理AI高级副总裁Krishna Gopalakrishnan表示:"机器人不需要持续的卫星或网络连接,会在有连接信号时按需进行通信,连接状态不会影响正常运营。"
机器人持续上传GPS位置、实时遥测数据及其他运营数据,Luminous利用这些数据优化算法、微调模型并提升机器人效率。Wong表示:"我们正开始利用这些数据,更好地理解施工现场的实际建设进展,构建站点数字孪生,并对施工进度进行精细化标注。"
Luminous机器人如何采集太阳能农场的感知数据
据Gopalakrishnan介绍,Luminous机器人负责处理太阳能板的搬运与安装决策,而AWS的AI模型训练与数据管理能力则提供了必要的基础设施,支撑整个机器人队伍的协同调度。
Simoneau解释称,这些机器人采用视觉-语言-动作融合模型,将视觉感知、自然语言理解与物理运动控制整合为一体。这类多功能模型适应性强,无论是协助机器人搬运100磅还是500磅的太阳能板,都能快速响应。
"这就像一个具备动态推理能力的大脑,类似于智能体,但在物理AI场景下,它是运行于边缘端的模型。这个模型本身就是一个在边缘运行的智能体,同时可以通过智能体叠加不同指令,形成抽象化的控制层。"Simoneau说。
Luminous机器人以每秒15帧的频率采集高分辨率图像,同时整合深度传感器、GPS、轮式里程计以及机器人七轴工业机械臂的数据。
与传统企业数据不同,用于训练物理AI的感知数据必须在自主系统实际运行的真实环境中采集。
"这类数据不是从网上就能下载到的,你必须亲自去采集或构建——可以是真实数据,也可以是仿真数据,或者将两者以合成的方式结合起来。"Simoneau说。
先正达借助AI为农作物保护提供决策支持
对于总部位于瑞士的农业科技公司先正达而言,核心挑战之一是保护农作物免受病虫害和杂草的侵害。先正达集团首席信息与数字官Feroz Sheikh表示,企业的目标是利用数据与AI来优化种植决策、预判大宗商品价格走势。
先正达由阿斯利康与诺华于2000年合并组建,现为中国中化控股有限责任公司旗下企业,在90多个国家拥有约5万名员工,年营收达284亿美元。
先正达的Cropwise农场管理平台汇聚全场景数据,生成作物保护建议,先进拖拉机和机器人随后依据这些数据采取行动。
"可以把云端的计算农学系统理解为大脑,而传感器则是它的眼睛和耳朵,不断向大脑反馈田间动态。某些情况下,计算在边缘端完成,但大多数情况下,这些AI模型运行在云端。"Sheikh说。
该平台整合了多维度数据来源,涵盖土壤质地、土壤湿度、温度、降雨量、pH值及种子遗传信息。此外,还接入了低轨卫星图像、近地飞行无人机影像,以及安装在拖拉机上的摄像头采集的图像,用于监测作物状态、识别干旱或病害等问题。
"在不同的监测层级,你可以获得不同视角和分辨率的信息。"Sheikh说。
Sheikh表示,AI协助农民应对约150项决策,涵盖种子选择、播种时机、灌溉方式及预防性农药施用等环节,还可根据土壤条件、气候状况和市场行情推荐最优种植方案。
"终极目标是帮助农民基于数据做出更好的决策,从而优化产量、提升单位面积产出,同时兼顾土壤养护,持续改善土壤生产力。"Sheikh说。
AI还赋能了智能拖拉机和播种机的数据采集能力,这些设备在作业过程中采集海拔高度、土壤质地和土壤样本信息,并将数据发送至实验室进行分析。先正达的设备通过卫星、4G或低功耗蓝牙将田间数据传输至仓库或自有设备,再上传至云端。
先正达的整体架构运行在AWS之上,并使用Amazon Bedrock构建生成式AI智能体,边缘AI系统的推荐结果通过云端API进行下发。
保持人工监督对边缘AI的重要性
即便工业自动化与机器人技术高度发展,在涉及农作物管理或太阳能板安装等关键决策时,人工监督依然不可或缺。
目前,Luminous在各太阳能农场现场配有操作人员,但据Gopalakrishnan介绍,公司正在逐步提升机器人的自主程度。"随着自主化水平不断提高,会始终保留操作人员,但最终目标是希望操作员不必在现场,可以在远端对这些机器人进行实时监控。"他说。
Simoneau表示,Luminous机器人在距离人员或障碍物2至3英寸时会自动停机。
Wong将Luminous机器人比作早期的Waymo自动驾驶汽车——后者依赖"安全员"辅助运营。他补充道,Luminous与施工现场的工会合作,因此人工监督仍是现场运营的重要组成部分。
"我们的初衷并非消除人力,而是赋能现有的现场团队,让每个人都能更高效地工作,同时让整体作业更加安全。"Wong说。
Simoneau指出,随着企业将AI部署至实体环境,CIO们还必须统筹设计支撑这些系统运行的安全与治理架构。"作为CIO,你如何与法律和安全团队协作,共同规划业务的未来形态以及与客户的交互方式?又如何构建运营韧性?"她说。
对于先正达而言,Sheikh表示,引入人工审核环节有助于确保AI建议的合理性。"我认为,在建议付诸实施之前,仍然需要顾问或农艺师对其进行验证,因为这涉及实体操作。不像软件错误只是多消耗了一些内存或CPU,农民如果决策失误,将直接造成产量损失,甚至可能导致我们所说的作物物理损伤。"他解释道。
Sheikh表示,对于CIO而言,首要任务是明确目标——无论是提升生产力、改善产出质量,还是开发种子中的新功能分子。"如果我们不聚焦于想要实现的输出或成果,就会在大量工作和高额投入上空耗资源,却无法产生真正有意义的影响。"Sheikh说。
Q&A
Q1:Luminous机器人是如何在边缘端和云端之间分配AI计算任务的?
A:Luminous机器人在两个时间维度上运行AI系统。实时决策在本地设备上完成,每秒做出10次判断,无需持续连接云端;而采集的GPS位置、遥测等数据则会定期上传至云端(每隔数小时或每班次结束时),用于微调模型。更新后的模型再重新推送至机器人,整个周期通常需要数天或数个班次。
Q2:先正达的Cropwise平台是如何利用AI帮助农民做决策的?
A:Cropwise平台整合了土壤质地、土壤湿度、温度、降雨量、pH值、种子遗传信息,以及来自卫星、无人机和拖拉机摄像头的图像数据,通过云端AI模型为农民提供约150项决策支持,涵盖种子选择、播种时机、灌溉方案、农药施用及作物种植推荐,目标是在保护土壤的前提下优化产量。
Q3:在物理AI和工业机器人部署中,为什么人工监督仍然重要?
A:因为物理AI的决策失误会带来真实的物理损失,不像软件错误仅消耗算力资源。Luminous机器人目前仍配有现场操作人员,并在距人员2至3英寸时自动停机;先正达也要求农艺师在AI建议执行前进行审核,以防止因错误决策导致作物减产或物理损伤。
好文章,需要你的鼓励
全球数据中心建设需求持续高涨。北美方面,美国数据中心建设支出年化达510亿美元,微软在威斯康星州开放33亿美元设施,亚马逊和谷歌宣布在密苏里州合计投资250亿美元。欧洲方面,SoftBank将在法国建设5GW AI数据中心,投资额达750亿欧元。亚太地区,AirTrunk计划在印度投资210亿美元建设3GW数据中心。中东与非洲地区也有多项大规模项目落地。
这项研究提出Epi2Diff方法,通过将大型推理模型的解题思考过程拆解为认知片段序列,提取过程特征预测考题对人类的难度,在四个真实考试数据集上超越了所有对比基线。
随着企业将AI融入机器人、工业设备等物理基础设施,边云协同架构正成为关键课题。以Luminous Robotics和先正达为例:前者在太阳能农场部署的机器人每秒做出10次决策,数据定期上传云端持续优化模型;后者通过Cropwise平台整合卫星、无人机、拖拉机传感器数据,辅助农民完成约150项农业决策。两家公司均强调,边缘端负责实时响应,云端负责模型训练与更新,同时保持人工监督以确保安全与准确性。
南京大学与阿里巴巴提出MIMFlow,将掩码图像建模与标准化流端到端融合,让生成模型专注语义建模,以更少参数和更少令牌在ImageNet上取得FID 2.50的优异表现。