Agent 运行评估 独立测试站
目标与技术方案 ↗

COMPANY AGENT REVIEW

监管与有效性评估

原脚本提供事实,项目与 case 串起目标、结果、代价和人的评价。

已显示最近快照快照同步 2026/10/18 03:01:52

数据已显示。交互加载期间可直接使用板块链接、分类链接和表格展开;刷新可读取最新快照。

功能与案例

UMI action监督

10月16日报告使用320卡继续;当前云作业最终状态未取得。

更新时间:2026-10-17 18:36(北京时间);本次补充10月目标与协作关系,进展沿用10月17日04:13及文中所列记录。 · 来源 1 ↗

功能进展整理依据:2026-10-17项目说明,非实时作业状态。反馈保留各自发生时间。

功能推进与监管指标

10月16日报告使用320卡继续;当前云作业最终状态未取得。

需要持续观察:有标签比例、mask与reduction、梯度尺度、卡数与batch、同条件对照

功能完成百分比尚缺验收项分母,不用反馈数量代替。

实际案例 · 同类比较

先按类型比较与评分,点击“查看依据”阅读结果、用时与人工介入。

按类型分表 · 当前 1 / 1 个案例。横向比较同类任务,直接标注与打分。

评分规则与权重 · 通用

各项0–100分,越高越好。建议权重可调整;完整填写五项与依据后才计算总分。空白保留待评。

权重合计100%。

草稿保存在本浏览器会话;正式保存需原测试身份。

训练研究 1 个案例

任务 / 依据标注结果质量响应速度人工介入token效率稳定性综合分标注与评分依据
UMI action监督:当前证据与待验证项10月16日报告使用320卡继续;当前云作业最终状态未取得。
查看依据

UMI action监督:当前证据与待验证项

训练研究 · 项目认知记录,非实时实验日志 · 未取得

结果与产物

10月16日报告使用320卡继续;当前云作业最终状态未取得。

目标与验收依据

比较训练方案时,保存数据、代码、配置、初始化和权重的对应关系,并核对图像处理、固定测试样本等条件。否则两次结果不同,可能同时受到多个变化的影响。 例如,UMI action恢复版同时改变了卡数、batch和监督方式。即使结果改变,也不能只归因于恢复了action监督,需要同条件对照才能分辨。 Kuangzhi_Ge确认,当前没有action标签的样本先置零,再按整个batch平均计算loss。这种做法会怎样影响梯度,仍在讨论,还没有对照结论。

耗时

待补

人工介入与反馈

待补

原Review

待独立验收

证据缺口

尚未关联运行级时间、token、人工介入次数及逐维度人评。

来源 1 ↗
当前来源未提供独立的反馈记录。
原Review:待独立验收待评

原人评与本次标注分开保留;评分是依据人工输入计算的试算。

功能反馈与处理 · 0 条原记录
当前来源未提供独立的反馈记录。

本页面按项目说明整理功能;不修改原项目登记与token归属。