数据接入
数据源连接 · 手动采集与文件导入 · 批次解析与待处理数据（FR-NEW-DAT-001~009 / FR-NEW-DAT-010 / FR-DAT-020~046 / FR-DAT-153~157）
当前数据集接入能力由适用模板决定；支持人工触发的 JSON / CSV 文件解析。远程数据源须完成连接配置后方可执行采集。
可用接入方式1本地文件可直接接入；远程来源需先完成授权
| 批次号 | 来源 | 数据类型 | 目标数据集 | 模板版本 | 文件/样本数 | 解析结果 | 状态 | 创建人/时间 | 操作 |
|---|
| IMP-2026-0341 | 本地文件 | 时序数据 | DS-2026-0101 | TPL-VIB-018（v3） | 2 文件 / 170,000 条 | 成功 · 校验和一致 |
解析完成 · 待质检 | 李工 2026-09-05 10:20 |
｜ 去质检 |
| IMP-2026-0338 | 本地文件 | 图像数据 | DS-2026-0098 | TPL-IMG-DEF（v2） | 8 文件 / 12,400 张 | 部分失败 · 6 文件成功 / 2 文件标签无法对应 |
部分失败 | 王工 2026-09-03 16:05 |
｜ |
| IMP-2026-0330 | SQL 采集 | 时序数据 | DS-2026-0101 | TPL-VIB-018（v3） | 1 采集范围 / 320,000 条 | 历史记录 · 待联调验证 |
待联调验证 | 李工 2026-08-20 10:15 |
｜ 查看版本 |
| IMP-2026-0312 | 本地文件 | 图像数据 | DS-2026-0098 | TPL-IMG-DEF（v2） | 12 文件 / 18,500 张 | 成功 · 图片与标签一一对应 |
已完成 · 生成待处理快照 | 王工 2026-08-05 14:40 |
｜ 查看版本 |
| IMP-2026-0299 | 本地文件 | 文本数据 | DS-2026-0071 | TPL-TXT-INS（v1） | 2 文件 / — | 失败 · 文件编码不支持（GBK→UTF-8 转换失败） |
失败 | 赵工 2026-07-10 09:02 |
｜ |
| IMP-2026-0287 | MQTT 采集 | 时序数据 | DS-2026-0101 | TPL-VIB-018（v2） | 0 消息 | 空批次 · 采集边界内未收到消息 |
空批次 | 李工 2026-07-02 13:30 |
|
连接管理 本地文件、SQL、API、MQTT
数据源连接
凭证加密保存，只允许重新填写、不回显明文（FR-DAT-020 / FR-DAT-024）；连接与数据集、数据版本分开管理，可复用于多个批次（FR-DAT-021 / FR-DAT-023）。
| 连接编号 | 类型 | 名称 | 目标参数 | 凭证 | 状态 | 最近测试 | 更新时间 | 操作 |
|---|
| CON-2026-011 | 本地文件 | 本地上传通道 | 浏览器上传 / 2GB 单文件上限 | 无需凭证 | 可用 | — | 2026-06-01 09:00 | |
| CON-2026-012 | SQL | MES 时序库（只读） | MES 时序库 · mes_ts 库 | 已加密 · 重新填写可更新 | 待接入 | 未验证 | 2026-08-18 11:20 | ｜ |
| CON-2026-013 | API | 质量系统接口 | 质量系统记录接口 · v2 | 已加密 · 重新填写可更新 | 待接入 | 未验证 | 2026-08-12 15:44 | ｜ |
| CON-2026-014 | MQTT | 车间振动传感网关 | 车间振动网关 · vib/+/data · QoS 1 | 已加密 · 重新填写可更新 | 待接入 | 未验证 | 2026-07-30 10:05 | ｜ |
‹ 返回批次列表
新建导入批次（草稿）
IMP-2026-0345（草稿）
V1.0 数据接入仅支持人工触发 + 明确结束边界，不提供定时采集、常驻订阅（FR-NEW-DAT-010）；每批次只能导入一种数据类型，且必须与目标数据集及模板一致（FR-NEW-DAT-005）。导入成功不直接生成冻结数据版本，解析结果进入待处理区，质检通过后才可冻结（FR-DAT-030 / FR-DAT-156）。
⇪
点击或拖拽文件到此处上传
单文件 ≤ 2GB · 批次 ≤ 20GB / 10,000 个文件 · 解压后 ≤ 50GB · 已选 2 个文件，共 862.4MB
| 文件名 | 大小 | 校验和 | 标签/清单文件 | 状态 | 操作 |
|---|
| bearing_vib_202608.csv | 512.8MB | MD5 8a31…c2e9 | —（时序结构化文件） | 上传完成 | |
| bearing_vib_202609.csv | 349.6MB | MD5 21d7…9f04 | —（时序结构化文件） | 上传完成 | |
多媒体导入（图片/音频/视频）须同时上传标签文件或样本清单，且文件与标签一一对应，无法对应时整批阻断（FR-NEW-DAT-007/008/009）。V1.0 不提供平台内标注，标签问题请在外部修正后重新导入（FR-NEW-DAT-003）。
采集边界（SQL / API / MQTT 来源）
手动触发
采集由人工触发，到达范围/时长/消息数边界后自动结束并进入校验；亦可在进度页人工结束。V1.0 无定时采集与常驻订阅；空批次、断连与超时记为失败，不自动生成版本（FR-NEW-DAT-010）。
取消
‹ 返回批次列表
1上传 / 触发采集
2解析与按模板校验
3待处理数据快照
4质检通过
5冻结版本（dataset-version）
批次 IMP-2026-0345 · 解析与校验进度
解析中
| 阶段 | 状态 | 说明 |
|---|
| 文件接收与校验和 | 完成 | 2 个文件 · MD5 校验一致 |
| 解析（编码 / 字段结构 / 数据类型） | 进行中 | 按模板 TPL-VIB-018（v3）解析字段与类型 |
| 模板校验（必需字段 / 标签 / 对应关系） | 排队 | 阻断问题必须修复；警告问题须填写原因确认后继续（FR-NEW-DAT-006） |
| 生成待处理数据快照 | 排队 | 解析完成进入待处理区，等待质量检查（FR-DAT-156） |
‹ 返回批次列表
1上传 / 触发采集
2解析与按模板校验
3待处理数据快照
4质检通过
5冻结版本（dataset-version）
待处理数据快照 · 批次 IMP-2026-0341
待质检
- 目标数据集
- DS-2026-0101 轴承振动时序数据集（时序数据）
- 模板版本
- TPL-VIB-018（v3）· 批次类型与数据集及模板一致（FR-NEW-DAT-005）
- 样本数
- 170,000 条（2 个文件追加）
- 快照指纹
- FP-b4e07d18 · 样本清单已固定，数据变化须生成新快照并重新质检
- 模板校验
- 无阻断 2 项警告（可选字段空值率偏高）
- 质量检查
- 未执行 须在数据质检完成且无阻断后才可冻结版本（FR-DAT-156）
导入成功 ≠ 正式版本可用：待处理数据快照不参与训练/评测选择，须经质量检查（无阻断且警告已确认）后，在「数据集版本」页执行冻结（FR-DAT-030 / FR-DAT-047）。
‹ 返回批次列表
批次详情 · IMP-2026-0341
解析完成 · 待质检
- 基本信息
- 来源：本地文件 · 数据类型：时序数据（单一）· 目标数据集：DS-2026-0101 · 模板：TPL-VIB-018（v3）
- 负责人 / 时间
- 李工 · 2026-09-05 10:20 提交
- 文件清单
- bearing_vib_202608.csv（512.8MB · MD5 8a31…c2e9）
bearing_vib_202609.csv（349.6MB · MD5 21d7…9f04）
- 解析结果
- 成功 · 170,000 条 · 校验和一致 · 字段结构与模板匹配
- 待处理快照
- 已生成 · 指纹 FP-b4e07d18
- 下一步
- 质量检查（无阻断 + 警告确认）→ 数据集版本页冻结生成 v1.3
‹ 返回批次列表
批次详情 · IMP-2026-0338（部分失败）
部分失败
部分失败批次保留成功与失败明细（FR-DAT-030）：成功文件已进入待处理数据快照；失败文件须在外部修正标签对应关系后，复制批次重新导入（不复制凭证与执行结果）。
| 文件名 | 图像数 | 标签对应 | 状态 | 问题定位 |
|---|
| defect_batch_a.zip | 4,100 | 对应 | 成功 | — |
| defect_batch_b.zip | 3,600 | 对应 | 成功 | — |
| defect_batch_c.zip | 2,700 | 缺失 6 张 | 阻断 | 标签清单缺少 IMG-C0092 等 6 张图片的标签记录（FR-NEW-DAT-007） |
| defect_batch_d.zip | 2,000 | 多出 3 条 | 阻断 | 标签清单含 3 条无对应文件的标签记录 |
V1.0 不提供平台内标注（FR-NEW-DAT-003）：请在标注平台补齐/修正标签文件后重新导入。
| 去重口径 | 规则 | 本批次命中 |
|---|
| 样本 ID 去重 | 样本 ID 与目标数据集已有版本重复时默认跳过并记录明细 | 重复 128 张 · 已跳过并留痕 |
| 内容指纹去重 | 样本指纹（哈希）重复的文件不重复入快照，保留首次入库指纹 | 重复 36 张 · 已跳过并留痕 |
补传口径：仅允许对失败文件发起补传批次（复制失败文件 + 最新标签清单），补传批次独立编号、独立校验；成功文件不重复导入，重复样本按上述去重规则跳过并写入明细。
‹ 返回批次列表
批次详情 · IMP-2026-0330
已完成 · 生成待处理快照
- 基本信息
- 来源：SQL 采集（CON-2026-012 MES 时序库，只读账号）· 数据类型：时序数据 · 目标数据集：DS-2026-0101 · 模板：TPL-VIB-018（v3）
- 采集触发
- 人工触发 · 采集范围 2026-08-10 ~ 2026-08-18 · 到达范围边界自动结束（FR-NEW-DAT-010）
- 连接快照
- 脱敏连接快照已随批次保留（凭证不回显明文，FR-DAT-024）
- 解析结果
- 成功 · 320,000 条 · 校验和一致
- 后续结果
- 经质检通过后冻结生成版本 v1.2（2026-09-01）
查看版本 v1.2 →
‹ 返回批次列表
批次详情 · IMP-2026-0312（外部已标注图像导入）
已完成 · 生成待处理快照
- 基本信息
- 来源：本地文件 · 数据类型：图像数据（单一批次）· 目标数据集：DS-2026-0098 · 模板：TPL-IMG-DEF（v2）
- 必备材料
- 图像压缩包 12 个 + 标签清单 defect_labels.json（FR-NEW-DAT-007）
- 预览校验
- 缩略图、分辨率 2448×2048、格式 PNG · 图片与标签一一对应校验通过
- 标注方式
- 外部标注平台完成标注后导入 · V1.0 不提供平台内标注（FR-NEW-DAT-003）
- 解析结果
- 成功 · 18,500 张图像 · 标签分布 6 类缺陷
查看版本 v2.0 →
‹ 返回批次列表
批次详情 · IMP-2026-0299（失败）
失败
- 失败阶段
- 解析（编码识别）
- 错误代码
- E-PARSE-0201
- 失败原因
- 文件编码不支持：GBK → UTF-8 转换失败（bearing_inspect_06.csv 第 12,408 行）
- 处理建议
- 在外部将文件转存为 UTF-8 后重新上传；或复制批次仅替换失败文件
失败信息与原执行记录绑定并保持只读；重试生成新批次记录并关联原记录，不覆盖原始失败日志（FR-DAT-033）。
新增数据源连接
保存成功返回连接编号与状态（FR-DAT-023）；后续采集须人工触发并设置明确结束边界，V1.0 无定时采集（FR-NEW-DAT-010）。
连接详情 · CON-2026-011 本地上传通道
- 类型
- 本地文件（浏览器上传，进入文件校验流程）
- 上传边界
- 单文件 2GB；单批次 20GB / 10,000 个文件；解压后 50GB（V1.0-R5 正式规则）
- 凭证
- 无需凭证
- 变更记录
- 2026-06-01 创建 · 只读
连接详情 · CON-2026-012 MES 时序库
- 类型
- SQL（MySQL · 只读连接）
- 数据源
- MES 时序库 · mes_ts 库（需授权后校验）
- 账号
- readonly_ts
- 凭证
- 已加密 · 不回显明文，重新填写可更新
- 最近测试
- 连通 120ms（2026-08-18，FR-DAT-157）
- 采集方式
- 人工触发 + 采集范围边界（V1.0 无定时采集）
连接详情 · CON-2026-013 质量系统接口
- 类型
- API（GET · 分页每页 5,000 条）
- 数据源
- 质量系统记录接口 · v2（需授权后校验）
- 认证
- Token 认证
- 凭证
- 已加密 · 不回显明文，重新填写可更新
- 响应解析
- JSON · data.records 数组映射
- 最近测试
- HTTP 200 · 340ms（2026-08-12）
连接详情 · CON-2026-014 车间振动传感网关
- 类型
- MQTT（QoS 1）
- 数据源
- 车间振动网关 · vib/+/data · QoS 1（需授权后校验）
- 主题
- vib/+/data
- 凭证
- 已加密 · 不回显明文，重新填写可更新
- 采集边界
- 人工开始 · 时长 ≤ 2 小时或消息数 ≤ 500,000 结束（FR-NEW-DAT-010）
- 最近测试
- 订阅握手成功（2026-07-30）