码上问学问代码之理,学编程之道

群智化数据标注

从「AI 为什么需要老师」走到「能管一个十万条数据的项目」。这门课沿用码上问学一贯的讲法: 不背流程名词,先理解每一步在解决什么问题——每个术语都讲清「英文全称、概念的由来、 给外行听的生活类比、能写进笔记的严谨定义」四层;算法全部在浏览器里真算,标注动作全部可以亲手点、亲手拖。

00

课程与教材对照

本课程的 12 个模块严格对应孙海龙等《群智化数据标注技术与实践》的章节体系
教材依据:孙海龙、杨晴虹、陈尚义、施佳樑 编著《群智化数据标注技术与实践》(工业和信息化部「十四五」规划教材), 北京航空航天大学出版社,2022 年 9 月,ISBN 978-7-5124-3865-1,共 11 章、362 页。 全书第 1~4 章讲基础概念、技术及系统,第 5~8 章讲文本/音频/图像/视频四类标注,第 9~10 章以自动驾驶、人脸人体为真实场景, 第 11 章展望未来发展。本课程在教材基础上拆成 12 个模块、72 个知识点,并补上了可运行的算法台与可交互的标注演示。

教材 11 章 ↔ 课程 12 模块

每个模块卡片都标注了对应的教材章节,可对照教材同步学习
教材章节覆盖内容对应课程模块
第 1 章
人工智能与数据标注
AI 基础、数据是 AI 的石油、标注概念与发展脉络(专家标注→群智化)M1 AI 为什么需要老师 · M2 数据是石油 · M3 数据三要素与偏差 · M4 三代标注演进
第 2 章
群智化标注技术与系统
基本方法(人工/自动/人机协同)、任务及工具、群智化技术、平台与实例(MTurk/百度众测)M5 三种标注方式 · M6 群智化为什么出现 · M7 四大挑战与两大平台
第 3 章
项目管理方法
实施流程(采集→清洗→标注→质检→交付→验收)、人员与过程管理M8 流水线与人员分层
第 4 章
质量管理与真值聚合
质量控制意义与概念、一致性度量、真值估计M9 质量控制与真值聚合
第 5 章 文本标注
第 7 章 图像标注
文本分类/NER/关系抽取;图像分类/检测/分割/关键点M10 文本与图像标注
第 6 章 音频标注
第 8 章 视频标注
语音转写/切分/说话人分离;目标跟踪/动作/视频分割M11 语音、视频与点云
第 9 章 自动驾驶
第 10 章 人脸人体
2D/3D 标注、可行驶区域、Corner Case;关键点与属性标注M12 行业案例与未来
第 11 章
未来发展
智能化标注、隐私安全、行业走向M12 视野:行业案例与未来
群智化数据标注平台架构(教材第 2 章 2.4.4 平台架构概述) 任务发布方 Requester 标注平台 Platform 任务管理切分/分发/定价 标注工作台画框/打标签 质量控制蜜罐 + Kappa 真值聚合投票 / DS 众包标注者池 Workers(MTurk / 百度众测 / 京东众智) 数据集 Data(清洗 + 标注后的训练数据)
平台把「发布方 → 标注者 → 真值」串成一条自动流水线(对应 M7 平台、M8 流水线、M9 质量控制)
四类数据标注任务与工具全景(教材第 2 章 2.2 常见任务及工具) 文本 Text · 文本分类 · 序列标注 NER · 关系抽取 · 意图识别 Doccano / Label Studio 音频 Audio · 语音转写 · 时间戳切分 · 说话人分离 · 情感 / 事件 Praat 图像 Image · 图像分类 · 目标检测 · 语义/实例分割 · 关键点 CVAT / Label Studio 视频 Video · 目标跟踪 MOT · 动作识别 · 视频分割 · 字幕对齐 CVAT 数据标注
四类模态各自的任务与上手工具(对应 M10 文本/图像、M11 语音/视频,以及工具页 Label Studio / CVAT / Doccano / Praat)
01

入口与内容

知识地图 + 质量控制 + 六步流水线 + 图示册,再展开 12 个模块

四个入口

讲课时左边开着知识地图,右边跟着点 / 跟着改

数据标注知识地图 可运行 + 可交互

12 个模块、72 个知识点:左边点知识点,右边读「术语卡 + 要点」。算法节带可改可跑的代码台 (多数投票、Kappa、Dawid-Skene、IoU 全是真算),任务节带可点可拖的标注演示。

质量控制三件套

蜜罐抓「不认真」,Kappa 量「分类一致」,IoU 量「框一致」——远程看不见人时,质量是靠机制而不是靠信任。 三个演示都能拖动参数实时看判定结果。

六步流水线走一遍

需求分析 → 任务设计 → 采集清洗 → 标注执行 → 质量检验 → 交付验收。点每一步看关键动作、交付物, 以及这一步最容易踩的坑——授课时最适合拿来当骨架。

图示册 17 张 · 与讲稿对号

把 AI 三大支柱、五段数据流水线、四类脏数据、三代标注演进、数据飞轮、众包三方、蜜罐、Kappa、IoU、NER 的 BIO 标记、 自动驾驶闭环等抽象概念一张张画出来。每图配一句「讲课时说」,投影即可照念;图已同步内嵌进知识地图对应知识点。

质量控制三件套:规范、蜜罐、金标准各管一段标注规范事前把「怎么标」写死,减少歧义蜜罐埋点事中混入已知答案,实时盯人金标准验收事后对答案算准确率,决定收不收三件套覆盖「事前-事中-事后」:只靠最后验收是不够的,返工时钱已经花掉了
标注项目的六步流水线:一条都不能省① 定规范写清楚怎么标② 采集清洗去重脱敏③ 试标小批试跑对齐④ 正式标注按批推进⑤ 质检抽检+蜜罐⑥ 交付验收归档最容易省掉的是「③ 试标」——不试标就批量开干,返工成本最高规范写不清 → 一致性一定低质检放最后 → 错误已扩散
①

基础概念

对应教材第 1 章 · 人工智能与数据标注
②

技术系统与平台

对应教材第 2 章 · 群智化数据标注技术与系统
③

项目管理与质量

对应教材第 3–4 章 · 项目的管理方法与质量管理
④

四类数据标注与真实场景

对应教材第 5–11 章 · 文本/音频/图像/视频标注与自动驾驶、人脸人体场景
02

依据与资源

金句卡片、易混概念对比表、规范与质检模板,以及内容依据

配套资源

按课程标准补充的工具实操与代表性案例,配合知识地图使用

代表性行业案例库 案例代表性

覆盖文本/音频/图像/视频/点云五类形态:自动驾驶、人脸人体、医疗、语音、内容审核、电商六大案例,每个写清标注任务、工具、难点与质控,对应标准「行业案例」章节。

工具与平台速览

Label Studio/CVAT/Doccano/Praat 四类标注工具,百度众测/京东众智/MTurk 接单平台,含横向对比表与上机指引,对应模块 2、4 的实操要求。

金句卡片 每模块 1 句

12 个模块 + 期末项目共 13 张金句卡,每讲完一章投一张,既是章末总结也是开卷考锚点,可回链知识地图对应模块。

易混概念对比表

12 组最易混、最爱考的概念两两摆开(三方式 / 图像四任务 / 两种 Kappa / 蜜罐与金标准…),配一句话区分,考前集中刷。

标注规范 & 质检报告模板

期末项目要交的两份材料:标注规范(≥3 页)与质检报告(含 Kappa≥0.6 判定),可直接打印填写,满足考核硬指标。

期末试卷 A 卷 8 题型 · 100 分

单选/多选/判断/填空/名词解释/简答/计算/案例分析共 45 题,覆盖 12 个模块;答案与解析默认隐藏、一键展开,支持直接打印或导出 PDF。

题库与模考 2 套卷 + 章节自测

每章穿插自测题,另备两套期末模拟卷与「智能组卷」(易题加权、尽量让你过关)。考试即从这批题库中抽,练熟即过关。

怎么用这个页面讲课:点任意模块进入知识地图对应位置。算法节(投票、Kappa、Dawid-Skene、IoU) 在「代码台」里改一个参数再点运行,数值立刻变;任务节(画框、打 BIO 标签、拖帧跟踪、切语音时间戳) 直接在演示里亲手操作。所有输出都在浏览器里真实计算,数据固定、结果可复现,适合课堂演示与课后自查。

内容依据

孙海龙等《群智化数据标注技术与实践》(北京航空航天大学出版社,2022); 《人工智能数据服务(微课版)》第 1~10 章配套课件。课程结构在此基础上重组为 12 个模块、72 个知识点, 并为算法类知识点补齐了可运行的浏览器实训台。