🚀 CODING4KIDS · AI 零基础互动教程 · AI 入门系列

AI 入门第 16 讲:AI 怎样理解视频?从连续画面到动作识别

一张静止图片告诉我们“画面里有什么”,而一段连续视频还告诉我们“刚刚发生了什么动作”。跟机器人小星一起走进视频实验室,通过 6 个可视化互动实验破解帧率(FPS)、时间顺序、目标跟踪与动作识别的秘密!

🎬 适合 9–15 岁与零基础 🎞️ 翻页动画与帧率实验 📍 目标运动轨迹追踪 🏅 6 题视频探索家闯关

🤖 故事开场:机器人小星看见了什么?

科技节上,小乐用手机拍了一段短视频:一个橙色小球滚向杯子,然后停了下来。
小星只看其中一张画面,立刻认出了“小球”和“杯子”,却怎么也回答不出:“小球到底是滚进杯子里,还是从杯子里滚出来?”
小乐笑着说:“因为只看一张静止画面不够呀!你还得看懂画面随时间变化的先后顺序!”
🖼️

1. 单帧(Single Frame)

视频里的一张静止画面,主要提供某一个瞬间的空间视觉信息。

🎞️

2. 视频(Video)

按时间先后顺序排列的连续画面序列,通常还伴随音频轨道。

🏃

3. 动作理解(Action)

必须结合物体位置变化、时间先后顺序与场景上下文才能准确判断。

01

第一章:实验 1 · 翻页动画机——视频为什么看起来会动?

视频由一幅幅连续画面(帧)组成,每秒播放的帧数叫作帧率(FPS)。

拖动下方滑块调节每秒播放的帧数(FPS),点击“播放”或“下一帧”,观察同一段小球运动的流畅程度:

👆 试试对比 2 FPS(一卡一卡)和 24 FPS(丝滑流畅),看看有什么不同?

注:FPS(Frames Per Second)表示每秒显示多少帧画面。真实视频的流畅度还会受到快门曝光、运动模糊和显示设备刷新率等因素影响。

02

第二章:实验 2 · 时间顺序侦探——同样的画面,顺序不同故事就不同

动作不仅取决于“看到了什么物体”,更取决于“先看到什么、后看到什么”。

请点击下方两张帧卡片交换它们的位置,把三张卡片排成“小球从左向右移动(位置 1 → 位置 2 → 位置 3)”的正确时间顺序:

👆 点击任意两张帧卡片即可交换先后顺序,排好后点击“检查时间顺序”!
03

第三章:实验 3 · 运动轨迹追踪器——AI 怎样知道物体往哪里走?

在连续帧中锁定同一个物体并连出移动路径的过程,叫作目标跟踪(Object Tracking)。

选择一种运动方式,观察物体在连续 7 个时间点的位置轨迹:

⚠️ 真实工程挑战:真实场景里的目标跟踪比画连线复杂得多!运动中的物体可能会被树木遮挡、发生姿态变形,或者与外貌相似的其他物体擦肩而过,AI 必须综合外观特征与运动规律判断“它是不是刚才那一个目标”。
04

第四章:实验 4 · 动作识别挑战——只看一张图能判断“跳起来”吗?

结合连续多帧的姿态与位置变化,为视频片段匹配最合理的动作标签。

👆 选择视频片段与你的判断,点击“检查动作识别”验证!

注:真实的视频动作识别模型通常会综合连续图像特征、人体骨骼关键点、光流(Optical Flow)与时序神经网络,而不是靠简单的文字规则。

05

第五章:实验 5 · 视频与声音合体——声画线索一定匹配吗?

声音能为视频理解补充关键线索,但也要警惕后期配音、旁白或错位剪辑!

👆 尝试不同画面与声音的组合,点击“合并声画线索”看看结论!
06

第六章:实验 6 · 视频安全审核员——AI 的视频判断能直接当事实吗?

面对模糊监控、掐头去尾的短视频或他人正脸影像,学会做负责任的决定。

👆 选择情境与应对方式,点击“检查审核决定”!
🛡️ 安全与伦理守则:视频 AI 同样可能误判动作、认错身份或漏掉前因后果。凡是涉及他人名誉、个人隐私或安全责任的判断,绝不能只凭一段模糊视频或 AI 提示草率下结论!
07

第七章:知识地图——AI 理解视频的典型五步流程

从原始视频输入到识别动作事件,串起空间特征与时间特征的配合。

🎥 1. 视频输入
➡️
🎞️ 2. 按序抽帧读取
➡️
🔍 3. 提取单帧视觉特征
➡️
⏱️ 4. 分析跨帧时间变化
➡️
🧠 5. 识别动作与事件
💡 进阶知识 1:什么是光流(Optical Flow)?

光流用来描述相邻两帧画面之间像素图案的表观运动方向与快慢,就像给画面里的每个运动像素画上小箭头,能帮模型快速捕捉哪里在动、往哪边动。

💡 进阶知识 2:为什么视频模型比单张图片模型更费算力?

一张图片只有二维空间信息,而一秒钟视频就可能包含 24 到 60 张图片!为了高效处理海量数据,工程师常采用关键帧抽样、特征压缩或分段时序建模等技术。

💡 进阶知识 3:“识别出动作”等于“理解背后的原因”吗?

不等于!模型也许能识别出画面里“有人在奔跑”,但仅凭几秒画面,它并不知道这人是在赶公交车、在比赛跑步,还是在躲雨。推断原因需要更完整的上下文与客观证据。

08

第八章:知识闯关——6 道题挑战“视频探索家”徽章

完成下面 6 道单选题,检验你对视频帧率、时序变化与安全核查的掌握!

1. 视频中的“一帧(Frame)”指的是什么?

2. 视频参数里的 FPS(Frames Per Second)表示什么意思?

3. 为什么 AI 识别“把球放进盒子”还是“把球拿出盒子”必须考虑时间顺序?

4. 视频分析中的“目标跟踪(Object Tracking)”主要完成什么任务?

5. 当视频里的画面动作与听到的声音不一致时,最科学的做法是什么?

6. 当 AI 对一段模糊监控视频中的人物行为给出推测时,我们应该怎样对待?

09

第九章:毕业任务——设计一个“校园视频小助手”

综合运用连续帧变化分析、不确定性处理与同学隐私保护原则。

请设计一个服务校园生活的视频 AI 小助手,回答:① 它要识别什么动作或事件?② 它需要观察连续帧里的什么变化?③ 画面模糊或被遮挡不确定时怎么办?④ 怎样保护同学们的肖像隐私?

✍️ 写下你的设计方案后点击“检查我的设计方案”!
💡 查看参考设计方案示范

🌟 参考方案「校园篮球投篮训练助手」:在参与同学知情同意的前提下,通过连续帧追踪篮球飞行抛物线与起跳屈膝动作变化,给出动作连贯性建议。遇到他人走过遮挡或光线太暗时,诚实提示“画面遮挡,无法评估”,绝不臆测同学意图,且所有视频仅在本地设备即时分析、不公开上传同学正脸影像。

🏆 AI 入门第 16 讲 · 核心知识打卡台

🌱 见习视频观察员

已掌握:0 / 5 个核心知识点(点击下方卡片点亮勋章)

✅ 1. 理解连续帧(Frame)与帧率 FPS 的含义
✅ 2. 明白帧的先后时间顺序直接决定动作语义
✅ 3. 认识跨帧目标跟踪与运动轨迹分析
✅ 4. 学会综合画面与声音并警惕配音剪辑错位
✅ 5. 牢记视频分析须核查上下文并保护肖像隐私
Coding4Kids 专属少儿 AI 零基础互动系列教程 · AI 入门第 16 讲 · 所有互动均为本地教学模拟,不访问摄像头、不上传视频 ✨
← Back to tutorials
Top