《多媒体信息处理》课程深入讲解多媒体领域的核心技术与发展历程，涵盖文本、音频、图像、动画、图形、视频等多种信息处理方法。通过“7个里程碑”的学习方式，课程清晰地梳理了每个技术的历史节点，帮助学员系统掌握多媒体技术的演变与前沿应用。课程不仅结合理论与实践，提供项目驱动的学习方法，还覆盖了人工智能、生成式多媒体等热点领域，为学员提供了全面、前瞻的学习体验。
Overview
Syllabus
- 多媒体信息处理 第一讲
- 课程介绍
- 多媒体信息处理 第二讲
- 课程学习方法（一）
- 课程学习方法（二）——主动学习
- 课程学习方法（三）——课程项目与理论融合
- 多媒体信息处理 第三讲
- 媒体和多媒体定义（一）——媒体定义和类型
- 媒体和多媒体定义（二）——多媒体与多媒体信息处理
- 多媒体信息处理 第四讲
- 多媒体信息处理7个里程碑（一）——超文本
- 多媒体信息处理7个里程碑（二）——ALTO多媒体操作系统及计算机
- 多媒体信息处理7个里程碑（三）——多媒体电脑AMIGA
- 多媒体信息处理7个里程碑（四）——运动图像压缩MPEG-4标准
- 多媒体信息处理7个里程碑（五）——流媒体和IPod与iTune
- 多媒体信息处理7个里程碑（六）——人工智能与多媒体的融合
- 多媒体信息处理7个里程碑（七）——生成式多媒体
- 多媒体信息处理7个里程碑（八）——生成式视频多媒体之SORA
- 多媒体信息处理发展趋势
- 多媒体信息处理 第五讲
- 文本信息处理的发展历程
- 多媒体信息处理 第六讲
- 文本信息处理 7个里程碑（一）——第一个里程碑词袋模型
- 文本信息处理 7个里程碑（二）——第二个里程碑词频-逆文档频率
- 文本信息处理 7个里程碑（三）——第三个里程碑潜在语义分析
- 文本信息处理 7个里程碑（四）——第三个里程碑潜在语义分析的计算
- 文本信息处理 7个里程碑（五）——第四个里程碑知识图谱
- 文本信息处理 7个里程碑（六）——第五个里程碑词嵌入技术
- 文本信息处理 7个里程碑（七）——第六个里程碑循环神经网络/长短期记忆之循
- 文本信息处理 7个里程碑（八）——第六个里程碑循环神经网络/长短期记忆之长短期记忆网络
- 文本信息处理 7个里程碑（九）——第七个里程碑注意力机制/聊天机器人
- 文本信息处理 7个里程碑（十）——第七个里程碑注意力机制/聊天机器人之Transformer架构
- 文本信息处理 7个里程碑（十一）——第七个里程碑注意力机制/聊天机器人之Transformer的多头注意力以及位置偏移和位置编码
- 多媒体信息处理 第七讲
- 音频语音信息处理的发展历程
- 多媒体信息处理 第八讲
- 音频语音信息处理 7个里程碑（一）——第一个里程碑语音特征分析及梅尔频率倒谱系数中之基本概念
- 音频语音信息处理 7个里程碑（二）——第一个里程碑语音特征分析及梅尔频率倒谱系数中之梅尔频率
- 音频语音信息处理 7个里程碑（三）——第一个里程碑语音特征分析及梅尔频率倒谱系数中之倒谱
- 音频语音信息处理 7个里程碑（四）——第一个里程碑语音特征分析及梅尔频率倒谱系数中之MFCC计算
- 音频语音信息处理 7个里程碑（五）——第二个里程碑语音识别与隐马尔可夫模型
- 音频语音信息处理 7个里程碑（六）——第二个里程碑语音识别与隐马尔可夫模型
- 音频语音信息处理 7个里程碑（七）——第三个里程碑语音合成与基音同步叠加算法PSOLA
- 音频语音信息处理 7个里程碑（八）——第四个里程碑语音压缩及MP3
- 音频语音信息处理 7个里程碑（九）——第五个里程碑说话人识别及高斯混合模型中之说话人识别
- 音频语音信息处理 7个里程碑（十）——第五个里程碑说话人识别及高斯混合模型中之高斯混合模型
- 音频语音信息处理 7个里程碑（十一）——第六个里程碑语音通用深度神经网络
- 音频语音信息处理 7个里程碑（十二）——第七个里程碑语音大模型及Whisper
- 多媒体信息处理 第九讲
- 图像信息处理的发展历程（一）
- 图像信息处理的发展历程（二）
- 图像信息处理的发展历程（三）
- 多媒体信息处理 第十讲
- 图像信息处理7个里程碑（一）——第一个里程碑边缘检测与Canny边缘检测算法
- 图像信息处理7个里程碑（二）——第二个里程碑图像压缩与JPEG算法
- 图像信息处理7个里程碑（三）——第三个里程碑图像去噪及暗原色先验图像去雾
- 图像信息处理7个里程碑（四）——第四个里程碑图像识别与AlexNet
- 图像信息处理7个里程碑（五）——第五个里程碑图像生成与GAN
- 图像信息处理7个里程碑（六）——第六个里程碑图像目标检测与YOLO
- 图像信息处理7个里程碑（七）——第七个里程碑图像分割大模型与SAM
- 多媒体信息处理 第十一讲
- 动画信息处理的发展历程（一）
- 动画信息处理的发展历程（二）
- 多媒体信息处理 第十二讲
- 动画信息处理 7个里程碑（一）——第一个里程碑动画关键帧插值算法
- 动画信息处理 7个里程碑（二）——第二个里程碑运动捕捉算法及光学运动捕捉算法
- 动画信息处理 7个里程碑（三）——第三个里程碑动画路径规划与Dijkstra算法
- 动画信息处理 7个里程碑（四）——第四个里程碑骨骼动画算法与蒙皮算法
- 动画信息处理 7个里程碑（五）——第五个里程碑动画物理模拟算法和布料模拟算法
- 动画信息处理 7个里程碑（六）——第六个里程碑群体动画算法与Flock和boid模型
- 动画信息处理 7个里程碑（七）——第七个里程碑动画生成算法和GANimation算法
- 多媒体信息处理 第十三讲
- 图形信息处理的发展历程
- 多媒体信息处理 第十四讲
- 图形信息处理 7个里程碑（一）——第一个里程碑计算机图形学诞生
- 图形信息处理 7个里程碑（二）——第二个里程碑图形用户界面
- 图形信息处理 7个里程碑（三）——第三个里程碑虚拟现实技术
- 图形信息处理 7个里程碑（四）——第四个里程碑图形处理器
- 图形信息处理 7个里程碑（五）——第五个里程碑增强现实AR技术
- 图形信息处理 7个里程碑（六）——第六个里程碑图形表达及NeRF之图形表达
- 图形信息处理 7个里程碑（七）——第六个里程碑图形表达及NeRF之NeRF
- 图形信息处理 7个里程碑（八）——第七个里程碑图形渲染与3D-GS算法之图形渲染算法
- 图形信息处理 7个里程碑（九）——第七个里程碑图形渲染与3D-GS算法之3D-GS算法
- 多媒体信息处理 第十五讲
- 视频信息处理发展的历程
- 多媒体信息处理 第十六讲
- 视频信息处理 7个里程碑（一）——第一个里程碑模拟视频与PAL制式
- 视频信息处理 7个里程碑（二）——第二个里程碑数字视频与CCIR601
- 视频信息处理 7个里程碑（三）——第三个里程碑数字视频压缩与MPEG-4
- 视频信息处理 7个里程碑（四）——第四个里程碑流媒体与iPod/iTunes
- 视频信息处理 7个里程碑（五）——第五个里程碑互联网视频与Youtube
- 视频信息处理 7个里程碑（六）——第六个里程碑短视频及musical.ly
- 视频信息处理 7个里程碑（七）——第七个里程碑视频生成与SORA
- 期末考试
Taught by
Southern University of Science and Technology
