专栏 / 0111 篇文章
多模态与视觉
从图像与视频理解,到视觉语言模型和图像生成。
博客以介绍为主,不求甚解:沿着不同专栏的话题,认识一个概念、方法或工具。
博客目录 →从图像与视频理解,到视觉语言模型和图像生成。
理解模型结构、学习方法,以及训练与推理中的工程取舍。
围绕机器人如何感知、行动与预测,串起数据、模型和控制。
记录网站搭建、网络原理,以及日常工具的使用经验。
从集合预测、稀疏注意力、动态锚框和去噪训练,到高精度 DINO 与实时 RT-DETR,梳理 DETR 系列的演进、指标边界与部署选择。
从有损与无损、透明与动画、像素与矢量出发,理解八类常见图片格式的用途,并掌握网页配图、格式转换和压缩的实际方法。
沿着 URL、DNS、TCP/QUIC、TLS、HTTP 与浏览器渲染梳理网页加载,并解释 CDN、流式下载、Range 断点续传和分层故障排查。
梳理 Q-Learning、DQN、PPO、SAC 与 GRPO,分清策略、价值、奖励和参考模型的职责,以及训练时谁更新、部署时保留谁。
从 Chunk-based Masking 出发,理解流式语音识别如何限制未来信息、复用历史缓存,并比较 Conformer、Emformer、U2/U2++ 和 Zipformer 的延迟与精度取舍。