Digital_Video_Concepts
  • 前言
    • 前言
  • 数字视频简介
    • 数字视频简介
    • 相关概念
    • 视频压缩
    • 权衡分析
    • 新型视频应用
    • 总结
  • 视频压缩技术
    • 数字视频压缩技术
    • 网络限制和压缩
    • 人类视觉系统
      • HVS模型
      • HVS的应用
    • 压缩技术概述
      • 数据结构和概念
      • 色度亚采样
      • 降低冗余
      • 熵编码
    • 压缩技术: 成本-收益分析
      • 变换编码技术
      • 预测编码技术
      • 其他编码技术
      • 率失真理论
    • 总结
  • 视频编码标准
    • 视频编码标准
    • 视频编码的国际标准概述
      • JPEG
      • H.261
      • MPEG-1
      • MPEG-2
      • H.263
      • MPEG-4 (Part 2)
      • AVC
      • HEVC
      • 视频质量的国际标准
    • 其他工业标准概述
      • VC-1
      • VP8
      • VP9
    • 总结
  • 视频质量度量
    • 视频质量指标
    • 压缩损失,伪像,视觉质量
      • 压缩损失:量化噪声
      • 常见的伪影
      • 影响视觉质量的因素
    • 视频质量的评估方法和指标
      • 主观视频质量评估
      • 客观视频质量评估和指标
        • 基于误差灵敏度的方法
        • 峰值信噪比
        • 基于结构相似性的方法
        • 基于信息保真度的方法
        • 时空方法
        • 基于显著性的方法
        • 网络感知方法
        • 基于噪声的质量指标
        • 客观编码效率指标
        • 基于ITU-T标准的客观的质量度量方法
    • 视频质量测量
      • 主观测量
      • 客观测量及其应用
    • 调参
      • 影响视频质量的参数
      • 参数之间的权衡
    • 总结
  • 视频编码性能
    • 视频编码性能
    • CPU速度和限制
    • 提升性能的动机
    • 对性能的考虑
      • 资源利用率最大化
      • 专用资源
      • 调整视频参数
        • 决定编码速度的因素
          • 系统配置
          • 工作负载的性质
          • 编码工具和参数
            • 独立数据单元
            • GOP结构
            • 码率控制
            • 多帧参考
            • 率失真的拉格朗日优化
            • 隔行扫描的帧/场模式
            • 自适应去块滤波器
          • 视频复杂度和格式
          • 基于GPU加速的优化
    • 性能优化方法
      • 算法优化
        • 快速算法
          • 快速变换算法
          • 快速帧内预测算法
          • 快速运动估计算法
          • 快速模式决策算法
          • 快速熵编码算法
        • 并行化方法
          • 数据分区
          • 任务并行化
          • 流水线技术
          • 数据并行化
          • 指令并行化
          • 多线程技术
          • 向量化技术
      • 编译器和代码优化
        • 编译器优化
        • 代码优化
      • 超频
      • 性能瓶颈
    • 性能度量和调整
      • 性能思考
      • 性能指标
      • 性能分析工具
    • 总结
  • 视频应用的耗电量
    • 视频应用的耗电量
    • 功耗及其限制
    • 媒体应用的工作负载
      • 媒体应用用途
    • 面向电量设计
    • 电源管理的思考
      • ACPI和电源管理
      • 操作系统电源管理
        • Linux电源管理
        • Windows电源管理
      • 处理器电源管理
      • Voltage-Frequency曲线
    • 电源优化
      • 架构级别优化
      • 算法级别优化
      • 系统整体级别优化
      • 应用级别优化
    • 电源度量
      • 度量方法论
      • 电源度量的思考
    • 测量电源的工具
      • DC电源测量系统
      • 电源测量的软件工具
    • 总结
  • 低功耗平台上的视频应用的功耗
    • 低功耗平台上的视频应用的功耗
    • 低功耗设备的重要事项
    • 低功耗平台上典型的媒体应用
      • 视频播放
      • 视频录制
      • 视频分发
      • 视频电话(会议)
    • 低功耗系统的状态
      • 简单ACPI模型的缺点
      • 待机状态
      • 低功耗状态的组合
    • 低功耗平台的电源管理
      • 电源管理的专用硬件
      • 显示器电源管理
    • 低功耗平台的思考
      • 软件设计
      • 体系结构的思考
    • 低功耗平台的电量优化
      • 快速执行然后关闭
      • Activity调度
      • 减少唤醒次数
      • 突发模式
      • 完善CPU和GPU的并行化
      • 显存带宽优化
      • 显示功耗优化
      • 存储功耗优化
    • 低功耗的度量
      • 电源的处理器信号
      • 媒体应用的功耗指标
    • 总结
  • 性能,电量以及质量的权衡
    • 性能,电量以及质量的权衡
    • 权衡分析的思考
      • 权衡分析的类型
      • 参数调整的效果
      • 优化策略
    • 权衡性能和功耗
      • Case Study
    • 权衡性能和质量
      • Case Study I
      • Case Study II
    • 权衡功耗和质量
      • Case Study
    • 总结
  • 结语
    • 结语
    • 重点和结论
    • 对未来的思考
Powered by GitBook
On this page
  • 增强的分析工具和指标
  • 改善的性能和质量
  • 新型的应用
  • 从视觉到其他感官

Was this helpful?

  1. 结语

对未来的思考

我希望本书所涵盖的主题能够激发人们的讨论,从而将我们带入视频编码及其相关分析的未来。以下是将来可能会扩展到的一些领域。

增强的分析工具和指标

尽管可以在给定的编码测试的执行过程中查看性能,功耗和质量的详细信息,并了解它们之间的关系,但要确定给定指标为何会增加或减少却并非易事。当比较两个测试的结果时,确定不同编码方案的指标之间的差异尤其困难。看起来,这些差异可能因为编码器方案的不同而导致的。类似地,在同一实验中比较两个指标时,对于为什么指标彼此间会有增加或减少并不总是非常清楚。复杂性源于存在的许多变量,这些变量会对系统或视频编码参数的变化做出不确定的反应,并且相互影响。同样,这些影响对于不同的视频内容,应用程序和使用情况也不尽相同。需要进行研究并认真、花费很长时间来调试,以便能够理解这些复杂的关系。

研究人员正在尝试提出更好的视频指标和分数,尤其是在视觉质量、压缩、性能和功耗方面。分析技术有望适应未来更全面的指标。最终,所有收益将只有一个衡量指标,而视频编码的所有成本也只有一个衡量指标,并且该衡量指标将被普遍接受并用对编解码器进行评估和排名。随着新指标的提出,考虑到视频编码各个方面的增强的基准测试工具也有望实现。

改善的性能和质量

相同压缩量下提高视觉质量的技术将会持续改进。在过去的几十年中,这种趋势从MPEG-2到AVC,从AVC到HEVC非常明显。同样,性能和功耗的优化技术的改进速度甚至比质量改进的速度还要快。与上一代GPU加速视频编码相比,每一代Intel处理器在相同的功耗曲线下都能产生大约30%~200%的性能提升。即使是今天的低功耗处理器,也能够支持十年前梦想中的视频应用。可以认为,经过适当的权衡和优化,尽管平台受到限制,但日常视频应用仍将具有更好的视觉质量。

新型的应用

可穿戴设备在功耗和性能方面提出了独特的挑战,但这些新兴计算平台的新用途每天都在出现。视频是一个开放的研究领域。它包含以下概念:如何确定针对这些用途的视频编码的良好程度,如何量化它们以及使用哪些指标来量化。

无人驾驶汽车和无线电遥控无人机领域的视频编码的能力、用途和要求也在评估和开发之中。随着视频编码在资源受限系统上的处理能力的不断提高,权衡分析和优化将在设计和应用中扮演重要角色。但是,对于这些用途的方法和度量标准仍未定义。

远程医疗也处于起步阶段。高分辨率视频的压缩和通信技术日趋成熟,最终可以完美运用于远程外科手术的手持设备上。在这些情况下,性能,功耗和质量也是需要权衡的因素。

从视觉到其他感官

视觉被认为是人类五种感官中最重要的感官,但是仅依靠视觉并不能完成人类的体验。因此,视频并不是数字多媒体应用的唯一数据类型。通常,音频和视频是一起发展的,触摸和手势也在迅速发展。因此,对其他感官的测量,理解和调整将包括音频,触摸和手势。这些基于感觉的数据类型之间的关系非常复杂,需要进行深入的分析,详细的研究以及最终的权衡。

这仍然是另一个活跃的研究领域。未来,随着不断解决这些挑战,我们将体验到人类感官的真正的、全部的潜能。

Previous重点和结论

Last updated 5 years ago

Was this helpful?