CN1681325A - 视频尺度转换及从mpeg－2到mpeg－4的编码转换 - Google Patents

视频尺度转换及从mpeg－2到mpeg－4的编码转换 Download PDF

Info

Publication number
CN1681325A
CN1681325A CNA2005100053550A CN200510005355A CN1681325A CN 1681325 A CN1681325 A CN 1681325A CN A2005100053550 A CNA2005100053550 A CN A2005100053550A CN 200510005355 A CN200510005355 A CN 200510005355A CN 1681325 A CN1681325 A CN 1681325A
Authority
CN
China
Prior art keywords
mpeg
sampling
matrix
video
dct
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2005100053550A
Other languages
English (en)
Other versions
CN100380978C (zh
Inventor
K·帕努索蓬
陈学敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google Technology Holdings LLC
Original Assignee
General Instrument Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by General Instrument Corp filed Critical General Instrument Corp
Publication of CN1681325A publication Critical patent/CN1681325A/zh
Application granted granted Critical
Publication of CN100380978C publication Critical patent/CN100380978C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/112—Selection of coding mode or of prediction mode according to a given display mode, e.g. for interlaced or progressive display mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H04N19/198—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters including smoothing of a sequence of encoding parameters, e.g. by averaging, by choice of the maximum, minimum or median value
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23608—Remultiplexing multiplex streams, e.g. involving modifying time stamps or remapping the packet identifiers

Abstract

一种编码转换器结构，其具有最低可能的复杂度及较小误差，例如可用来将MPEG－2比特流转换成MPEG－4比特流。该编码转换器可从一输入比特流读取标头信息，并且以新格式提供输出比特流的一个相应标头。在一具体实施例中(图3)，具有低复杂度的MPEG－2到MPEG－4编码转换器(具无效B帧)可避免需要运动补偿处理过程。在另一具体实施例中(图4)，提供一种减少漂移误差(具致能B帧)的编码转换器结构。在另一具体实施例中(图5)，例如，提供一尺度编码转换器(B帧有效)以便将使用MPEG－2MPML编码的ITU－R601隔行扫描视频编码转换成一简单轮廓的MPEG－4比特流，该MPEG－4比特流中包含SIF逐行扫描视频，适用于流视频应用。对于场模式DCT块的空间缩小化，可结合垂直的和水平的缩小化技术，使用稀疏矩阵来减少计算量。

Description

视频尺度转换及从MPEG-2到MPEG-4的编码转换
本申请是基于申请日为2001年5月25日、申请号为01810849.0、发明名称为“视频尺度转换及从MPEG-2到MPEG-4的编码转换”的分案申请
技术领域
本发明涉及多媒体数据压缩，尤其涉及一种视频编码转换器，以允许通用的MPEG-4解码器将MPEG-2比特流解码。还提供了时间与空间尺度变换(缩小化)。
背景技术
本文采用以下列缩写字与术语：
CBP-编码块图案
DCT-离散余弦变换
DTV-数字电视
DVD-数字视频光盘
HDTV-高清晰度电视
FLC-固定长度编码
IP-因特网协议
MB-宏块
ME-运动估计
ML-主要级别
MP-主轮廓
MPS-MPEG-2节目流
MTS-MPEG-2传输流
MV-运动向量
QP-量化参数
PMV-预测运动向量
RTP-实时传输协议(RFC 1889)
SDTV-标准清晰度电视
SIF-标准中间格式
SVCD-超级视频压缩光盘
VLC-可变长度编码
VLD-可变长度解码
VOP-视频对象平面
多媒体编码标准MPEG-4可提供多种功能，以支持包括因特网应用在内的各种不同应用，例如流媒体、广告、交互式游戏、虚拟旅行等。预期在因特网最流行的因特网视频流(多点广播)也适用于视觉MPEG-4视觉标准(ISO/IEC 14496-2国际标准最终草案(MPEG-4)“Information Technology-Generic coding of audioVisualobjects，Part 2：visual”，1998年12月)。
MPEG-4视觉可同时处理合成视频与自然视频，而且适用于多个视觉对象类型，例如视频、脸部、与网状物体。MPEG-4视觉亦允许对任意形状物体进行编码，所以多重物体可根据用户的需要而显示或加以处理。而且，MPEG-4视觉从编码与显示结构的观点来看，非常具有灵活性，因为它包括了增强的特性，例如多重辅助(阿尔法)平面、可变帧率及几何变换(子画面)。
然而，预期作为视频流目标的大多数视频材料(例如，电影、运动、音乐会等)可通过MPEG-2系统压缩，并且储存在例如DVD、计算机内存(例如，服务器硬盘)等存储介质中。MPEG-2系统规格(ISO/IEC 13818-2国际标准(MPEG-2)名为“Information Technology-Generic coding of Moving Pictures and Associated Audio：Part2-Video”，1995)定义了两种系统流格式：MPEG-2传输流(MTS)与MPEG-2节目流(MPS)。MTS可调整而用于通信或储存一个或多个MPEG-2压缩数据节目，或用于其他处于相对容易出错环境中的数据。MTS的典型应用是DTV。MPS的调整可用于相对不容易出错环境。这种流行的应用包括DVD和SVCD。
有关这一问题的处理至今仍不能令人满意。例如，MPEG-4节目轮廓(1999年10月由O.Sunchara和Y.Yagasaki发表的名称“The draftof MPEG-4 Studio Profile Amendment Working Draft 2.0，”ISO/IECJTCl/SC29/WG11 MPEG99/5135)已建议一种MPEG-2到MPEG-4编码转换器，但是该处理不能应用于另一MPEG-4版本1轮廓，其包括自然视觉轮廓(Simple、Simple Scaleable、Core、Main、N-Bit)、合成视觉轮廓(Scaleable Texture、Simple Face Animation)、及合成/自然混合视觉(Hybrid、Basic Animated Texture)。因为它修改了语法，所以节目轮廓不能应用在MPEG-4版本1的主轮廓，而且解码器处理不能与其余MPEG-4版本1轮廓兼容。
MPEG标准采用二维分级排序来指定几组限定参数。其中的一个维称为“轮廓”系列，它指定了所支持的编码特征。另一维，称为“级别”，指定可适用的图像的分辨率、比特率等等。
对于MPEG-2而言，在主要级别的主轮廓，或MP@ML可支持4:2:0彩色子采样率以及I、P、和B图像。简单轮廓类似于主轮廓，但是没有B图像。主要级别是为ITU-R601视频而定义，而简单级别是为SIF视频而定义的。
同样地，对于MPEG-4而言，简单轮廓包含SIF处理视频(而且没有B-VOP或交织视频)。主轮廓允许B-VOP与交织视频。
因此，想要通过使用MPEG-2视频到MPEG-4视频编码转换及/或MPEG-4视频到MPEG-2视频编码转换而在不同类型终端系统之中实现可相互操作性。不同类型终端系统可包括：
传输交互工作单元(TIU)：通过使用一个本地RTP为基础的系统层(例如一以IP为基础的交互工作)从一个本地MTS(或MPS)系统接收MPEG-2视频及编码转换成MPEG-4视频，并且在打包网络上分配。示例中包括一实时编码器、一连接到因特网的MTS卫星以及具有MPS编码的来源材料的一视频服务器。
接收交互工作单元(RIU)：从一以RTP为基础的网络实时接收MPEG-4视频，然后(如可能)编码转换成MPEG-2视频，并且转送给一本地MTS(或MPS)环境。示例包括一以因特网为基础的视频服务器到以MTS为基础的电缆分布设备。
传输因特网终端系统(TIES)：传输MPEG-2或MPEG-4视频可产生或储存在因特网终端系统本身内，或从以因特网为基础的计算机网络接收。示例中包括一视频服务器。
接收因特网终端系统(RIES)：在以RTP为基础的因特网上接收MPEG-2或MPEG-4视频，供在因特网终端系统使用，或转送给传统计算机网络。示例中包括可检视一连串视频的桌上型个人计算机或工作站。
希望能够确定在MPEG-2与MPEG-4系统之间的相似点与不同点，并且提供可产生一种复杂度较低且误差小的编码转换器结构。
编码转换器结构可用于使用B帧(例如，主轮廓)的系统，也可用于当B帧不使用(简单轮廓)时的一种简化结构中。
应该提供格式(MPEG-2到MPEG-4)及/或尺度编码转换。
而且希望提供从MPEG-2到MPEG-4语法的有效映射，其包括标头的映射。
系统应该包括尺度编码转换，其包括空间与时间编码转换。
系统应该允许在编码转换器的输入比特流或输出比特流上的尺度转换。
尺度编码转换器应该可将使用MPEG-2 MP@ML的ITU-R 601交织视频编码的比特流转换成简单轮廓MPEG-4比特流，其包含例如适用于视频流应用的SIF处理视频。
系统应该提供可适用于视频流应用(例如，少于1Mbps)实际频宽的输出比特流。
本发明可提供具有上述及其他优点的一种系统。
发明内容
本发明有关于格式编码转换(MPEG-2到MPEG-4)与尺度(空间与时间)编码转换。
一种建议的编码转换器中可包括一尺度转换，虽然这些参数可在输入比特流或输出比特流上编码转换。然而，因为编码转换器彼此共享处理组件(例如一比特流读取器)，所以在编码转换器的产品中包括各种编码转换器能够更为有效地减少复杂度。
本发明研究编码转换器的最关键需求，例如，系统的复杂度及处理所产生的损失。
在一实施例中，所建议的编码转换器结构可减少复杂度，因为不需要执行运动补偿。
在一特定实施例中，编码转换器能使用可变的5位QP表示，而且可免除AC/DC预测与非线性DC定标器。
本发明可选择性用于比率控制与改变尺度。
在一种特殊方法中，其用来将以第一视频编码格式提供的预压缩输入比特流进行编码转换，包括下列步骤：恢复该输入比特流的标头信息；提供第二不同视频编码格式的对应标头信息；部分解压缩该输入比特流，以部分提供解压缩的数据；及根据该第二格式的标头信息而将部分解压缩的数据重新压缩，以提供该输出比特流。
在视频数据上执行2:1缩小化的一种方法中，包括下列步骤：通过组合4个N/2×N/2场模式DCT块而从视频数据形成N×N(例如，N＝16)离散余弦变换(DCT)系数的其中至少一输入矩阵；执行该输入矩阵的垂直下采样及解交织，以获得两N/2×N/2帧模式DCT块；从两帧模式DCT块形成一N×N/2输入矩阵；并且对该N×N/2矩阵的水平下采样，以获得一N/2×N/2帧模式DCT块。
较好情况下，垂直与水平下采样可使用相对的稀疏矩阵。特别是，可使用0.5[I8 I8]的一垂直下采样矩阵，其中I8是一8×8恒等矩阵。实质上是垂直像素平均。可使用由奇数“O”与偶数“E”组成的水平下采样矩阵。
给出了相应的装置。
附图说明
图1显示一个MPEG-2视频解码器。
图2显示没有任何可缩放特征的MPEG-4视频解码器。
图3显示根据本发明而描述的从MPEG-2到MPEG-4的一低复杂编码转换器(B帧无效)。
图4显示根据本发明而描述的减少漂移误差(具致能B帧)之一编码转换器结构。
图5显示根据本发明而描述的尺度编码转换器。
图6显示根据本发明而描述的4个场模式DCT块到一帧模式DCT块的下采样。
具体实施方式
本发明有关于格式编码转换(MPEG-2到MPEG-4)与尺度(空间和时间)编码转换。
本发明可提供比特率编码转换，以便以一不同的比特率将一预压缩比特流转换成另一压缩的比特流。比特率编码转换很重要，例如对于视频流应用，因为网络频宽不固定，而且有时视频服务器需要减少比特率以处理网络路由要求。基于级联方式的编码转换器可重复使用来自输入流的MV，并且因而可免除运动估计(ME)，它属于最有效率的比特率编码转换器之一。基于级联方式的编码转换器可对输入的比特流解码，以获得MV，并且形成参考帧。然后可使用一比特率控制机构而将此信息编码，以便以想要的比特率产生一输出比特流。
空间分辨率编码转换对于将来HDTV与SDTV的共存来说是个重要课题。因为因特网频宽大小可能无法适用于广播质量图像，所以该编码转换对于视频流应用是非常有益的。因此，将广播质量比特流下采样成可处理分辨率比特流是人们所希望的。因为它明显减少了系统的复杂度，所以空间分辨率编码转换通常可在压缩(DCT)领域执行。在压缩域的下采样处理中包括对两个参数的处理，即是DCT系数与MV。一种下采样过滤器及其快速算法可建议用来执行DCT系数下采样。MV再采样可在实际的产品中用来找到下采样视频的MV，以避免漂移，其余的运动补偿应该重新转换，以便从输入比特流取代近似DCT系数。
1.高级别比较
结构MPEG-2与MPEG-4可采用类似视频压缩算法。基本上，两标准是采用运动预测，以便在DCT域中利用时间相关性与量化，以便在一帧内使用时间相关性。此部分在高级别上描述MPEC-2与MPEG-4解码器的结构，然后描述在两标准之间的不同。
1.1MPEG-2
图1显示MPEG-2的简化视频解码处理。在解码器100中，编码的视频数据可提供给一可变长度解码功能110，以便提供一维空间数据QFS[n]，其中n是在0-63范围内的系数索引。在逆向扫描功能120中，QFS[n]可转换成由QF[v][u]表示的系数二维空间数组，其中数组索引u和v是在0到7的范围内。反量化功能130可应用适当的反量化算术，以便提供最后重建的频域DCT系数F[v][u]。逆向DCT功能140可产生像素(空间)域值f[y][x]。运动补偿功能150可响应帧存储160，及用以产生解码像素d[y][x]的值f[y][x]，其中y和x是像素域中的笛卡尔坐标。
MPEG-2可在宏块级别上进行运动补偿，在块级别上进行DCT变换，在系数级别上进行行程和无损编码。而且，MPEG-2允许采用三类型的图像，即I-、P-、和B-图像。所允许的运动预测模式(向前、向后、双向)可指定为P-和B-图像。MPEG-2采用交织编码工具，以便更有效地处理交织视频源。
1.2MPEG-4
图2显示没有任何可缩放特征的MPEG-4视频解码处理。
在解码器200上，来自一信道的数据可从解复用210输出。形状数据的编码比特流可连同MPEG-4项video_object_layer_shape(其表示例如目前的图像是否为矩形、仅为二进制或灰度图像)而提供给开关215。如果video_object_layer_shape是等于“00”，那么不需要二进制形状解码。否则，要进行二进制形状解码。
如果执行二进制形状解码，形状解码功能220可接收先前重建的VOP 230(其可储存在存储器)，并且将形状解码的输出提供给运动补偿功能240。运动补偿功能240可接收来自运动解码功能235的输出，其随后可从解复用210接收运动编码比特流。运动补偿功能240亦可接收先前重建的VOP 230，以便将输出提供给VOP重建功能245。
除了来自形状解码功能220的输出之外，VOP重建功能245亦可从结构解码功能250接收数据，接着可从解复用210接受纹理编码流。结构解码功能250包括可变长度解码功能255、逆向扫描功能260、逆向DC与AC预测功能270、反量化功能280、及逆向DCT(IDCT)功能290。
相比MPEG-2，在MPEG-4中可使用几个新工具，以增加特征及相互影响，例如，子画面编码、形状编码、静态纹理编码、可缩放性、与错误弹性。而且，在类似MPEG-2的MPEG-4中的运动补偿与纹理编码工具可被修改，以改善编码工具的编码效率，例如直接模式运动补偿、无限制运动补偿、及高级预测。
特别是，直接模式运动补偿可用于B-VOP。明确地说，它可通过采用I-或P-VOP宏块MV以及将他们定标以取得在B-VOP中宏块的顺向及逆向MV的双向运动补偿。每个宏块只允许一个ΔMV。实际的MV可从Δ向量计算，而且定标的MV可从共同的宏块计算。
无限制运动补偿允许每个宏块有1或4个MV。4个MV模式只可在直接模式的B-VOP中使用。注意，色度宏块的MV是来自它相关亮度宏块的4个MV的平均。此外，无限制运动补偿允许MV指出该参考帧(外部结构从边缘像素填补)。
高级预测为MV与DCT系数规定了预测方法。MV预测器是根据其三个相邻MV的中间值而设定。内部DCT系数的预测遵循内部AC/DC预测程序(Graham规则)。
2.编码转换器结构
图3根据本发明，且具有失效B帧的低复杂度的从MPEG-2到MPEG-4编码转换器。
在MPEG-2与MPEG-4结构之间的类似允许实现低复杂度的(从MPEG-2到MPEG-4)编码转换器。MPEG-2到MPEG-4编码转换器300使用DCT系数与MV来产生MPEG-4比特流，而无需实际执行运动估计处理过程，而不是将MPEG-2比特流整个解码成空间(像素)域级别。不利因素是此结构会造成重建帧的漂移，而且不允许比特率控制。但是，因为在MPEG-2与MPEG-4解码器之间的大部分不同是在无损失编码部分，所以漂移问题很小。
编码转换器300中包含一个级联MPEG-2比特流读取器(解码器)(310-330)以及一个MPEG-4标头与纹理编码器(340-370)，并具有一标头解码功能304、一查找表308、及一通信路径312。编码转换器300可读取一输入MPEG-2比特流，其可在DCT系数与剩余MV上的功能310中执行可变长度解码(VLD)，然后遵循MPEG-2逻辑以找出在帧中每一块的DCT系数及/或MV。
标头解码功能304可解码MEPG-2标头，并且将它们提供给查找表(或类似功能)308，其可使用下列详述的表格以获得相应MPEG-4标头。
通过标头、DCT系数及/或MV的信息，编码转换器300可将此信息编码成MPEG-4格式。注意，参考帧在此结构中不需要。
编码转换器300可从输入比特流读取MPEG-4标头，并且在一输出比特流的固定位置写入相应MPEG-4标头。
在VLD 310处理之后，可将数据提供给逆向扫描功能320、及一反量化功能330。其次，随着经由路径312提供的MPEG-4标头信息，解码的DCT系数数据可在MPEG-4标头及包括一量化功能340的纹理编码器、及用以将量化DCT系数不同编码的AC/DC预测功能350上进行处理。特别是，AC/DC预测处理可通过减去DC系数及AC系数的第一列或第一行而在一个内部MB中产生一剩余DC与ACDCT系数。预测器可适当选取。注意，AC/DC预测功能350不需要MPEG-4标头信息。
随后，一个扫描/游程长度编码功能360及一可变长度编码功能370可提供MPEG-4比特流。
图4显示一种编码转换器结构，它根据本发明，并使能B帧，而将漂移误差最小化。
相同编号的组件于对应的图中是表示类似组件。
为了解决在重建帧中的漂移，及缺乏比特率控制的问题，可采用像编码转换器400那样更为复杂的结构，它是图3中编码转换器300一个扩展。此结构实际可计算纹理/剩余数据的DCT系数，因此需要运动补偿。因为此编码转换器的编码器中包括一解码处理，所以可减少漂移误差。
而且，因为MPEG-4不允许B帧的内部模式，所以编码转换器400可使用B帧将比特流编码转换。编码转换器400可在内部模式中处理B帧(在MPEG-2)中的一个块，当作在中间模式(在MPEC-4)中具有一个零MV的块。因为MV是与PMV相反的预测编码，所以它可以是一个零剩余MV(PMV)或零MV(其可产生一非零MV码)。
特别是，编码转换器400中包括一可变长度解码功能405，其可将MV残留数据提供给MV解码器425，而且可将DCT系数数据提供给逆向扫描功能320。DCT数据可通过反量化功能330及逆向DCT功能420处理，以获得像素域数据。内部编码像素数据可经由路径422而提供给缓冲器，而内部编码像素数据可经由路径424而提供给加法器435。
在路径424上的像素(不同)路径448可从运动补偿功能430(响应MV解码器425)而加入参考像素数据，以便经由路径448将中间编码数据提供给缓冲器450。
对于例如MPEG-4格式的重新编码而言，缓冲器450可将内部像素数据直接输出给DCT功能455，或将内部像素数据输出给减法器445，其中与有关来自运动补偿功能440(响应MV解码器425)输出不同的数据可提供给DCT功能455。
DCT系数从DCT功能455提供给量化功能340，而且然后将量化后的DCT数据提供给AC/DC(DCT系数)预测功能350，其中数据流MB的AC与DC剩余可产生。DCT系数的这些剩余可被熵编码。输出数据可提供给扫描/游程长度编码功能360，而且其输出可提供给该可变长度编码功能370，以获得与MPEG-4兼容的比特流。
量化DCT系数亦可从量化功能340输出给反量化功能495，其输出可提供给逆向DCT功能490，其输出是在加法器485与运动补偿功能440的输出的和。加法器485的输出可提供给缓冲器480，而且随后提供给运动补偿功能440。
标头解码功能304与查找表308及路径312可如图3的讨论而操作，以便在功能340-370上控制MPEG-4格式的重新编码。
3.格式编码转换器的实现
此部分是描述例如上述图3和4及稍后在图5实现的格式编码转换。未明确讨论的实现细节(例如，时间记录与类似使用的系统相关细节)对于本领域中的技术人员来说应该是不言自明的。
在一特别实施例中，本发明的编码转换器可用来将主轮廓、主要级别(MP@ML)MPEG-2比特流转换成主轮廓MPEG-4比特流。假设MPEG-2比特流是在帧图像结构中使用B视频编码法(没有双重主要预测)编码。通常，使用在MPEG-2编码的相同编码模式应该保持。此模式在MPEG-4可能是最适宜的，因此可避免模式决定处理的复杂度。在MPEG-4的透明图案始终是1(在一个VOP中具有与VOP相同大小的一矩形物体)。也就是说，MPEG-4允许通过一非零透明图案所定义的一个任意形状物体。此特征在MPEG-2中并不存在，所以可安全地假设编码转换物体的所有透明图案是1。
3.1MPEG-2比特流读取器
根据本发明的一编码转换器可从MPEG-2比特流获得比特流标头、DCT系数与MV。此信息可与比特流混合在一起。MPEG-2与MPEG-4比特流皆采用由数层所组成的一种等级结构。每层以标头开始，随后是其多个子层。在如表1所示的这种实现中，除了未使用在MPEG-4而在MPEG-2的子层之外，MPEG-2层可直接转换成MPEG-4层。MPEG-4的DC系数与预测MV是在该子层开始的块上重新设定。
然而，一些MPEG-4标头是不同于MPEG-2标头，反之亦然。幸运地，MPEG-2的限制与MPEG-2标头信息足够指定MPEG-4标头。表2至6是列出MPEG-4标头及其有关一MPEG-2标头、或每层的限制。
表1.在MPEG-2与MPEG-4层之间的关系
MPEG-2 MPEG-4
视频序列 视频物体序列(VOS)/视频物体(VO)
序列可缩性扩展 视频物体层(VOL)
图像组(GOP) 视频对象平面组(GOV)
图像 视频对象平面(VOP)
宏块 宏块
表2.MPEG-4标头及其衍生(VOS和VO)
标头 码 批注
Visual_object_sequence_start_code 00001B0 开始一视觉期间
Profile_and_level_indication 00110100 主轮廓/级别4
Visual_object_sequence_end_code 00001B1 终止一视觉期间
Visual_object_start_code 00001B5 开始一视觉对象
Is_Visual_object_identifier 0 没有优先权版本确认需要指定
Visual_object_type 0001 视频ID
Video_object_start_code 0000010X-0000011X 标记一新视频对象
Video_signal_type 取自MPEG-2 对应MPEG-2sequence_display_extension_id
Video_format 与MPEG-2相同 对应MPEG-2sequence_display_extension_id
Video_range 取自MPEG-2 对应MPEG-2sequence_display_extension_id
Colour_description 与MPEG-2相同 对应MPEG-2sequence_display_extension_id
Colour_primaries 与MPEG-2相同 对应MPEG-2colour_description
Transfer_characteristics 与MPEG-2相同 对应MPEG-2colour_description
Matrix_coefficients 与MPEG-2相同 对应MPEG-2colour_description
表3.MPEG-4标头及其衍生(VOL)
标头 码 批注
Video_object_layer_start_code 0000012X 标记一新视频对象层
Random_accessible_vol 0 允许非内部的编码VOP
Video_object_type_identification 00000100 主要对象类型
Is_object_type_identifier 0 没有优先权版本确认需要指定
Aspect_ratio_info 与MPEG-2相同 对应MPEG-2aspect_ratio_information
Par_width 与MPEG-2相同 对应MPEG-2vertical_size
Par_height 与MPEG-2相同 对应MPEG-2horizontal_size
Vol_control_parameters 与MPEG-2相同 对应MPEG-2extension_start_code_identifier(序列扩展)
Chroma_format 与MPEG-2相同 对应MPEG-2chroma_format
Low_delay 与MPEG-2相同 对应MPEG-2low_delay
Vbv_parameters Recomputed 符合MPEG-4VBV规格
Video_object_layer_shape 00 矩形
Vop_time_increment_resolution Recomputed 参考表7
Fixed_vop_rate 1 表示所有VOPs是以固定率编码
Fixed_vop_time_increment Recomputed 参考表7
Video_object_layer_width 与MPEG-2相同 对应display_vertical_size
Video_object_layer_height 与MPEG-2相同 对应display_horizontal_size
Interlaced 与MPEG-2相同 对应progressive_sequence
Obmc_disable 1 无效的OBMC
Sprite_enable 0 表示没有子画面
Not_8_bit 取自MPEG-2 对应MPEG-2intra_dc_precision
Quant_type 1 MPEG量化
Complexity_estimation_disable 1 无效的复杂估计标头
Resync_marker_disable 1 表示没有resync_marker
Data_partitioned 0 无效的数据划分
Reversible_vlc 0 无效的可相反vlc
Scalability 0 表示目前层当作基本层使用
表4.MPEG-4标头及其衍生(VOP)
标头 码 批注
Vop_start_code 000001B6 标记开始一视频对象平面2k71开始
Vop_coding_type 与MPEG-2相同 对应MPEG-2picture_coding_type
Modulo_time_base 再产生 符合MPEG-4规格
Vop_time_increment 再产生 符合MPEG-4规格
Vop_coded 1 表示随后的数据存在于VOP
Vop_rounding_type 0 将rounding_control的值设定成‘0’
Change_conversion_ratio_disable 1 假设所有宏块的conv_ratio是‘1’
Vop_constant_alpha 0 不包括在比特流的vop_constant_
alpha_value
Intra_dc_vlc_thr 0 使用整个VOP的内部DCvlc
Top_field_first 与MPEG-2相同 对应MPEG-2top_field_first
Alternate_vertical_scan_flag 与MPEG-2相同 对应MPEG-2alternate_scan
Vop_quant 取自MPEG-2 对应MPEG-2quantiser_scale_code
Vop_fcode_forward 与MPEG-2相同 参考第4.3节
Vop_fcode_backward 与MPEG-2相同 参考第4.3节
表5.MPEG-4标头及其衍生(宏块与MV)
标头 码 批注
Not_coded 取自MPEG-2 对应MPEG-2macroblock_address_increment
Mcbpc 取自MPEG-2 对应MPEG-2macroblock_type
Ac_pred_flag 0 无效的内部AC预测
Cbpy 取自MPEG-2 参考第4.2节
Dquant 取自MPEG-2 参考第4.2节
Modb 取自MPEG-2 对应macroblock_type
Mb_type 取自MPEG-2 对应macroblock_type
Cbpb 取自MPEG-2 参考第4.2节
Dbquant 取自MPEG-2 参考第4.2节
Horizontal_mv_data 取自MPEG-2 对应MPEG-2motion_code[r][s][0]
Vertical_mv_data 取自MPEG-2 对应MPEG-2motion_code[r][s][1]
Horizontal_mv_residual 取自MPEG-2 对应MPEG-2motion_residual[r][s][0]
Vertical_mv_residual 取自MPEG-2 对应MPEG-2motion_residual[r][s][1]
表6.MPEG-4标头及其衍生(块及交织信息)
标头 码 批注
Dct_do_size_luminance 与MPEG-2相同 对应MPEG-2dct_dc_size_luminance
Dct_dc_differential 与MPEG-2相同 对应dct_dc_differential
Dct_dc_size_chrominance 与MPEG-2相同 对应MPEG-2dct_dc_size_chrominace
DCT_coefficient 取自MPEG-2 参考第4.2节
DCT_type 与MPEG-2相同 对应MPEG-2DCT_type
Field_prediction 与MPEG-2相同 对应MPEG-2frame_motion_type
Forward_top_field_reference 与MPEG-2相同 对应MPEG-2motion_vertical_field_select[0][0]
Forward_bottom_field_reference 与MPEG-2相同 对应MPEG-2motion_vertical_field_select[1][0]
Backward_top_field_reference 与MPEG-2相同 对应MPEG-2motion_vertical_field_select[0][1]
Backward_bottom_field_reference 与MPEG-2相同 对应MPEG-2motion_vertical_field_select[1][1]
表7.MPEG-2的frame_rate_code映射到MPEG-4的
    vop_time_increment_resolution和
     fixed_vop_time_increment。
Frame_rate_code Vop_time_increment_resolution Fixed_vop_time_increment
0001 24,000 1001
0010 24 1
0011 25 1
0100 30,000 1001
0101 30 1
0110 50 1
0111 60,000 1001
1000 60 1
MV数据储存在宏块层。具有多达4个MV可用于每个宏块。而且，一个MV可以是场类型或帧类型，而且具有整个像素或半像素分辨率。MPEG-2MV解码处理过程可用来确定motion_code(VLC)与motion_residual(FLC)以及Δ。结合对MV的组合的预测，Δ可提供场/帧MV。跳越宏块的MV可设定成零。
DCT数据储存在块层。它先从比特流(VLC)解码，使用曲折或交互扫描模式而逆向扫描，然后反量化。内部DC系数可从dct_dc_differential和预测器(预测器可根据MPEG-2规格而重新设定)决定。在跳越宏块中的DCT系数设定成零。
3.2纹理编码
根据本发明的一编码转换器可重复使用DCT系数(有关中间帧)。要采用如下准则：
1.将q_scale_type(线性比例)用于MPEG-2量化中。
2.MPEG量化方法只可(非H.263)在MPEG-4量化中使用，以减少在重建帧MPEG-2与MPEG-4之间的不匹配。
3.MPEG-2QP的差值可决定在MPEG-4的dquant。每当差别值大于±2时，dquant便可设定成±2。dquant是一个2位码，它指定在量化器、quant有关I-和P-VOP的变化。
4.量化矩阵应该随着MPEG-2比特流的矩阵变化而改变。
5.编码转换器在VOL级别上允许一种交替垂直扫描方法(用于交织序列)，从而具有灵活性。
6.内部AC/DC预测(当目前块的QP不同于预测块时便包括定标)应该在一宏块级别上关闭，以减少在AC量化的复杂度与不匹配。
7.可使用intra_dc_vlc_thr获得较高效率，以选取用以编码内部DC系数的适当VLC表(AC/DC)，例如，当作量化参数的一功能(除了当intra_dc_vlc_thr是0或7之外，这些临界值将强迫使用内部DC或AC表，而不管QP)。
8.跳过的宏块编码为not_coded宏块(所有DCT系数是零)。
9.cbpy和cbpc(CBP)根据code_block_pattern_420(CBP_420)设定。注意，在MPEG-4的CBP与一内部宏块MPEG-2的CBP_420之间有微小的非一致性。明确地说，当CBP_420设定时，它表示在该块中至少有一个DCT系数不为零。CBP包含类似的信息，除了它不对应在一个内部宏块(亦因intra_dc_vlc_thr而定)的DC系数之外。因此，当CBP_420在内部宏块(此情况会在I-VOP和P-VOP发生，但是不会在B-VOP发生)为零时，CBP可能会不是零。
在纹理编码中有3个损失来源，它们是QP编码、DC预测、与DC量化的非线性定标器。MPEG-4使用不同编码来将QP编码。MPEG-2在5位的使用上允许所有可能32个QP值。然而，不同值可采用多达±2(以QP值单元)，因此，大于±2的一差值会损失。此损失能通过MPEG-2率控制算法限制在宏块中的QP变动而减少。所有内部宏块可执行适合的DC预测，其可采用不同于先前宏块(MPEG-2DC预测)的预测，从而造成量化的不同DC剩余。因为非线性定标器，所以在MPEG-4中所有内部宏块的DC系数也要以不同于MPEG-2的方式量化。因此，MPEG-2与MPEG-4编码的量化DC系数可能不同于一内部宏块。
3.3MV编码
编码转换器可将MV编码成MPEG-4格式。然而，因为MV编码是无损处理，所以从MPEG-2到MPEG-4的MV编码转换没有误差。下列限制将施加在MPEG-4编码器中：
1.无限制运动补偿模式无效，其表示在帧边界外是没有MV指标。
2.可采用高级预测模式。在MPEG-4比特流中使用了不同的预测器(一中间值)，但用于8×8像素块的MV是相同的。也就是说，高级预测模式允许8×8MV与非线性(中央滤波器)预测器。在我们的格式编码转换器中只采用了一种非线性预测器(我们仍然保持16×16MV)。
3.直接模式是不允许用于MPEG-4比特流，这表示只有有关B-VOP的4个MV类型，亦即，16×16正向与反向向量及16×8正向与反向场向量。
4.每当使用16×8场向量(维持模式)时，便可应用场运动补偿。
5.跳过的宏块可编码为not_coded宏块(具有零MV的运动补偿)。
6.单一f_code允许在MPEG-4使用。因此，在MPEG-2的两方向(垂直、水平)之间的较大f_code可根据f_code(MPEG-4)＝f_code(MPEG-2)-1关系式而转换成在MPEG-4的f_code。
7.因为整个参考帧的纹理是已知的，所以不使用填补处理。
8.每当两个主要算法启动时，可使用场运动补偿。向量(参考场与预测帧场)可保留。场MV可根据以MPEG-2比特流编码的向量[0][0][1:0]而产生。当相同核对的预测使用(例如，顶端场到顶端场、或底部场到底部场)时，两场MV都是向量[0][0][1:0]。当奇数核对的预测使用(例如，顶端场到底部场、或底部场到顶端场)时，顶端场MV可使用向量[2][0][1:0]，而且底部场MV可使用向量[3][0][1:0]。r＝2，3的向量[r][0][0:1]可依下式计算：
(a)Vector[r][0][01＝(vector[0][0][0]×m[parity_ref][parity_pred]//2)+dmvector[0]。
(b)Vector[r][0][1](vector[0][0][1]×m[parity_ref][parity_pred]//2)+e[parity_ref][parity_pred]+dmvector[1]。
注意，(m[parity_ref][parity_pred]和e[parity_ref][parity_pred]是分别在MPEG-2规格(ISO/IEC 13818-2)的表7-11和7-12中定义。
而且，“r”系表示MV的顺序，例如，第一、第二、及其他等。r＝0系表示MV的第一组，而且r＝1系表示MV的第二组。双主要预测系使用r＝2和r＝3以识别两额外组的MV。
“//”系表示整数除法四舍五入到近似整数值。
3.4B-VOP的内部MB编码
当编码在MPEG-2比特流(例如，如图4显示)的B帧中的一内部MB进行时，必需要额外转换。对于B-VOP，MPEG-4可用直接模式取代内部模式，从而在B帧中的一内部MB必须在MPEG-4语法中不同编码。此问题有两实际解决方法。
第一个解决方法采用类似图3(整个参考帧没有缓冲器)的MPEG-2到MPEG-4编码转换器的结构。在此MB非常接近它参考MB(它的未压缩版本)的假设下，MC在相同VOP中的执行可不同于先前的MB，而无需使用一MB大小的额外内存补偿剩余结构。内部MB的MV等于偏移它MB距离之先前MB的MV。
第二解决方法采使用类似在图4中所显示的结构。它可保存所有I-及P-VOP的参考帧。注意，MC在此解决方法中必须在所有P-VOP上执行。内部MB的MV是与预测的MV(它3个相邻的中位数)相同，而且MC的执行与所取得的MV所指出的参考MB相反。
4.压缩域的视频缩小化
通常，视频缩小化与尺度编码转换具有相同的意义。下采样系表示使用一个抗混叠(低通)滤波器的子采样，但是子采样与下采样在此可交互使用。
当尺度编码转换的输入与输出是在压缩域时，尺度编码转换便需要密集计算。在压缩域中限制操作(而且，可有效避免解码及编码处理)的视频缩小化处理可大大降低复杂度。然而，在压缩域的缩小化中出现两个新问题，亦即，DCT系数与MV数据的下采样。
最近，在压缩域的视频缩小化算法已得到讨论，但是讨论中并未说明在MPEG-2与MPEG-4之间的整个编码转换，包括场到帧去隔行问题。本发明将解决这个问题。
第4.1和4.2节可将解决方法运用于下采样处理的上述两新问题。根据本发明的建议，尺度编码转换器实施是在图5和6的第6节中描述。
4.1DCT块的子采样
在以帧为基础的视频缩小化中，需要将4个8×8DCT块合并成一个新的8×8DCT块(包括一个场块的具体细节将在稍后描述)。而且，输出块应该是输入块的一个低通版本。此处理可通过将输入矩阵乘以一子采样矩阵(最好使用一低通滤波器)而在空间域中实施。在空间域中乘以子采样矩阵相当于在DCT领域中乘以一矩阵的DCT系数，因为正交变换的分布特性。然而，在一些下采样滤波器的DCT领域中的下采样处理的运算(计算)次数可以是在空间域相对运算的总数。此问题的解决方法是采用稀疏下采样矩阵(例如，一个只有小部分元素为非零值的矩阵，例如，大约30％或更低)。
稀疏下采样矩阵基于在DCT基向量与DCT基向量对称结构之间的正交属性。在R.Dugad和N.Ahuja的“A Fast Scheme ForDownsampling And Upsampling In The DCT Domain，”InternationalConference on Image Processing(ICIP)99中讨论了一个方法，在此仅列出供参考，该方法来自4个处理块的较低4×4DCT系数，将4×4IDCT应用到每个DCT子块，形成一新的8×8像素块，并且应用在一8×8DCT中，以获得一个输出块。因为下采样是固定，所以下采样矩阵可预先计算。通过将8×8DCT矩阵分成左与右半部，下采样矩阵的值大约一半是零，因为在4×4IDCT矩阵的栏与两左与右8×4DCT矩阵的列之间是正交的。这种运算(一维空间)可依下列算术表示：
B = Tb = T b 1 · · · b 2 = T L · · · T R T 4 t B 1 · · · T 4 t B 2 = T L T 4 t B 1 + T R T 4 t B 2
其中b是8×1空间输入向量，B是它相对的8×1DCT向量，b1和b2是子子采样的4×1向量，B1和B2是较低的4×1DCT向量，T是8×8DCT变换矩阵，T4是4×4DCT矩阵，TL和TR是T的左与右半部。上标“t”系表示一矩阵转置。Dugad的算法亦采用以DCT基向量的对称属性，以减少下采样处理的复杂度。因为T的奇数列是非对称的，而T的偶数列是对称的，所以TLT4 t和TRT4 t的大小是相同 ( ( T L T 4 t ( i , j ) = ( - 1 ) i + j T R T 4 t ( i , j ) , 0 ≤ i ≤ 7,0 ≤ j ≤ 3 ) ) . “i”是一矩阵行索引，而且“j”是一矩阵列索引。因此，TLT4 t和TRT4 t可根据相同的组件计算，亦即，一对称部分E(i+j是偶数的索引)、及一非对称部分O(i+j是奇数的索引)(TLT4 t＝E+O及TRT4 t＝E-O)。当下采样处理完成时，此配置便可有效减少2个因子的乘算数值：
B = T L T 4 t B 1 + T R T 4 t B 2 = ( E + O ) B 1 + ( E - O ) B 2 = E ( B 1 + B 2 ) + O ( B 1 - B 2 )
将4个场块转换成一帧块的Dugad方法实施上不简单。此情况(一维空间)中，下采样处理的扩展可如下所示：
B = T ( S T T 4 t B T + S B T 4 t B B )
其中BT和BB是较低的4×1场向量，ST和SB是分别对应它顶端ST及底端SB的一个8×4解交织矩阵DCT值。或者，如果(j＝2i，0≤i≤3)及SB(i，j)＝0，ST的组件ST(i，j)＝1。或者，如果(j＝2i+1，0≤i≤3)及SB(i，j)＝0，SB的组件SB(i，j)＝1。
为此，根据本发明用以下采样及解交织的Dugad算法修改。
因为S和T不是彼此正交，所以缩小化与解交织处理的操作会更复杂，因此，下采样矩阵不是稀疏矩阵。在此仅列出供参考的于1999年8月于IEEE Trans.Circ.and Syst.For Video Technol.，第9册，第696-700页，由C.Yim和M.A.Isnardi发表的名称“An EfficientMethod For DCT_Domain Image Resizing With Mixed Field/Frame-ModeMacroblocks”中建议一个场块下采样的有效方法。一个低通滤波器(其下采样矩阵(S＝0.5[I8 I8])是稀疏的)整合在解交织矩阵中。
I8系表示一8×8恒等矩阵，而且[I8 I8]系表示包含连结成两恒等矩阵的一16×8矩阵。当然，恒等矩阵在对角线全部是1，而其他全是零。
该方法是使用4个8×8IDCT场块开始，然后应用下采样矩阵S，并且执行8×8DCT，以获得输出块。注意，8×8IDCT是使用在此方法，以取代4×4IDCT。此运算是如下式(在一维空间)所示：
D = TS T t 0 0 T t = 1 2 T I 8 · · · I 8 T t 0 0 T t = 1 2 I 8 · · · I 8
4.2MV资料的子采样
ME是整个视频编码处理的瓶颈。因此，可通过使用4个最初MB的MV而估计改变尺度MD的MV，而无需实际执行ME(假设所有MB是以中间模式编码)。注意，假设有一MPEG-2比特流，因为每个MB具有一输入(只有一MPEG-4比特流对于每个块可具有一MV)，所以MV数据的子采样可采用4个MB的MV。最简单解决是将4个MV一起平均，以获得新的MV，但是当这些4个MV是不同时，便会出现不佳的估计。在1999年9月于IEEE Trans.Circ.and ForVideo Technol.，第9册，第929-936页，由B.Shen，I.K.Sethi和B.Vasudev发表名为“Adaptive Motion-Vector Resampling For CompressedVideo Downscaling”的文章中显示一较好结果，其中可通过将更多加权提供给最坏预测MV而获得。对每个MV的一个匹配精确A可通过在该MB的非零AC系数的数量表示。通过使用Shen等人的技术，下采样MB的新MV可依下式计算：
MV ′ = 1 2 Σ i = 1 4 MV i A i Σ i = 1 4 A i
M.R.Hashemi、L.Winger、和S.Panchanathan发表的名为“Compressed Domain Motion Vector Resampling For Downscaling OfMPEG Video，”ICIP 99中建议一种非线性方法，可用来估计改变尺度MB的MV。类似Shen等人的算法，Hashemi的技术采用处理MB的空间运动而估计新的MV。在Hashemi方法中使用了称为最大平均相关性(MAC)的一种启发式测量，以在输出MV的该等4个最初MV中识别出其中一个。通过使用MAC，缩小化MB的新MV可依下列计算：
MV = max Σ i = 1 4 A i ρ d i
其中ρ是空间相关性，并且设定成0.85，而且di是在第i输入MV(MVi)与输出MV之间的欧氏距离。
5.尺度编码转换器的实施
图5系根据本发明而描述的尺度编码转换器。B帧可出现在输入比特流中，但是可通过编码转换器被丢弃，因此不会出现在输出比特流中。
在编码转换器500中，可加入MV定标功能510、DCT定标功能520、及空间定标功能540。开关530和535可协调运作，所以在第一设定中，DCT功能455的输出可导入量化功能340，而且开关535可关闭，以允许空间定标功能540的一输出可输入加法器445。在开关530和535的第二设定中，DCT定标功能520的输出可导入量化功能340，而且开关535可打开。
编码转换器500可将MPEG-2比特流转换成对应较小尺度视频图像的MPEG-4比特流内，例如，从ITU-R 601(720×480)到SIF(352×240)。
若要实现MPEG-4比特流的频宽需求，编码转换器500可在水平与垂直方向(在空间定标功能540)对两视频子采样，并且跳过所有B帧(在时间定标功能545和546)，藉此减少时间分辨率。注意，时间定标功能546可在DCT定标功能520之后选择性提供。在执行缩小化之前的B帧跳越可减少复杂度。
而且，在子采样之前的低通滤波器(可在空间定标功能540)将可改善视频质量。
可略加修改，使本发明扩充，包括其他下采样因子与B-VOPs。明确地说，可实现MV缩小化变化与模式决定。B-VOP的MV缩小化是包括逆向MV的一直接扩展。B-VOP的模式决定能以P-VOP(例如，通过将单向MV转换成双向MV，同样可在一P-VOP将内部MB转换成中间MB)的类似方式处理。
下面，我们讨论有关尺度编码转换器500的6个问题。同样假设输入影像是704×480像素分辨率，而且使用MP@ML MPEG-2编码器编码，而且希望输出是包含SIF处理影像(使用N的一帧率减少)的简单轮廓MPEG-4比特流。然而，本发明可扩展到其他输入与输出格式、及分辨率。
5.1逐行扫描视频MV缩小化处理(亮度)
当所有4个MB以中间模式编码、及使用帧预测时，此问题便会出现。在这些MES的每个MV是在每个方向(水平与垂直)以2缩小，以决定4个块MPEG-4(MPEG-4允许每个8×8块有一MV块)的MV。定标的MV然后可通过使用正常MPEG-4程序而预测性编码(使用一中央滤波器)。
注意，每个MB(包含4个块)必须在MPEG-2与MPEG-4中以相同模式编码。随着视频缩小化，输出MB(4个块)对应4个输入MB。
5.2隔行扫描视频MV下采样(亮度)
当所有4个MB以中间模式编码并使用场预测时，此问题便会存在。需要在每个MB中将两个场MV组合，以符合改变块的一帧MV。建议的编码转换器可根据它相邻的MV而取得新的MV，以取代根据空间运动而设定新的MV。所有8个周围MB的MV可用来找到一预测器(场MV可在MB具场预测的情况而平均)。来自这些8个MV的中间值可变成一预测器，而且从欧氏距离接近的目前MB的场MV在水平方向是以2定标，以变成新的MV。
5.3MV下采样(色度)
当所有4个MB以中间模式编码、及使用帧或场预测(MPEG-4能以相同方式处理有关一色度块的两预测模式)时，此问题便会发生。该处理遵循MPEG-4方法，以便从亮度MV获得一色度MV，亦即，一色度MV是4个对应8×8亮度MV平均的缩小版。
5.4DCT下采样(亮度逐行扫描、色度)
当所有4个亮度MB内部或相互间模式编码、使用帧MD结构、及它们的8个色度块(4个用于Cr，而且4个用于Cb)使用帧或场结构时，此问题便会发生。Dugad的方法可通过在每一方向的2因子而用来缩小化亮度与色度DCT块。
5.5交织DCT下采样(亮度)
此问题会以两方法之中任一个出现。首先，相关MB系使用场预测，其次，它的相关MD系使用帧预测。在任何情况下，希望将4个8×8场DCT块(2个用于顶端场，而且2个用于底部场)缩小成一8×8帧DCT块。第一种情况的解决方法是要使用相同场DCT块，当作MC的选取之一。第二种情况包括解交织，而且建议将上述的Dugad和Yim方法组合。
明确地说，编码转换器可根据Yim算法而在垂直方向(而且同时执行解交织)先将4个场块缩小，以获得两帧块。编码转换器然后可在水平方向将这些两帧块缩小，以便通过使用Dugad算法而获得输出块。
在图6中，4个8×8系数场模式DCT块是在600显示，两个8×8帧模式DCT块是在610显示，而且1个8×8帧模式DCT块是在620显示。
根据本发明的DCT缩小化程序可概述如下：
1.通过如在600的显示将4个场块组合而形成16×16系数输入矩阵。
2.对于垂直缩小化与滤波而言，根据Yim的算法而将一低通(LP)滤波器D应用到输入矩阵的每一列。LP输入矩阵如610的显示目前是16×8像素。
3.从LP矩阵([B1B2])可形成B1和B2 8×8矩阵。
4.根据Dugad的算法执行B1和B2的每一栏的水平缩小化运算，以获得输出矩阵(8×8)。(620)可依下列计算：
B = B 1 ( T L T 4 t ) t + B 2 ( T R T 4 t ) t = ( B 1 + B 2 ) E + ( B 1 - B 2 ) O
其中E和O系表示如上述的偶数与奇数列。
特别是，由如下示的奇数“O”与偶数“E”矩阵组成的一水平下采样矩阵可使用(忽略定标因素)：
E＝[e(0)     0       0       0，
      0      e(1)    0       e(2)，
      0      0       0       0，
      0      e(3)    0       e(4)，
      0      0       e(5)    0，
      0      e(6)    0       e(7)，
      0      0       0       0，
      0      e(8)    0       e(9)].
O＝[  0      0       0       0，
      o(0)   0       o(1)    0，
      0      o(2)    0       0，
      o(3)   0       o(4)    0，
      0      0       0       0，
      o(5)   0       o(6)    0，
      0      0       0       o(7)，
      o(8)   0       o(9)    0].
下列系数可使用：
e(0)＝4              o(0)＝2.56915448
e(1)＝0.831469612    o(1)＝-0.149315668
e(2)＝0.045774654    o(2)＝2
e(3)＝1.582130167    o(3)＝-0.899976223
e(4)＝-0.195090322   o(4)＝1.026559934
e(5)＝2              o(5)＝0.601344887
e(6)＝-0.704885901   o(6)＝1.536355513
e(7)＝0.980785280    o(7)＝2
e(8)＝0.906127446    o(8)＝-0.509795579
e(9)＝1.731445835    o(9)＝-0.750660555.
本质上，一DCT稀疏矩阵的乘积是当作下采样矩阵使用。
该技术通常可扩充用于一N×N块的2:1缩小，其包括4个N/2×N/2系数场模式块。其他缩小比率亦可适用。
5.6特殊情况
当所有4个MB不是以相同模式(不落下在任何一五个先前情况)编码时，特殊情况便会发生。我们始终假设在其他内部MB之中任何内部或跳过MB是在具零MV的中间模式。场MV可根据第5.2节而合并，以获得帧MV，然后应用第5.1节的技术。MC建议决定内部方块的结构，其可通过编码转换器而当作具有一零MV的内部块处理。
6.结论
可以理解，本发明可提供一种编码转换器结构，它具有较小误差且具有最低可能复杂度。此误差会在MPEG-4纹理编码处理(QP编码、DC预测、非线性DC定标器)产生。这些处理过程应该在未来的MPEG-4中移除，以建立一近似无损的编码转换系统。
本发明亦可提供一尺度编码转换器的整个细节，以便将由MPEG-2MP@ML编码的ITU-R 601交织视频编码比特流转换成简单轮廓MPEG-4比特流，其包含适用于一种视频流应用的SIF处理视频。
对于场模式DCT块的空间缩小化而言，建议以一种新的方式中将垂直与水平缩小化技术组合，以使稀疏下采样矩阵可用于垂直与水平方向，藉此减少编码转换器的交换。
而且，对于MV缩小化而言，建议使用来自它8个相邻MV的中间值。因为所预测的MV可与全局的MV使用，所以此建议比4.2节的算法较好。它亦能与只具有两MV的一交织MB，而不是每个ME的4个MV。
虽然本发明已描述各种不同的较佳具体实施例，但可以理解，在本发明所附的权利要求范围内，可作各种不同修订与改编。
图式组件符号说明
100解码器                160帧储存内存
110可变长度解码功能      200解码器
120逆向扫描功能          210解复用器
130反量化功能            215开关
140反离散余弦变换功能    220形状解码功能
150运动补偿功能          230先前重建的视频对象平面
运动解码功能               422路径
240运动补偿功能            424路径
245视频对象平面重建功能    425运动向量解码器
250结构解码功能            430运动补偿功能
255变长度解码功能          435加法器
260逆向扫描功能            440运动补偿功能
270逆向直流与交流预测功能  445减法器
280反量化功能              448路径
290反离散余弦变换功能      450缓冲器
300前至后编码转换器        455离散余弦变换功能
304标头解码功能            480缓冲器
308查找表                  485加法器
310可变长度解码功能        490反离散余弦变换功能
312通信路径                495反量化功能
320逆向扫描功能            500编码转换器
330反量化功能              510运动向量定标功能
340量化功能                520离散余弦变换定标功能
350交流/直流预测功能       530开关
360扫描/游程长度编码功能   535开关
370变长度编码功能          540空间定标功能
400编码转换器              545时间定标功能
405可变长度解码功能        546时间定标功能
420反离散余弦变换功能

Claims (14)

1.一种用以在视频数据上执行2∶1缩小化的方法，其包含下列步骤：
通过组合4个N/2×N/2场模式离散余弦变换块，而从该视频数据形成N×N离散余弦变换系数输入矩阵中的至少一个；
执行该输入矩阵的垂直下采样及解交织，以获得两N/2×N/2帧模式离散余弦变换块；
可由两帧模式离散余弦变换块形成一N×N/2输入矩阵；及
执行该N×N/2矩阵的水平下采样，以获得一N/2×N/2帧模式离散余弦变换块；
2.如权利要求1所述的方法，其中N＝16。
3.如权利要求1所述的方法，其中：
该垂直下采样也可实现该N×N输入矩阵的低通滤波。
4.如权利要求1所述的方法，其中：
该垂直下采样使用一稀疏下采样矩阵。
5.如权利要求4所述的方法，其中：
该稀疏下采样矩阵＝0.5[I8 I8]，其中I8是8×8恒等矩阵。
6.如权利要求1所述的方法，其中：
该水平下采样使用奇数“O”与偶数“E”所组成的一稀疏下采样矩阵。
7.如权利要求6所述的方法，其中：
该偶数矩阵具有下列格式：
E＝[e(0)    0      0      0，
      0        e(1)0      e(2)，
0        0         0       0，
0        e(3)0          e(4)，
0        0         e(5)0，
0        e(6)0          e(7)，
0        0         0       0，
0        e(8)0          e(9)]
其中e(1)至e(9)是非零系数；及
该奇数矩阵具有下列格式：
O＝[0       0       0       0，
        o(0)0       o(1)0，
        0       o(2)0       0，
        o(3)0       o(4)0，
        0       0       0   0，
        o(5)0       o(6)0，
        0       0       0   o(7)，
        o(8)0       o(9)0]
其中o(1)至o(9)是非零系数。
8.一种用以在视频数据上执行2∶1缩小化的装置，其包括：
一种装置，该装置通过组合4个N/2×N/2场模式离散余弦变换块，而从该视频数据形成N×N离散余弦变换系数输入矩阵中的至少一个；
用来执行该输入矩阵的垂直下采样及解交织，以获得两N/2×N/2帧模式离散余弦变换块的装置；
用来可由两帧模式离散余弦变换块形成一N×N/2输入矩阵的装置；及
用来执行该N×N/2矩阵的水平下采样，以获得一N/2×N/2帧模式离散余弦变换块的装置；
9.如权利要求8所述的装置，其中N＝16。
10.如权利要求8所述的装置，其中：执行垂直下采样的装置也可实现该N×N输入矩阵的低通滤波。
11.如权利要求8所述的装置，其中：
该垂直下采样使用一稀疏下采样矩阵。
12.如权利要求11所述的装置，其中：
该稀疏下采样矩阵＝0.5[I8 I8]，其中I8是8×8恒等矩阵。
13.如权利要求8所述的装置，其中：
执行水平下采样的装置使用奇数“O”与偶数“E”所组成的一稀疏下采样矩阵。
14.如权利要求13所述的装置，其中：
该偶数矩阵具有下列格式：
E＝[e(0)    0       0           0，
       0        e(1)0        e(2)，
       0        0       0       0，
       0        e(3)0        e(4)，
       0        0       e(5)0，
       0        e(6)0        e(7)，
       0        0       0       0，
       0        e(8)0        e(9)]
其中e(1)至e(9)是非零系数；及
该奇数矩阵具有下列格式：
O＝[0       0        0        0，
        o(0)0        o(1)0，
        0        o(2)0        0，
        o(3)0        o(4)0，
        0        0       0    0，
        o(5)0        o(6)0，
        0        0       0    o(7)，
        o(8)0       o(9)0]
其中o(1)至o(9)是非零系数。
CNB2005100053550A 2000-06-09 2001-05-25 视频尺度转换及从mpeg-2到mpeg-4的编码转换 Expired - Lifetime CN100380978C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/590,928 US6647061B1 (en) 2000-06-09 2000-06-09 Video size conversion and transcoding from MPEG-2 to MPEG-4
US09/590,928 2000-06-09

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CNB018108490A Division CN1210961C (zh) 2000-06-09 2001-05-25 视频尺度转换及从mpeg－2到mpeg－4的编码转换

Publications (2)

Publication Number Publication Date
CN1681325A true CN1681325A (zh) 2005-10-12
CN100380978C CN100380978C (zh) 2008-04-09

Family

ID=24364310

Family Applications (2)

Application Number Title Priority Date Filing Date
CNB2005100053550A Expired - Lifetime CN100380978C (zh) 2000-06-09 2001-05-25 视频尺度转换及从mpeg-2到mpeg-4的编码转换
CNB018108490A Expired - Lifetime CN1210961C (zh) 2000-06-09 2001-05-25 视频尺度转换及从mpeg－2到mpeg－4的编码转换

Family Applications After (1)

Application Number Title Priority Date Filing Date
CNB018108490A Expired - Lifetime CN1210961C (zh) 2000-06-09 2001-05-25 视频尺度转换及从mpeg－2到mpeg－4的编码转换

Country Status (12)

Country Link
US (2) US6647061B1 (zh)
EP (2) EP1287704B1 (zh)
JP (1) JP2004504739A (zh)
KR (1) KR100563608B1 (zh)
CN (2) CN100380978C (zh)
AT (1) ATE309676T1 (zh)
AU (1) AU2001267023A1 (zh)
CA (1) CA2410573C (zh)
DE (1) DE60114812T2 (zh)
MX (1) MXPA02012169A (zh)
TW (1) TW527837B (zh)
WO (1) WO2001095633A2 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100499816C (zh) * 2007-02-12 2009-06-10 清华大学 一种流式视频像素域转码的方法
CN101945265A (zh) * 2010-08-19 2011-01-12 北京市博汇科技有限公司 一种基于带宽占用率的多节目恒码率ts流复用算法
CN102577130A (zh) * 2009-09-25 2012-07-11 通用仪表公司 从第一mpeg流到第二mpeg流的代码转换器
CN104137546A (zh) * 2011-11-07 2014-11-05 高通股份有限公司 用信号发送用于视频译码的量化矩阵
CN111355963A (zh) * 2015-01-26 2020-06-30 高通股份有限公司 用于视频译码的重叠运动补偿
CN113115037A (zh) * 2021-06-15 2021-07-13 深圳市中鹏教育科技股份有限公司 一种在线教育方法、系统、设备及存储介质

Families Citing this family (247)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6983018B1 (en) * 1998-11-30 2006-01-03 Microsoft Corporation Efficient motion vector coding for video compression
US6647061B1 (en) * 2000-06-09 2003-11-11 General Instrument Corporation Video size conversion and transcoding from MPEG-2 to MPEG-4
JP3916382B2 (ja) * 2000-07-07 2007-05-16 沖電気工業株式会社 動画像受信装置
US20030058942A1 (en) * 2001-06-01 2003-03-27 Christian Hentschel Method of running an algorithm and a scalable programmable processing device
FR2813742A1 (fr) * 2000-09-05 2002-03-08 Koninkl Philips Electronics Nv Methode de conversion de flux binaires
US8290062B1 (en) * 2000-09-27 2012-10-16 Intel Corporation Method and apparatus for manipulating MPEG video
JP2002112267A (ja) * 2000-09-28 2002-04-12 Nec Corp 可変解像度復号処理装置
US6934334B2 (en) * 2000-10-02 2005-08-23 Kabushiki Kaisha Toshiba Method of transcoding encoded video data and apparatus which transcodes encoded video data
KR100396892B1 (ko) * 2000-10-05 2003-09-03 삼성전자주식회사 비디오 ｍｐ3 시스템, 축소 비디오데이터 생성장치와생성방법 및 축소 비디오데이터 복원장치 및 복원방법
JP4622077B2 (ja) * 2000-10-11 2011-02-02 ソニー株式会社 画像処理装置及び画像処理方法
JP4517495B2 (ja) * 2000-11-10 2010-08-04 ソニー株式会社 画像情報変換装置及び画像情報変換方法並びに符号化装置及び符号化方法
JP2002152759A (ja) * 2000-11-10 2002-05-24 Sony Corp 画像情報変換装置および画像情報変換方法
KR100433516B1 (ko) * 2000-12-08 2004-05-31 삼성전자주식회사 트랜스코딩 방법
EP1354481A2 (en) * 2001-01-12 2003-10-22 Koninklijke Philips Electronics N.V. Method and device for scalable video transcoding
EP1231794A1 (en) * 2001-02-09 2002-08-14 STMicroelectronics S.r.l. A process for changing the resolution of MPEG bitstreams, a system and a computer program product therefor
EP1231793A1 (en) * 2001-02-09 2002-08-14 STMicroelectronics S.r.l. A process for changing the syntax, resolution and bitrate of MPEG bitstreams, a system and a computer program product therefor
US20020176507A1 (en) * 2001-03-26 2002-11-28 Mediatek Inc. Method and an apparatus for reordering a decoded picture sequence using virtual picture
US7602847B1 (en) 2001-03-27 2009-10-13 Vixs Systems, Inc. Device and method for compression of a video stream
US8107524B2 (en) 2001-03-30 2012-01-31 Vixs Systems, Inc. Adaptive bandwidth footprint matching for multiple compressed video streams in a fixed bandwidth network
US7155010B2 (en) * 2001-05-04 2006-12-26 Hewlett-Packard Development Company, L.P. Signal format that facilitates easy scalability of encrypted streams
US6898241B2 (en) * 2001-05-11 2005-05-24 Mitsubishi Electric Research Labs, Inc. Video transcoder with up-sampling
US7170932B2 (en) * 2001-05-11 2007-01-30 Mitsubishi Electric Research Laboratories, Inc. Video transcoder with spatial resolution reduction and drift compensation
US7215708B2 (en) * 2001-05-22 2007-05-08 Koninklijke Philips Electronics N.V. Resolution downscaling of video images
WO2002100112A1 (en) * 2001-06-03 2002-12-12 Seelive Ltd. System and method for rapid video compression
US7103102B2 (en) * 2001-06-29 2006-09-05 Equator Technologies, Inc. Bit stream code lookup table for an MPEG-4 code word
US6959348B1 (en) 2001-07-30 2005-10-25 Vixs Systems, Inc. Method and system for accessing data
US7675972B1 (en) 2001-07-30 2010-03-09 Vixs Systems, Inc. System and method for multiple channel video transcoding
US6996702B2 (en) * 2001-07-31 2006-02-07 Wis Technologies, Inc. Processing unit with cross-coupled ALUs/accumulators and input data feedback structure including constant generator and bypass to reduce memory contention
US7219173B2 (en) * 2001-07-31 2007-05-15 Micronas Usa, Inc. System for video processing control and scheduling wherein commands are unaffected by signal interrupts and schedule commands are transmitted at precise time
US7184101B2 (en) * 2001-07-31 2007-02-27 Micronas Usa, Inc. Address generation for video processing
US6970509B2 (en) * 2001-07-31 2005-11-29 Wis Technologies, Inc. Cell array and method of multiresolution motion estimation and compensation
US7035332B2 (en) * 2001-07-31 2006-04-25 Wis Technologies, Inc. DCT/IDCT with minimum multiplication
US7142251B2 (en) * 2001-07-31 2006-11-28 Micronas Usa, Inc. Video input processor in multi-format video compression system
US6981073B2 (en) * 2001-07-31 2005-12-27 Wis Technologies, Inc. Multiple channel data bus control for video processing
US7085320B2 (en) * 2001-07-31 2006-08-01 Wis Technologies, Inc. Multiple format video compression
US20050207663A1 (en) * 2001-07-31 2005-09-22 Weimin Zeng Searching method and system for best matching motion vector
JP4574090B2 (ja) * 2001-09-21 2010-11-04 三菱電機株式会社 動画データ変換装置および動画データ変換プログラム
US6959042B1 (en) * 2001-10-01 2005-10-25 Cisco Technology, Inc. Methods and apparatus for measuring compressed video signals and applications to statistical remultiplexing
JP2003116104A (ja) * 2001-10-02 2003-04-18 Sony Corp 情報処理装置及び情報処理方法
KR100450939B1 (ko) * 2001-10-23 2004-10-02 삼성전자주식회사 이미지 축소를 위한 스케일-다운 기능을 가지는 압축비디오 복호화기 및 방법
US7596127B1 (en) 2001-10-31 2009-09-29 Vixs Systems, Inc. System for allocating data in a communications system and method thereof
US7139330B1 (en) 2001-10-31 2006-11-21 Vixs Systems, Inc. System for signal mixing and method thereof
US7116712B2 (en) * 2001-11-02 2006-10-03 Koninklijke Philips Electronics, N.V. Apparatus and method for parallel multimedia processing
EP1309181A1 (en) * 2001-11-06 2003-05-07 Thomson Licensing S.A. Device, method and system for multimedia content adaption
US7106715B1 (en) 2001-11-16 2006-09-12 Vixs Systems, Inc. System for providing data to multiple devices and method thereof
US7403564B2 (en) 2001-11-21 2008-07-22 Vixs Systems, Inc. System and method for multiple channel video transcoding
US7356079B2 (en) 2001-11-21 2008-04-08 Vixs Systems Inc. Method and system for rate control during video transcoding
US7165180B1 (en) 2001-11-27 2007-01-16 Vixs Systems, Inc. Monolithic semiconductor device for preventing external access to an encryption key
US20050036559A1 (en) * 2001-11-27 2005-02-17 Catherine Lamy Signal processing method and corresponding encoding method and device
US7079190B2 (en) * 2001-12-27 2006-07-18 Zoran Corporation Technique for determining the slope of a field pixel
US7177356B2 (en) * 2002-01-11 2007-02-13 Webtv Networks, Inc. Spatially transcoding a video stream
US7003035B2 (en) 2002-01-25 2006-02-21 Microsoft Corporation Video coding methods and apparatuses
US6917945B2 (en) * 2002-02-04 2005-07-12 Microsoft Corporation Encoding and decoding methods and systems
US7596179B2 (en) * 2002-02-27 2009-09-29 Hewlett-Packard Development Company, L.P. Reducing the resolution of media data
US8284844B2 (en) * 2002-04-01 2012-10-09 Broadcom Corporation Video decoding system supporting multiple standards
US7202907B2 (en) 2002-04-09 2007-04-10 Zoran Corporation 2:2 and 3:2 pull-down detection techniques
US7305034B2 (en) * 2002-04-10 2007-12-04 Microsoft Corporation Rounding control for multi-stage interpolation
US7620109B2 (en) * 2002-04-10 2009-11-17 Microsoft Corporation Sub-pixel interpolation in motion estimation and compensation
JP4193406B2 (ja) * 2002-04-16 2008-12-10 三菱電機株式会社 映像データ変換装置および映像データ変換方法
US7277587B2 (en) * 2002-04-26 2007-10-02 Sharp Laboratories Of America, Inc. System and method for lossless video coding
US7310679B1 (en) 2002-04-29 2007-12-18 Vixs Systems Inc. Method and system for transmitting video content while preventing other transmissions in a contention-based network
US7120253B2 (en) 2002-05-02 2006-10-10 Vixs Systems, Inc. Method and system for protecting video data
KR100491530B1 (ko) 2002-05-03 2005-05-27 엘지전자 주식회사 모션 벡터 결정 방법
US7469012B2 (en) * 2002-05-14 2008-12-23 Broadcom Corporation System and method for transcoding entropy-coded bitstreams
US7305036B2 (en) * 2002-05-14 2007-12-04 Broadcom Corporation System and method for entropy code preprocessing
US20040001546A1 (en) 2002-06-03 2004-01-01 Alexandros Tourapis Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation
JP4275358B2 (ja) * 2002-06-11 2009-06-10 株式会社日立製作所 画像情報変換装置およびビットストリーム変換機ならびに画像情報変換送信方法
JP4346868B2 (ja) * 2002-06-17 2009-10-21 株式会社日立製作所 動画符号化装置、及び動画記録再生装置、及び動画再生装置、及び動画符号化方法ならびに動画記録再生方法
US20040057521A1 (en) * 2002-07-17 2004-03-25 Macchina Pty Ltd. Method and apparatus for transcoding between hybrid video CODEC bitstreams
US8311095B2 (en) * 2002-07-17 2012-11-13 Onmobile Global Limited Method and apparatus for transcoding between hybrid video codec bitstreams
US7154952B2 (en) * 2002-07-19 2006-12-26 Microsoft Corporation Timestamp-independent motion vector prediction for predictive (P) and bidirectionally predictive (B) pictures
US7009655B2 (en) 2002-07-23 2006-03-07 Mediostream, Inc. Method and system for direct recording of video information onto a disk medium
US7379496B2 (en) 2002-09-04 2008-05-27 Microsoft Corporation Multi-resolution video coding and decoding
US7555044B2 (en) * 2002-10-04 2009-06-30 General Instrument Corporation Frequency coefficient scanning paths for coding digital video content
KR100376060B1 (en) * 2002-10-25 2003-03-17 Humax Co Ltd Method and system for re-setting image size using inverse discrete cosine transform
FR2846506B1 (fr) * 2002-10-28 2005-02-11 Philippe Marie Alber Guenebaud Dispositif de trans-compression d'un flux numerique audiovisuel pour l'adapter aux equipements de television existants
US6931061B2 (en) * 2002-11-13 2005-08-16 Sony Corporation Method of real time MPEG-4 texture decoding for a multiprocessor environment
EP1569460B1 (en) 2002-11-25 2013-05-15 Panasonic Corporation Motion compensation method, image encoding method, and image decoding method
CN100428791C (zh) * 2002-11-27 2008-10-22 腾研科技股份有限公司 Mpeg数据格式转换方法及使用该方法的解码系统
JP3893350B2 (ja) * 2002-11-29 2007-03-14 キヤノン株式会社 符号化データ変換装置及びその方法
ES2269603T3 (es) * 2002-12-04 2007-04-01 Irdeto Access B.V. Terminal, sistema de distribucion de datos que comprende dicho terminal y metodo de retransmision de datos digitales.
US7408989B2 (en) 2003-01-16 2008-08-05 Vix5 Systems Inc Method of video encoding using windows and system thereof
EP1599043A4 (en) * 2003-02-04 2011-08-10 Panasonic Corp CODING METHOD AND DEVICE THEREFOR
EP1445958A1 (en) 2003-02-05 2004-08-11 STMicroelectronics S.r.l. Quantization method and system, for instance for video MPEG applications, and computer program product therefor
EP1447976B1 (en) 2003-02-12 2019-06-19 Irdeto B.V. Method of controlling descrambling of a plurality of program transport streams, receiver system and portable secure device
US7133452B1 (en) * 2003-02-24 2006-11-07 Vixs Systems, Inc. Method and system for transcoding video data
US7327784B2 (en) * 2003-02-24 2008-02-05 Vixs Systems, Inc. Method and system for transcoding video data
US7606305B1 (en) * 2003-02-24 2009-10-20 Vixs Systems, Inc. Method and system for transcoding video data
US7130350B1 (en) 2003-02-28 2006-10-31 Vixs Systems, Inc. Method and system for encoding and decoding data in a video stream
US7382937B2 (en) * 2003-03-07 2008-06-03 Hewlett-Packard Development Company, L.P. Method and apparatus for re-constructing high-resolution images
US7142601B2 (en) * 2003-04-14 2006-11-28 Mitsubishi Electric Research Laboratories, Inc. Transcoding compressed videos to reducing resolution videos
US7739105B2 (en) 2003-06-13 2010-06-15 Vixs Systems, Inc. System and method for processing audio frames
US9612965B2 (en) * 2003-06-24 2017-04-04 Hewlett-Packard Development Company, L.P. Method and system for servicing streaming media
US20050013498A1 (en) 2003-07-18 2005-01-20 Microsoft Corporation Coding of motion vector information
US7738554B2 (en) 2003-07-18 2010-06-15 Microsoft Corporation DC coefficient signaling at small quantization step sizes
US10554985B2 (en) 2003-07-18 2020-02-04 Microsoft Technology Licensing, Llc DC coefficient signaling at small quantization step sizes
JP4403737B2 (ja) * 2003-08-12 2010-01-27 株式会社日立製作所 信号処理装置及びこれを用いた撮像装置
US7412100B2 (en) * 2003-09-04 2008-08-12 Qualcomm Incorporated Apparatus and method for sub-sampling images in a transform domain
US7724827B2 (en) 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
US7577200B2 (en) * 2003-09-07 2009-08-18 Microsoft Corporation Extended range variable length coding/decoding of differential motion vector information
US7567617B2 (en) * 2003-09-07 2009-07-28 Microsoft Corporation Predicting motion vectors for fields of forward-predicted interlaced video frames
US7620106B2 (en) * 2003-09-07 2009-11-17 Microsoft Corporation Joint coding and decoding of a reference field selection and differential motion vector information
US8064520B2 (en) 2003-09-07 2011-11-22 Microsoft Corporation Advanced bi-directional predictive coding of interlaced video
US7822123B2 (en) 2004-10-06 2010-10-26 Microsoft Corporation Efficient repeat padding for hybrid video sequence with arbitrary video resolution
US7616692B2 (en) * 2003-09-07 2009-11-10 Microsoft Corporation Hybrid motion vector prediction for interlaced forward-predicted fields
US7623574B2 (en) * 2003-09-07 2009-11-24 Microsoft Corporation Selecting between dominant and non-dominant motion vector predictor polarities
JP2005084321A (ja) * 2003-09-08 2005-03-31 Pioneer Electronic Corp 画像処理装置、その方法、そのプログラム、および、そのプログラムを記録した記録媒体。
US7330509B2 (en) * 2003-09-12 2008-02-12 International Business Machines Corporation Method for video transcoding with adaptive frame rate control
US20050058203A1 (en) * 2003-09-17 2005-03-17 Fernandes Felix C. Transcoders and methods
US7324595B2 (en) * 2003-09-22 2008-01-29 Lsi Logic Corporation Method and/or apparatus for reducing the complexity of non-reference frame encoding using selective reconstruction
US7277101B2 (en) 2003-09-29 2007-10-02 Vixs Systems Inc Method and system for scaling images
US7668396B2 (en) 2003-09-29 2010-02-23 Vixs Systems, Inc. Method and system for noise reduction in an image
JP4470431B2 (ja) * 2003-10-01 2010-06-02 ソニー株式会社 データ処理装置およびその方法
TWI262660B (en) * 2003-11-19 2006-09-21 Inst Information Industry Video transcoder adaptively reducing frame rate
FI115587B (fi) * 2003-12-03 2005-05-31 Nokia Corp Menetelmä ja laitteisto digitaalisen matriisikuvan alaspäin skaalaamiseksi
JP4369857B2 (ja) * 2003-12-19 2009-11-25 パナソニック株式会社 画像符号化装置および画像符号化方法
US7391809B2 (en) * 2003-12-30 2008-06-24 Microsoft Corporation Scalable video transcoding
US8165445B2 (en) * 2004-01-08 2012-04-24 Hewlett-Packard Development Company, L.P. System, method, and computer-readable medium for analyzing an MPEG-formatted file
JP2005214309A (ja) * 2004-01-29 2005-08-11 Nsk Warner Kk フリクションプレート
TWI230547B (en) * 2004-02-04 2005-04-01 Ind Tech Res Inst Low-complexity spatial downscaling video transcoder and method thereof
US7406598B2 (en) 2004-02-17 2008-07-29 Vixs Systems Inc. Method and system for secure content distribution
US7649539B2 (en) 2004-03-10 2010-01-19 Microsoft Corporation Image formats for video capture, processing and display
KR101196429B1 (ko) * 2004-03-12 2012-11-01 삼성전자주식회사 동영상 트랜스코딩 방법 및 그 장치, 이에 사용되는움직임 벡터 보간방법
US7983835B2 (en) 2004-11-03 2011-07-19 Lagassey Paul J Modular intelligent transportation system
US20050232497A1 (en) * 2004-04-15 2005-10-20 Microsoft Corporation High-fidelity transcoding
EP1747677A2 (en) * 2004-05-04 2007-01-31 Qualcomm, Incorporated Method and apparatus to construct bi-directional predicted frames for temporal scalability
ATE401742T1 (de) * 2004-05-14 2008-08-15 Nxp Bv Einrichtung zur erzeugung aufeinanderfolgender einzelbilder aus verschachtelten codierten einzelbildern
KR100463490B1 (ko) * 2004-06-25 2004-12-30 (주) 포인치 통합 포맷을 가지는 동영상 데이터 생성방법
US8442108B2 (en) * 2004-07-12 2013-05-14 Microsoft Corporation Adaptive updates in motion-compensated temporal filtering
US8340177B2 (en) * 2004-07-12 2012-12-25 Microsoft Corporation Embedded base layer codec for 3D sub-band coding
US8374238B2 (en) 2004-07-13 2013-02-12 Microsoft Corporation Spatial scalability in 3D sub-band decoding of SDMCTF-encoded video
US20060012714A1 (en) * 2004-07-16 2006-01-19 Greenforest Consulting, Inc Dual-scaler architecture for reducing video processing requirements
KR100681258B1 (ko) * 2004-10-02 2007-02-09 삼성전자주식회사 트랜스코딩을 위한 움직임벡터 정밀화 기반 출력움직임벡터 추정방법 및 이를 이용한 트랜스코더
US8243820B2 (en) 2004-10-06 2012-08-14 Microsoft Corporation Decoding variable coded resolution video with native range/resolution post-processing operation
US9071847B2 (en) 2004-10-06 2015-06-30 Microsoft Technology Licensing, Llc Variable coding resolution in video codec
US7839933B2 (en) 2004-10-06 2010-11-23 Microsoft Corporation Adaptive vertical macroblock alignment for mixed frame video sequences
CN101057438A (zh) 2004-10-12 2007-10-17 阿瓦雷公司 电信环境中的资源共享
US20060088105A1 (en) * 2004-10-27 2006-04-27 Bo Shen Method and system for generating multiple transcoded outputs based on a single input
US8199825B2 (en) * 2004-12-14 2012-06-12 Hewlett-Packard Development Company, L.P. Reducing the resolution of media data
US8780957B2 (en) * 2005-01-14 2014-07-15 Qualcomm Incorporated Optimal weights for MMSE space-time equalizer of multicode CDMA system
US7421048B2 (en) 2005-01-20 2008-09-02 Vixs Systems, Inc. System and method for multimedia delivery in a wireless environment
JP2006203682A (ja) * 2005-01-21 2006-08-03 Nec Corp 動画像圧縮符号化ビットストリームシンタックス変換装置及び動画像通信システム
US7609766B2 (en) 2005-02-08 2009-10-27 Vixs Systems, Inc. System of intra-picture complexity preprocessing
US20090213926A1 (en) * 2005-02-24 2009-08-27 Lg Electronics Inc. Method for Up-Sampling/Down-Sampling Data of a Video Block
RU2402885C2 (ru) * 2005-03-10 2010-10-27 Квэлкомм Инкорпорейтед Классификация контента для обработки мультимедийных данных
US8949920B2 (en) 2005-03-17 2015-02-03 Vixs Systems Inc. System and method for storage device emulation in a multimedia processing system
US7400869B2 (en) 2005-03-22 2008-07-15 Vixs Systems Inc. System and method for adaptive DC offset compensation in wireless transmissions
US8391368B2 (en) * 2005-04-08 2013-03-05 Sri International Macro-block based mixed resolution video compression system
JP2008539614A (ja) * 2005-04-21 2008-11-13 クォーティックス インク 統合無線マルチメディア送信システム
CN100336400C (zh) * 2005-04-28 2007-09-05 天津大学 色差信号飘移误差校正型异类标准转换编码器
US20070121728A1 (en) * 2005-05-12 2007-05-31 Kylintv, Inc. Codec for IPTV
US8145528B2 (en) 2005-05-23 2012-03-27 Open Text S.A. Movie advertising placement optimization based on behavior and content analysis
US8141111B2 (en) 2005-05-23 2012-03-20 Open Text S.A. Movie advertising playback techniques
EP3002724A3 (en) * 2005-05-23 2016-07-20 Open Text S.A. Distributed scalable media environment
US9648281B2 (en) * 2005-05-23 2017-05-09 Open Text Sa Ulc System and method for movie segment bookmarking and sharing
TW200701764A (en) * 2005-06-22 2007-01-01 Lite On Technology Corp Apparatus for multimedia format conversion
US8155194B2 (en) * 2005-08-05 2012-04-10 Lsi Corporation Method and apparatus for MPEG-2 to H.264 video transcoding
US8447121B2 (en) * 2005-09-14 2013-05-21 Microsoft Corporation Efficient integrated digital video transcoding
US20070058713A1 (en) * 2005-09-14 2007-03-15 Microsoft Corporation Arbitrary resolution change downsizing decoder
US9113147B2 (en) * 2005-09-27 2015-08-18 Qualcomm Incorporated Scalability techniques based on content information
US7707485B2 (en) 2005-09-28 2010-04-27 Vixs Systems, Inc. System and method for dynamic transrating based on content
US8654848B2 (en) 2005-10-17 2014-02-18 Qualcomm Incorporated Method and apparatus for shot detection in video streaming
US8948260B2 (en) * 2005-10-17 2015-02-03 Qualcomm Incorporated Adaptive GOP structure in video streaming
US20070171280A1 (en) * 2005-10-24 2007-07-26 Qualcomm Incorporated Inverse telecine algorithm based on state machine
FR2894422A1 (fr) * 2005-12-01 2007-06-08 Thomson Licensing Sas Procede de prediction de donnees mouvement et de texture
FR2894424A1 (fr) * 2005-12-05 2007-06-08 Thomson Licensing Sas Procede de prediction de donnees mouvement et de texture
FR2894423A1 (fr) * 2005-12-05 2007-06-08 Thomson Licensing Sas Procede de prediction de donnees mouvement et de texture
US7956930B2 (en) * 2006-01-06 2011-06-07 Microsoft Corporation Resampling and picture resizing operations for multi-resolution video coding and decoding
US8401091B2 (en) * 2006-01-09 2013-03-19 Lg Electronics Inc. Inter-layer prediction method for video signal
US7549000B2 (en) * 2006-01-09 2009-06-16 Realtek Semiconductor Corp. Apparatus and method for generating bitstream of S/PDIF data in HDMI
US8131995B2 (en) 2006-01-24 2012-03-06 Vixs Systems, Inc. Processing feature revocation and reinvocation
CN101009838B (zh) * 2006-01-25 2010-06-16 松下电器产业株式会社 可抑制漂移误差的比特率转换编码方法,转换编码器,及集成电路
CN101395919A (zh) * 2006-03-07 2009-03-25 日本电气株式会社 运动图像分发系统和转换设备
US8599841B1 (en) 2006-03-28 2013-12-03 Nvidia Corporation Multi-format bitstream decoding engine
US8320450B2 (en) * 2006-03-29 2012-11-27 Vidyo, Inc. System and method for transcoding between scalable and non-scalable video codecs
US8593469B2 (en) * 2006-03-29 2013-11-26 Nvidia Corporation Method and circuit for efficient caching of reference video data
US9131164B2 (en) * 2006-04-04 2015-09-08 Qualcomm Incorporated Preprocessor method and apparatus
EP3866416B1 (en) 2006-04-12 2023-08-23 TQ Delta, LLC Method and apparatus for packet retransmission and memory sharing
US20080201751A1 (en) * 2006-04-18 2008-08-21 Sherjil Ahmed Wireless Media Transmission Systems and Methods
WO2007124491A2 (en) * 2006-04-21 2007-11-01 Dilithium Networks Pty Ltd. Method and system for video encoding and transcoding
US8880571B2 (en) 2006-05-05 2014-11-04 Microsoft Corporation High dynamic range data format conversions for digital media
US7884742B2 (en) * 2006-06-08 2011-02-08 Nvidia Corporation System and method for efficient compression of digital data
CN101094407B (zh) * 2006-06-23 2011-09-28 美国博通公司 视频电路、视频系统及其视频处理方法
US20080049836A1 (en) * 2006-08-23 2008-02-28 C2 Microsystems Method and System for a Fast Video Transcoder
US8700387B2 (en) * 2006-09-14 2014-04-15 Nvidia Corporation Method and system for efficient transcoding of audio data
CN100544439C (zh) * 2006-11-21 2009-09-23 华为技术有限公司 一种支持多种编码格式的媒体数据的方法及系统
KR100896978B1 (ko) * 2006-11-27 2009-05-14 한양대학교 산학협력단 Ｍｐｅｇ-2에서 ｈ.264/ａｖｃ로의 고속 트랜스코딩에서 움직임 벡터 예측 방법과 모드 예측 방법 및 기록매체
US20080137741A1 (en) * 2006-12-05 2008-06-12 Hari Kalva Video transcoding
WO2008091687A2 (en) * 2007-01-25 2008-07-31 Florida Atlantic University Reduced resolution video transcoding with greatly reduced complexity
US20080205515A1 (en) * 2007-01-25 2008-08-28 Florida Atlantic University Video encoding with reduced complexity
US8054886B2 (en) 2007-02-21 2011-11-08 Microsoft Corporation Signaling and use of chroma sample positioning information
US20080205389A1 (en) * 2007-02-26 2008-08-28 Microsoft Corporation Selection of transrate and transcode processes by host computer
US8107571B2 (en) 2007-03-20 2012-01-31 Microsoft Corporation Parameterized filters and signaling techniques
KR101403341B1 (ko) * 2007-03-28 2014-06-09 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
US20080267295A1 (en) * 2007-04-26 2008-10-30 Chih-Ta Star Sung Video decompression, de-interlacing and frame rate conversion with frame buffer compression
US8254455B2 (en) 2007-06-30 2012-08-28 Microsoft Corporation Computing collocated macroblock information for direct mode macroblocks
WO2009034489A2 (en) * 2007-09-10 2009-03-19 Nxp B.V. Method and apparatus for motion estimation in video image data
US8098732B2 (en) * 2007-10-10 2012-01-17 Sony Corporation System for and method of transcoding video sequences from a first format to a second format
US8457958B2 (en) * 2007-11-09 2013-06-04 Microsoft Corporation Audio transcoder using encoder-generated side information to transcode to target bit-rate
US20100296572A1 (en) * 2007-12-11 2010-11-25 Kumar Ramaswamy Methods and systems for transcoding within the distributiion chain
US8208745B2 (en) * 2008-01-31 2012-06-26 Analog Devices, Inc. Spatial domain video enhancement/scaling system and method
US8953673B2 (en) 2008-02-29 2015-02-10 Microsoft Corporation Scalable video coding and decoding with sample bit depth and chroma high-pass residual layers
US8711948B2 (en) * 2008-03-21 2014-04-29 Microsoft Corporation Motion-compensated prediction of inter-layer residuals
US9571856B2 (en) 2008-08-25 2017-02-14 Microsoft Technology Licensing, Llc Conversion operations in scalable video encoding and decoding
US8631454B2 (en) * 2008-09-05 2014-01-14 Motorola Mobility Llc Method and apparatus for constrained distribution of television program material
US8213503B2 (en) * 2008-09-05 2012-07-03 Microsoft Corporation Skip modes for inter-layer residual video coding and decoding
US8311115B2 (en) 2009-01-29 2012-11-13 Microsoft Corporation Video encoding using previously calculated motion information
US8396114B2 (en) 2009-01-29 2013-03-12 Microsoft Corporation Multiple bit rate video encoding using variable bit rate and dynamic resolution for adaptive video streaming
US8189666B2 (en) 2009-02-02 2012-05-29 Microsoft Corporation Local picture identifier and computation of co-located information
CN102165778A (zh) * 2009-02-10 2011-08-24 松下电器产业株式会社 图像处理装置、图像处理方法、程序及集成电路
JP5321895B2 (ja) * 2009-05-27 2013-10-23 ソニー株式会社 情報処理装置および方法
US8270473B2 (en) 2009-06-12 2012-09-18 Microsoft Corporation Motion based dynamic resolution multiple bit rate video encoding
US20110070286A1 (en) * 2009-09-24 2011-03-24 Andreas Hugerth Process for the manufacture of nicotine-comprising chewing gum and nicotine-comprising chewing gum manufactured according to said process
US9289257B2 (en) * 2009-11-13 2016-03-22 Minerva Surgical, Inc. Methods and systems for endometrial ablation utilizing radio frequency
US8290038B1 (en) * 2009-11-30 2012-10-16 Google Inc. Video coding complexity estimation
US20110158310A1 (en) * 2009-12-30 2011-06-30 Nvidia Corporation Decoding data using lookup tables
US8885714B2 (en) * 2010-01-14 2014-11-11 Texas Instruments Incorporated Method and system for intracoding in video encoding
ES2703005T3 (es) 2010-05-07 2019-03-06 Nippon Telegraph & Telephone Método de control de codificación de imágenes animadas, aparato de codificación de imágenes animadas y programa de codificación de imágenes animadas
CN102870415B (zh) * 2010-05-12 2015-08-26 日本电信电话株式会社 活动图像编码控制方法、活动图像编码装置以及活动图像编码程序
US8744015B2 (en) * 2010-06-04 2014-06-03 Blackberry Limited Message decoding for discretized signal transmissions
US8705616B2 (en) 2010-06-11 2014-04-22 Microsoft Corporation Parallel multiple bitrate video encoding to reduce latency and dependences between groups of pictures
US9014471B2 (en) * 2010-09-17 2015-04-21 I.C.V.T. Ltd. Method of classifying a chroma downsampling error
EP2617192A4 (en) * 2010-09-17 2014-03-19 Icvt Ltd METHOD FOR CLASSIFYING A CHROMA DOWNSAMPLING ERROR
US8873884B2 (en) * 2010-10-06 2014-10-28 International Business Machines Corporation Method and system for resizing an image
US8472754B1 (en) * 2010-11-11 2013-06-25 Amazon Technologies, Inc. Image artifact prevention
JP5395307B2 (ja) 2011-03-09 2014-01-22 パナソニック株式会社 動画像復号化装置および動画像復号化方法
KR101880325B1 (ko) 2011-03-09 2018-07-19 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카 동화상 부호화 장치
CN103765899B (zh) 2011-06-15 2018-03-06 韩国电子通信研究院 用于编码和解码可伸缩视频的方法以及使用其的设备
US9591318B2 (en) 2011-09-16 2017-03-07 Microsoft Technology Licensing, Llc Multi-layer encoding and decoding
US11089343B2 (en) 2012-01-11 2021-08-10 Microsoft Technology Licensing, Llc Capability advertisement, configuration and control for video coding and decoding
EP2813078A4 (en) 2012-02-06 2015-09-30 Nokia Technologies Oy ENCODING METHOD AND APPARATUS
TWI481488B (zh) * 2012-04-09 2015-04-21 Intelligence Develop Engineering Aid Ltd 機械手臂操控動作重現方法
GB2501535A (en) * 2012-04-26 2013-10-30 Sony Corp Chrominance Processing in High Efficiency Video Codecs
WO2013173292A1 (en) 2012-05-14 2013-11-21 Motorola Mobility Llc Scalable video coding with enhanced base layer
US9426498B2 (en) 2012-07-10 2016-08-23 Broadcom Corporation Real-time encoding system of multiple spatially scaled video based on shared video coding information
US9307235B2 (en) * 2012-12-03 2016-04-05 Vixs Systems, Inc. Video encoding system with adaptive hierarchical B-frames and method for use therewith
US9743097B2 (en) * 2013-03-01 2017-08-22 Qualcomm Incorporated Spatial motion vector scaling for scalable video coding
US9998750B2 (en) * 2013-03-15 2018-06-12 Cisco Technology, Inc. Systems and methods for guided conversion of video from a first to a second compression format
TWI512675B (zh) * 2013-10-02 2015-12-11 Mstar Semiconductor Inc 影像處理裝置與方法
CN104581175B (zh) * 2013-10-23 2018-01-12 晨星半导体股份有限公司 影像处理装置与方法
US9749642B2 (en) 2014-01-08 2017-08-29 Microsoft Technology Licensing, Llc Selection of motion vector precision
US9774881B2 (en) 2014-01-08 2017-09-26 Microsoft Technology Licensing, Llc Representing motion vectors in an encoded bitstream
US9942560B2 (en) 2014-01-08 2018-04-10 Microsoft Technology Licensing, Llc Encoding screen capture data
FR3016764B1 (fr) * 2014-01-17 2016-02-26 Sagemcom Broadband Sas Procede et dispositif de transcodage de donnees video de h.264 vers h.265
US20160041993A1 (en) * 2014-08-05 2016-02-11 Time Warner Cable Enterprises Llc Apparatus and methods for lightweight transcoding
US10841601B2 (en) * 2015-06-23 2020-11-17 Telefonaktiebolaget Lm Ericsson (Publ) Methods and arrangements for transcoding
CA3107531A1 (en) * 2018-07-31 2020-02-06 Mediatek, Inc. Method and apparatus of merge with motion vector difference for video coding

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5887115A (en) 1993-01-13 1999-03-23 Hitachi America, Ltd. Method and apparatus for implementing a video tape recorder for recording digital video signals having either a fixed or variable data transmission rate
US5477397A (en) 1993-02-23 1995-12-19 Matsushita Electric Corporation Of America Digital high definition television receiver with features that facilitate trick-play modes on a digital VCR
KR950014858B1 (ko) 1993-06-04 1995-12-16 대우전자주식회사 디지탈 영상 기록장치
US5617142A (en) 1994-11-08 1997-04-01 General Instrument Corporation Of Delaware Method and apparatus for changing the compression level of a compressed digital signal
US5619733A (en) 1994-11-10 1997-04-08 International Business Machines Corporation Method and apparatus for synchronizing streaming and non-streaming multimedia devices by controlling the play speed of the non-streaming device in response to a synchronization signal
US5832120A (en) * 1995-12-22 1998-11-03 Cirrus Logic, Inc. Universal MPEG decoder with scalable picture size
US5737019A (en) 1996-01-29 1998-04-07 Matsushita Electric Corporation Of America Method and apparatus for changing resolution by direct DCT mapping
US5708732A (en) 1996-03-06 1998-01-13 Hewlett-Packard Company Fast DCT domain downsampling and inverse motion compensation
DE69730419T2 (de) 1996-04-12 2005-09-08 Imedia Corp., San Francisco System zur Verteilung komprimierter Videosignale, mit statistischem Multiplexer mit Transkodierern
US5933500A (en) 1996-05-31 1999-08-03 Thomson Consumer Electronics, Inc. Adaptive decoding system for processing encrypted and non-encrypted broadcast, cable or satellite video data
US6535530B1 (en) * 1997-07-23 2003-03-18 Matsushita Electric Industrial Co., Ltd. Apparatus and method for demultiplexing multiplexed data
US6445828B1 (en) * 1998-09-28 2002-09-03 Thomson Licensing S.A. Transform domain resizing of an image compressed with field encoded blocks
US6434197B1 (en) 1999-01-07 2002-08-13 General Instrument Corporation Multi-functional transcoder for compressed bit streams
US6625211B1 (en) 1999-02-25 2003-09-23 Matsushita Electric Industrial Co., Ltd. Method and apparatus for transforming moving picture coding system
US6275536B1 (en) 1999-06-23 2001-08-14 General Instrument Corporation Implementation architectures of a multi-channel MPEG video transcoder using multiple programmable processors
US6441754B1 (en) 1999-08-17 2002-08-27 General Instrument Corporation Apparatus and methods for transcoder-based adaptive quantization
JP2001204026A (ja) * 2000-01-21 2001-07-27 Sony Corp 画像情報変換装置及び方法
US6647061B1 (en) * 2000-06-09 2003-11-11 General Instrument Corporation Video size conversion and transcoding from MPEG-2 to MPEG-4

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100499816C (zh) * 2007-02-12 2009-06-10 清华大学 一种流式视频像素域转码的方法
CN102577130A (zh) * 2009-09-25 2012-07-11 通用仪表公司 从第一mpeg流到第二mpeg流的代码转换器
CN102577130B (zh) * 2009-09-25 2015-05-20 通用仪表公司 从第一mpeg流到第二mpeg流的代码转换器
CN101945265A (zh) * 2010-08-19 2011-01-12 北京市博汇科技有限公司 一种基于带宽占用率的多节目恒码率ts流复用算法
CN101945265B (zh) * 2010-08-19 2013-05-08 北京市博汇科技有限公司 一种基于带宽占用率的多节目恒码率ts流复用方法
CN104137546A (zh) * 2011-11-07 2014-11-05 高通股份有限公司 用信号发送用于视频译码的量化矩阵
CN104137546B (zh) * 2011-11-07 2018-01-26 高通股份有限公司 用信号发送用于视频译码的量化矩阵
US10277915B2 (en) 2011-11-07 2019-04-30 Qualcomm Incorporated Signaling quantization matrices for video coding
CN111355963A (zh) * 2015-01-26 2020-06-30 高通股份有限公司 用于视频译码的重叠运动补偿
CN113115037A (zh) * 2021-06-15 2021-07-13 深圳市中鹏教育科技股份有限公司 一种在线教育方法、系统、设备及存储介质

Also Published As

Publication number Publication date
AU2001267023A1 (en) 2001-12-17
ATE309676T1 (de) 2005-11-15
WO2001095633A2 (en) 2001-12-13
KR20030014697A (ko) 2003-02-19
CN100380978C (zh) 2008-04-09
DE60114812D1 (de) 2005-12-15
US20040013195A1 (en) 2004-01-22
WO2001095633A3 (en) 2002-08-22
EP1401209A2 (en) 2004-03-24
CA2410573C (en) 2007-01-30
CN1435056A (zh) 2003-08-06
US7676106B2 (en) 2010-03-09
CA2410573A1 (en) 2001-12-13
MXPA02012169A (es) 2003-06-06
US6647061B1 (en) 2003-11-11
EP1287704A2 (en) 2003-03-05
JP2004504739A (ja) 2004-02-12
CN1210961C (zh) 2005-07-13
DE60114812T2 (de) 2006-08-03
EP1287704B1 (en) 2005-11-09
KR100563608B1 (ko) 2006-03-23
TW527837B (en) 2003-04-11
EP1401209A3 (en) 2004-11-03

Similar Documents

Publication Publication Date Title
CN1210961C (zh) 视频尺度转换及从mpeg－2到mpeg－4的编码转换
CN1194550C (zh) 通过直接离散余弦变换映射改变分辨率的设备和方法
CN1227909C (zh) 用于编辑压缩的图象序列的方法
CN1251518C (zh) 数字信号转换方法和数字信号转换装置
CN1076932C (zh) 图像信号编码和解码的方法与装置
CN1241416C (zh) 编码系统和方法、编码及解码、记录及再现的设备和方法
CN1236616C (zh) 变换活动图像编码方式的方法及其装置
CN1265649C (zh) 运动图像的编码方法、解码方法、编码装置及解码装置
CN1199472C (zh) 对数字编码视频信号进行译码的可变长度译码器
CN1537384A (zh) 用于子像素值内插的方法
CN1240226C (zh) 有漂移补偿的视频代码转换器和用于补偿漂移的设备
CN1197359C (zh) 获得增强译码的降低分辨率的视频信号的设备和方法
CN1653822A (zh) 用于代码转换压缩视频比特流的方法和设备
CN1482809A (zh) 画面编码和解码装置及其方法
CN1630374A (zh) 用于前向预测的隔行扫描视频帧的场的预测运动矢量
CN1627830A (zh) 色彩空间编码框架
CN1270541C (zh) 编码设备和方法
CN1870748A (zh) 因特网协议电视
CN1882096A (zh) 运动图像的编码方法、解码方法、编码装置及解码装置
CN1722848A (zh) 数字信号转换方法和数字信号转换装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: MOTOROLA MOBILITY LLC

Free format text: FORMER OWNER: GENERAL INSTRUMENT HOLDING CO., LTD.

Effective date: 20130918

Owner name: GENERAL INSTRUMENT HOLDING CO., LTD.

Free format text: FORMER OWNER: GENERAL INSTRUMENT CORPORATION

Effective date: 20130918

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20130918

Address after: Illinois State

Patentee after: MOTOROLA MOBILITY LLC

Address before: California, USA

Patentee before: General Instruments Holding Co.,Ltd.

Effective date of registration: 20130918

Address after: California, USA

Patentee after: General Instruments Holding Co.,Ltd.

Address before: American Pennsylvania

Patentee before: GENERAL INSTRUMENT Corp.

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20160311

Address after: California, USA

Patentee after: Google Technology Holdings LLC

Address before: Illinois State

Patentee before: MOTOROLA MOBILITY LLC

CX01 Expiry of patent term

Granted publication date: 20080409

CX01 Expiry of patent term