JP2007158432A - Video recording device - Google Patents
Video recording device Download PDFInfo
- Publication number
- JP2007158432A JP2007158432A JP2005346735A JP2005346735A JP2007158432A JP 2007158432 A JP2007158432 A JP 2007158432A JP 2005346735 A JP2005346735 A JP 2005346735A JP 2005346735 A JP2005346735 A JP 2005346735A JP 2007158432 A JP2007158432 A JP 2007158432A
- Authority
- JP
- Japan
- Prior art keywords
- clock
- recording
- frame
- frame rate
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
Abstract
Description
本発明は、ビデオカメラ等の映像記録装置に関し、特に映画におけるスローモーション効果やクイックモーション効果をフィルムではなく電子的なフレームレート変換処理により得るために好適な映像記録装置、及びこの映像記録装置を構成する際に用いる多重方法、プログラム、及び記録媒体に関するものである。 The present invention relates to a video recording apparatus such as a video camera, and more particularly to a video recording apparatus suitable for obtaining a slow motion effect and quick motion effect in a movie by electronic frame rate conversion processing instead of a film, and the video recording apparatus. The present invention relates to a multiplexing method, a program, and a recording medium used for configuration.
従来、映像記録装置においては、映画におけるスローモーション効果やクイックモーション効果を、撮影フィルムの早回しや遅回しにより記録フレームレートを変更することで実現していた。 Conventionally, in a video recording apparatus, a slow motion effect and a quick motion effect in a movie are realized by changing the recording frame rate by rotating the photographic film quickly or slowly.
しかし、近年、半導体技術、コンピュータ技術、及び高密度記録技術の進展により、放送機器システムの画質及び性能が飛躍的に向上した。その結果、従来はフィルムによって撮影や編集が行われていた映画を、ＶＴＲやコンピュータベースのノンリニア編集機を用いた電子シネマシステムで制作する動きが活発化してきた。その中で、撮像部のＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）駆動方法を制御することで、撮像時のフレームレートを任意の値に設定できるマルチフレームレート対応撮像装置を用い、スローモーション効果やクイックモーション効果を電子的に実現することが可能なものがあった。 However, in recent years, the image quality and performance of broadcast equipment systems have improved dramatically due to advances in semiconductor technology, computer technology, and high-density recording technology. As a result, there has been an increasing movement to produce movies that were previously shot and edited with film using an electronic cinema system using a VTR or a computer-based non-linear editing machine. Among them, by controlling the CCD (Charge Coupled Device) drive method of the image pickup unit, a multi-frame rate compatible image pickup device that can set the frame rate at the time of image pickup to an arbitrary value is used, and the slow motion effect and the quick motion effect are obtained. Some could be realized electronically.
例えば、特許文献１には、マルチフレームレート対応撮像装置を用いてスローモーション効果やクイックモーション効果と言った可変速度再生を電子的に実現可能な映像記録装置が記載されている。この装置では撮像装置から出力される映像信号の有効フレームのみを再生時に標準データレートで所定の再生フレームレートが得られるようにレート制御方法を変更して符号化し、ＴＳ多重部は有効フレームレートと再生フレームレートの比だけ標準のＳＴＣクロックを周波数変換してＰＣＲ、ＰＴＳ、ＤＴＳの値を作成し、多重した上で記録を行っている。
For example,
そして、この様に記録されたＭＰＥＧ−ＴＳストリームは、再生するフレームレートを換算してＭＰＥＧのタイミング情報を多重している為、再生時には特殊な処理を行う事なく、通常のデコード処理のみで、可変速度再生を実現している。
しかしながら、従来の映像記録装置においては、ＳＴＣクロックを記録フレームレートと再生フレームレートの比に基づいてクロック周波数を変更する為、対応する記録フレームレートの種類に対応した分周器の設定が必要であり、回路が増加するという課題がある。 However, in the conventional video recording apparatus, since the clock frequency of the STC clock is changed based on the ratio between the recording frame rate and the reproduction frame rate, it is necessary to set a frequency divider corresponding to the corresponding recording frame rate type. There is a problem that the number of circuits increases.
また、記録フレームレートに対応してＰＬＬの周波数が大きく変動する為、幅広い周波数に対応したＰＬＬを用意する必要があり、特に回路全体をＬＳＩ化する際には幅広い性能を持つＰＬＬを構成する事が困難である。 In addition, since the PLL frequency greatly fluctuates in accordance with the recording frame rate, it is necessary to prepare a PLL that supports a wide range of frequencies. Especially when an entire circuit is made into an LSI, a PLL having a wide range of performance must be configured. Is difficult.
さらに、クロック周波数を変更する際に安定にいたるまでの時間や、その間の周波数等を正確に制御する事が不可能な為、記録動作中に記録フレームレートを変更する事は困難である。 Furthermore, it is difficult to change the recording frame rate during the recording operation because it is impossible to accurately control the time until stabilization when changing the clock frequency, the frequency during the time, and the like.
本発明は前記課題に鑑み、ＳＴＣを生成する回路構成を簡易にした上で、動作中に記録フレームレートの変更を可能にする映像記録装置を提供することを目的とするものである。 SUMMARY OF THE INVENTION The present invention has been made in view of the above problems, and an object of the present invention is to provide a video recording apparatus capable of changing a recording frame rate during operation while simplifying a circuit configuration for generating an STC.
上述した課題を解決するために、本発明に係る映像記録装置は、映像信号を圧縮符号化して生成された圧縮映像データに対し、復号処理に関する時刻を規定する時刻管理情報を多重するために、前記時刻の基準となるクロックを発生するクロック発生手段と、前記圧縮映像データに前記時刻管理情報を多重化したシステムストリームを生成する多重手段と、前記多重手段において生成される前記システムストリームを記録媒体に記録する記録手段とを備え、入力されてくる前記映像信号の記録フレームレートと、前記システムストリームを記録再生および復号した後に得られる再生映像信号において予め設定されている再生フレームレートとが異なる場合において、前記クロック発生手段は、間欠的にクロックを発生し、前記多重手段は、前記再生フレームレートに対応した前記時刻管理情報を、前記クロック発生手段において発生された間欠的なクロックのタイミングで前記圧縮映像データに多重したシステムストリームを生成し、前記記録手段は、当該システムストリームを前記記録媒体に記録することを特徴とする。 In order to solve the above-described problem, a video recording apparatus according to the present invention multiplexes time management information that defines a time related to decoding processing on compressed video data generated by compressing and encoding a video signal. Clock generating means for generating a clock as a reference for the time, multiplexing means for generating a system stream in which the time management information is multiplexed on the compressed video data, and the system stream generated by the multiplexing means as a recording medium The recording frame rate of the input video signal is different from the preset playback frame rate in the playback video signal obtained after recording, playback and decoding of the system stream The clock generation means intermittently generates a clock, and the multiplexing means Generating a system stream in which the time management information corresponding to the reproduction frame rate is multiplexed with the compressed video data at an intermittent clock timing generated by the clock generation means; and the recording means It is recorded on a recording medium.
また、本発明に係る映像記録装置は、さらに、入力されてくる前記映像信号が、各フレームを１回または複数回繰り返すことにより生成された映像信号である場合であって、入力されてくる前記映像信号の生成元となったフレームである有効フレームを示す有効フレームフラグが入力される場合、入力されてくる前記有効フレームフラグを利用して入力されてくる前記映像信号から前記有効フレームを検出する有効フレーム検出手段を備え、前記クロック発生手段は、検出される前記有効フレームに相当する期間のみクロックを発生し、前記有効フレーム以外の期間である無効フレームに相当する期間ではクロックを停止することで間欠的にクロックを発生することを特徴とする。 The video recording apparatus according to the present invention may further include a case where the input video signal is a video signal generated by repeating each frame once or a plurality of times, and the input video signal is input. When an effective frame flag indicating an effective frame that is a frame from which a video signal is generated is input, the effective frame is detected from the input video signal using the input effective frame flag. Valid frame detection means, wherein the clock generation means generates a clock only during a period corresponding to the detected valid frame and stops the clock during a period corresponding to an invalid frame other than the valid frame. The clock is generated intermittently.
これらの構成により、前記クロック発生手段において時間管理情報を生成する際に記録する有効フレーム（Ｘ映像信号）に同期してクロック動作をオンオフすることができ、可変速度再生に対応した時刻情報を生成することが可能となる。 With these configurations, the clock operation can be turned on and off in synchronization with the effective frame (X video signal) recorded when the time management information is generated in the clock generation means, and time information corresponding to variable speed reproduction is generated. It becomes possible to do.
また、本発明に係る映像記録装置の前記クロック発生手段は、復号処理の動作基準となる基準クロックを逓倍するＰＬＬ（Phase Locked Loop）部と、前記ＰＬＬ部から入力されるクロックに対して、前記有効フレームに相当する期間のみクロックを発生し、前記無効フレームに相当する期間ではクロックを停止するためのクロック停止スイッチ部と、前記記録フレームレートと前記再生フレームレートとが等しい場合には、前記基準クロックが前記ＰＬＬ部及び前記クロック停止スイッチ部を通らないようにし、前記記録フレームレートと前記再生フレームレートとが異なる場合には、前記ＰＬＬ部及び前記クロック停止スイッチ部を通るように回路を選択する切替スイッチ部とを備えることを特徴とする。 The clock generation means of the video recording apparatus according to the present invention includes a PLL (Phase Locked Loop) unit that multiplies a reference clock serving as an operation reference for decoding processing, and a clock input from the PLL unit. When the clock is generated only during the period corresponding to the valid frame and the clock stop switch unit for stopping the clock during the period corresponding to the invalid frame, and the recording frame rate and the reproduction frame rate are equal, the reference A clock is prevented from passing through the PLL unit and the clock stop switch unit, and when the recording frame rate and the reproduction frame rate are different, a circuit is selected to pass through the PLL unit and the clock stop switch unit. And a changeover switch unit.
この構成により、記録フレームレートと再生フレームレートが異なる可変速度の記録中においても、前記ＰＬＬ部及び前記クロック停止スイッチ部を通るようにすることで、基準クロックの周波数は常に一定となり、回路構成を簡易にする事が出来る。 With this configuration, the frequency of the reference clock is always constant by passing through the PLL unit and the clock stop switch unit even during variable-speed recording where the recording frame rate and the playback frame rate are different. It can be simplified.
さらに、本発明に係る映像記録装置の前記クロック発生手段は、さらに、前記記録フレームレートより大である記録処理フレームレートに同期して動作し、入力される映像信号の前記有効フレームと前記無効フレームとで処理を切り替える制御部を備えることを特徴とする。 Furthermore, the clock generation means of the video recording apparatus according to the present invention further operates in synchronization with a recording processing frame rate that is larger than the recording frame rate, and the valid frame and invalid frame of the input video signal. And a control section for switching the processing.
この構成により、前記制御部において、有効フレームに同期して制御する事で、記録途中に記録フレームレートを変更した場合にも容易に追従できるため、記録時に記録フレームレートを自由に変更する事か可能となり多彩な映像記録を実現する事が出来る。 With this configuration, the control unit can easily follow even when the recording frame rate is changed during recording by controlling in synchronization with the effective frame, so that the recording frame rate can be freely changed during recording. It becomes possible to realize a variety of video recording.
尚、前記目的を達成するために、本発明は、映像記録装置の特徴的な手段をステップとする映像記録方法として実現したり、コンピュータに各ステップを実行させるためのプログラムとして実現することもできる。そのようなプログラムは、ＣＤ−ＲＯＭ等の記録媒体やインターネット等の伝送媒体を通じて配信することができるのは言うまでもない。 In order to achieve the above object, the present invention can be realized as a video recording method using characteristic means of the video recording apparatus as steps, or as a program for causing a computer to execute each step. . It goes without saying that such a program can be distributed through a recording medium such as a CD-ROM or a transmission medium such as the Internet.
本発明の映像記録装置は、上記構成を有し、時刻管理情報を生成する際に記録する有効フレーム（Ｘ映像信号）に同期してクロック動作をオンオフすることで、可変速度再生に対応した時刻情報を生成する事ができる。このため、記録フレームレートと再生フレームレートが異なる可変速度の記録中においても基準クロックの周波数は常に一定となり、回路構成を簡易にする事が出来る。さらに、有効フレームに同期して制御する事で、記録途中に記録フレームレートを変更した場合にも容易に追従できるため、記録時に記録フレームレートを自由に変更する事か可能となり多彩な映像記録を実現する事が出来る。 The video recording apparatus of the present invention has the above-described configuration, and turns on / off the clock operation in synchronization with an effective frame (X video signal) to be recorded when generating time management information, thereby enabling time corresponding to variable speed reproduction. Information can be generated. For this reason, the frequency of the reference clock is always constant even during variable speed recording in which the recording frame rate and the reproduction frame rate are different, and the circuit configuration can be simplified. In addition, by controlling in synchronization with the effective frame, even if the recording frame rate is changed during recording, it is possible to easily follow the recording frame rate. Can be realized.
以下、本発明の映像記録装置、映像符号化方法および多重方法について、図面を参照しながら説明する。 Hereinafter, a video recording apparatus, a video encoding method, and a multiplexing method according to the present invention will be described with reference to the drawings.
（実施例１）
図１に本発明の実施例１における映像記録装置を用いた撮像記録装置のブロック図を示す。
Example 1
FIG. 1 shows a block diagram of an imaging recording apparatus using the video recording apparatus in
図１において、撮像記録装置は、撮像装置１、映像記録装置２、電子ビューファインダー３（以下、ＥＶＦと略する）、マイク４、制御部５を備えている。撮像装置１から映像記録装置２へは、６０ｐ映像信号６、６０ｐ映像信号からＣＣＤ１０の出力であるＸｐ映像信号に相当する有効フレームを抜き取るための有効フレームフラグ７が送信される。
In FIG. 1, the imaging recording apparatus includes an
また、撮像装置１は、プログレッシブ走査可能なＣＣＤ１０、フレームメモリ１１、カメラのプロセス処理を行うカメラ処理部１２、ＣＣＤ駆動回路１３、マルチフレームレートに対応する駆動パルスを切り替え出力する駆動パルス切換回路１４を備えている。
The
さらに、映像記録装置２は、６０ｐ映像信号から有効フレームを抜き取り、Ｘｐ映像信号として出力する有効フレーム抽出部２０、Ｘｐ映像信号をＭＰＥＧビデオ圧縮符号化し圧縮映像データを出力する映像符号化部２１、入力された圧縮映像データや、圧縮音声データに、復号処理に関する時刻を規定する時刻管理情報や、その他必要な情報を多重してＭＰＥＧ−ＴＳ（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）形式のシステムストリームを出力するＴＳ多重部２２、システムストリームを記録媒体に記録する記録部２３、音声符号化部２４を備えている。
Further, the
なお、本実施例の映像符号化部２１は本発明の映像符号化手段の例であり、本実施例のＴＳ多重部２２は本発明の多重手段の例であり、本実施例の記録部２３は本発明の記録手段の例である。
The
次に、このような本実施例の動作を説明する。
撮像装置１は、背景技術で説明した従来の撮像装置と同様に撮像装置のフレームレートを可変出来るものとする。制御部５は図示しないユーザー操作部からユーザーにより設定された撮影フレームレートの値Ｘ及び再生フレームレートの値Ｙを受け取り、これらの値に応じた制御信号を各部へ出力する。以下の説明においては再生フレームレートの値Ｙは２４フレーム／秒であるものとする。なお、本実施例においても背景技術で説明したのと同様に、ＣＣＤにおける撮影フレームレートをＸフレーム／秒とするとともに、ＣＣＤ出力の映像信号をＸｐ映像信号と呼ぶことにする。
Next, the operation of this embodiment will be described.
Assume that the
駆動パルス切換回路１４は制御部５からの制御信号を受け、Ｘｐ映像信号を撮影するために必要な駆動パルスを発生し、ＣＣＤ駆動回路１３に出力する。ＣＣＤ駆動回路１３は、駆動パルス切換回路１４からの駆動パルスを所定電圧に変換してＣＣＤ１０を駆動する。ＣＣＤ１０からは撮影したＸｐ映像信号がフレームメモリ１１に出力される。
The drive
図２は図１の各部の信号波形図である。図２（ａ）はＣＣＤ１０の出力信号を示す。なお、ここではＣＣＤ１０の出力信号をＸｐ映像信号そのものとして図示しているが、Ｘｐ映像信号に相当する映像情報を含んでいれば良く、同期信号のフォーマットは必ずしもＸｐ映像信号と同一である必要は無い。
FIG. 2 is a signal waveform diagram of each part of FIG. FIG. 2A shows an output signal of the
フレームメモリ１１はＣＣＤ１０からのＸｐ映像信号の映像情報を書き込み、同じフレームの映像情報を複数回読み出すことにより、プルダウン処理された６０ｐ映像信号を出力する。この６０ｐ映像信号はカメラ処理部１２により６０ｐ映像信号としてカメラプロセスの所定の処理が施され、図２（ｂ）に示した６０ｐ映像信号としてＥＶＦ３及び有効フレーム抽出部２０に出力される。ＥＶＦ３では６０フレーム／秒で画像を表示することでＸｐ映像信号の映像情報を容易に表示することが可能である。
The
また、プルダウン処理された６０ｐ映像信号においては映像情報がＸｐ映像信号の単位で変化するが、図２（ｃ）に示すように、映像情報の変わり目において６０ｐ映像信号のなかでＸｐ映像信号に相当する有効フレームを抜き取るための有効フレームフラグ７が有効フレーム抽出部２０に出力される。なお、ここでは有効フレームフラグ７を映像信号６とは別に出力する構成としているが、例えば映像信号６の垂直ブランキング期間に多重して出力しても良い。
In the 60p video signal subjected to the pull-down process, the video information changes in units of the Xp video signal. As shown in FIG. 2C, the video information corresponds to the Xp video signal in the 60p video signal at the transition of the video information. The effective frame flag 7 for extracting the effective frame to be output is output to the effective
有効フレーム抽出部２０は、有効フレームフラグ７を用いて６０ｐ映像信号からＸｐ映像信号を抜き出し、映像符号化部２１に出力する。映像符号化部２１は、入力されたＸｐ映像信号をＭＰＥＧビデオ圧縮符号化し圧縮映像データを出力する。この際に、圧縮符号化の処理はＸｐ映像信号に対して行うが、圧縮符号化のレート制御、及びヘッダ付加は再生時の２４フレーム／秒に対応して行う。このとき、再生時の基準データレート、すなわち撮影フレームレートと再生フレームレートが同一になる（Ｘ＝２４）ときのデータレートをＲビット／秒とすると、映像符号化部２１は、Ｘｐ映像信号をＲ・（Ｘ／２４）ビット／秒に圧縮符号化するようなレート制御を行う。この処理に関する詳細は後述する。
The effective
一方、マイク４が収録した音声信号は音声符号化部２４に入力され、オーディオ圧縮符号化し圧縮音声データを出力する。この際に、音声信号に対して映像信号のフレームレート変換に合わせた処理を行うことは可能である。すなわち音声信号のサンプリング周波数をＦａ、圧縮符号化後の基準データレートをＲａとしたときに、入力映像信号のフレームレートに合わせてサンプリング周波数を（Ｘ／２４）に変換し、さらにオーディオ圧縮符号化する際に圧縮音声データのデータレートがＲａ・（Ｘ／２４）になるようなレート制御を行って圧縮する。なおこのとき、入力音声信号に対し、入力映像信号のフレームレートに合わせてサンプリング周波数を（Ｘ／２４）に変換した音声データを、圧縮符号化を行わずに多重化しても良い。
On the other hand, the audio signal recorded by the
すなわち、音声符号化部２４は、入力されてくる映像信号のフレームレートと、システムストリームの再生時のフレームレートとが等しい場合、入力されてくる前記音声データのサンプリング周波数を変えずに前記音声データを記録音声データとして出力し、入力されてくる前記映像信号のフレームレートと、前記システムストリームの再生時のフレームレートとが異なっている場合、入力されてくる前記音声データのサンプリング周波数を異なる周波数に変換して記録音声データとして出力しても構わない。
That is, when the frame rate of the input video signal is equal to the frame rate at the time of reproduction of the system stream, the
なお、本実施例においては、より実装を簡略化した形態としてＸ＝２４の場合のみ圧縮音声データを生成および多重し、それ以外の場合は圧縮音声データを生成及び多重しない場合について説明する。 In the present embodiment, a case where compressed audio data is generated and multiplexed only when X = 24, and compressed audio data is not generated and multiplexed in other cases will be described as a more simplified form.
すなわち、ＴＳ多重部２２は、圧縮映像データに加え、音声データをも入力し、入力されてくる映像信号のフレームレートと、システムストリームの再生時のフレームレートとが等しい場合、ＴＳ多重部２２は、入力された音声データをシステムストリームに多重し、入力されてくる映像信号のフレームレートと、システムストリームの再生時のフレームレートとが異なっている場合、ＴＳ多重部２２は、入力された音声データをシステムストリームに多重しない。
That is, the
ＴＳ多重部２２は映像符号化部２１から入力された圧縮映像データ、音声符号化部２４から入力された圧縮音声データに、復号処理に関する時刻を規定する時刻管理情報や、その他必要な情報を多重して図２（ｄ）に示したＭＰＥＧ−ＴＳ形式のシステムストリームを出力する。
The
図２（ｄ）等において、Ｉ２等の「Ｉ」は、Ｉピクチャすなわちフレーム内符号化画像（Ｉｎｔｒａ符号化画像）を表し、Ｂ０等の「Ｂ」は、Ｂピクチャすなわち双方向予測符号化画像（Ｂｉｄｉｒｅｃｔｉｏｎａｌｌｙ ｐｒｅｄｉｃｔｉｖｅ符号化画像）を表し、Ｐ５等の「Ｐ」は、Ｐピクチャすなわちフレーム間順方向予測符号化画像（Ｐｒｅｄｉｃｔｉｖｅ符号化画像）を表している。従って、背景技術で説明した従来映像記録装置とは異なり、本実施例の映像記録装置では、フレーム内圧縮のみならず、ＢピクチャやＰピクチャ等のフレーム間圧縮も用いられている。 In FIG. 2D and the like, “I” such as I2 represents an I picture, that is, an intra-frame encoded image (Intra encoded image), and “B” such as B0 represents a B picture, that is, a bidirectional predictive encoded image. (Bidirectionally predictive encoded image), and “P” such as P5 indicates a P picture, that is, an inter-frame forward prediction encoded image (Predictive encoded image). Therefore, unlike the conventional video recording apparatus described in the background art, the video recording apparatus of the present embodiment uses not only intra-frame compression but also inter-frame compression such as B picture and P picture.
ＴＳ多重部２２から出力されたシステムストリームは記録部２３に記録される。ここで、時刻管理情報としては、復号及び出力（表示）のタイミング基準となるＰＣＲ（Ｐｒｏｇｒａｍ Ｃｌｏｃｋ Ｒｅｆｅｒｅｎｃｅ）、復号後の各フレームの出力タイミングを示すＰＴＳ（Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍｐ）、復号のタイミングを示すＤＴＳ（Ｄｅｃｏｄｉｎｇ Ｔｉｍｅ Ｓｔａｍｐ）が含まれる。
The system stream output from the
本実施例の映像記録装置の記録部２３に記録されたシステムストリームが、外部の復号装置に出力され、この復号装置において出力されたシステムストリームを復号する時には、ＰＣＲを用いて復号装置の動作基準となるＳＴＣ（Ｓｙｓｔｅｍ Ｔｉｍｅ Ｃｌｏｃｋ）が生成される。そして、このＳＴＣに合わせて復号・表示がＰＴＳ／ＤＴＳで指定された時刻に行われるように復号装置が制御される。したがって、Ｘｐ映像信号を圧縮符号化及び多重する際には、再生時に２４ｐ映像信号を圧縮符号化及び多重したシステムストリームを再生する場合と同様の制御が行われるようにＰＣＲ、ＰＴＳ、ＤＴＳの値を変更する必要がある。従って、Ｘｐ映像信号のフレームレートと、前記記録部２３に記録されるシステムストリームの再生時の予め設定されているフレームレートとが異なっている場合、ＴＳ多重部２２は、システムストリームの再生時の予め設定されているフレームレートに対応した時刻管理情報を圧縮映像データに多重する。なお、本実施例のＸｐ映像信号のフレームレートは、本発明の記録フレームレートの例であり、本実施例のシステムストリームの再生時の予め設定されているフレームレートは、本発明の再生フレームレートの例である。また、この詳細については後述する。
When the system stream recorded in the
再生時には図２（ｅ）に示したように、システムストリームは２４ｐ映像信号を基準データレートで再生する場合と同一形式で再生される。圧縮映像データの復号も図２（ｆ）に示したように通常の２４ｐ映像信号に対するものと同様に行われる。最後に、復号後の２４ｐ映像信号は映像モニタとの間で一般的に使用されるインターフェースにあわせるため、６０フレーム／秒のプログレッシブもしくはインタレースの画像に、いわゆる２−３プルダウンされて出力される。従って、映像符号化部２１においては、圧縮符号化を施す際にはこの２−３プルダウンに対応してｒｅｐｅａｔ＿ｆｉｒｓｔ＿ｆｉｅｌｄ、ｔｏｐ＿ｆｉｅｌｄ＿ｆｉｒｓｔを設定する必要がある。
At the time of reproduction, as shown in FIG. 2 (e), the system stream is reproduced in the same format as that for reproducing a 24p video signal at a reference data rate. The decoding of the compressed video data is performed in the same manner as for a normal 24p video signal as shown in FIG. Finally, the 24p video signal after decoding is output by pulling down so-called 2-3 pull-down to a progressive or interlaced image of 60 frames / second in order to match the interface generally used with the video monitor. . Therefore, the
図３に本発明の実施例１における映像記録装置２のより詳細なブロック図を示す。図１と共通の構成要素については同一番号を付与し、詳細な説明を省略する。
FIG. 3 shows a more detailed block diagram of the
映像符号化部２１は、入力フレームの処理順を変更するためにＭＰＥＧ２のＢピクチャに対応するフレームを保存するフレームメモリ３０、３１、圧縮映像データのデータレートが目標値近傍になるように制御を行うレート制御手段３２、減算器３３、ＤＣＴ手段３４、量子化手段３５、圧縮映像データを一定レートで出力するために一旦保存するビットバッファ３６、逆量子化手段３７、ＩＤＣＴ手段３８、加算器３９、及び参照画像を保存するためのフレームメモリ４０、４１を備えている。これらを含む映像符号化部２１はＭＰＥＧ２ビデオ圧縮符号化処理を行うが、ＭＰＥＧ２−Ｖｉｄｅｏは当業者に周知の規格であるため、例えばＤＣＴ、量子化など、本規格にもとづく各種の用語、及び関連するブロックの動作については、詳細な説明は省略する。また、ＭＰＥＧ２規格では一般に符号化する１枚の画像をピクチャと呼称しているため、以降の説明では必要に応じてフレームをピクチャと言い換えるが、ここではフレームとピクチャは同じものを指す。
The
また、ＴＳ多重化部２２は、それぞれ映像と音声に対応したＰＥＳパケット生成のためのＰＥＳ化手段５０、５５、入力されたＰＥＳパケットを分割し、必要な情報を多重してＴＳパケットを生成するＴＳ化手段５１、５６、映像と音声のそれぞれのＴＳパケットとその他の必要なパケットを多重する多重手段５２、時刻管理情報を生成するための時間軸の基準となるＳＴＣクロックを生成するＳＴＣクロック生成手段５３、及びＳＴＣクロックから時刻管理情報を生成するとともに多重タイミングの管理を行うＳＴＣ制御回路５４を備えている。なお、ＳＴＣクロック生成手段５３は本発明のクロックの例である。これらを含むＴＳ多重部２２はＭＰＥＧ２―ＴＳ多重処理を行うが、ＭＰＥＧ２−ＴＳは当業者に周知の規格であるため、例えばＰＥＳ（Ｐａｃｋｅｔｉｚｅｄ Ｅｌｅｍｅｎｔａｒｙ Ｓｔｒｅａｍ）、ＴＳ（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）など、本規格にもとづく各種の用語、及び関連するブロックの動作については、詳細な説明は省略する。
Also, the
図４は、図１及び図３各部の信号波形図である。図４（ｄ）はフレームメモリ３０の内容を示す図である。図４（ｅ）はフレームメモリ３１の内容を示す図である。図４（ｆ）はフレームメモリ４０の内容を示す図である。図４（ｇ）はフレームメモリ４１の内容を示す図である。Ｂピクチャに対応するフレームを保存するフレームメモリを３０、３１の２つだけにするためには、図４（ｈ）に示したようにエンコード処理はＸｐ映像信号の各フレームに対しても、６０ｐ映像信号の処理と同等の処理速度で行う必要がある。
FIG. 4 is a signal waveform diagram of each part of FIGS. FIG. 4D shows the contents of the
以下、本発明に係る映像の圧縮符号化におけるレート制御について詳細に説明する。先に述べたように、本発明において映像符号化部２１は、Ｘｐ映像信号をＲ・（Ｘ／２４）ビット／秒に圧縮符号化するようなレート制御を行う必要がある。
Hereinafter, rate control in video compression encoding according to the present invention will be described in detail. As described above, in the present invention, the
図５は、映像符号化部のビットバッファ３６のデータ容量と、再生時の復号処理を想定したＶＢＶバッファ容量とを示す図である。レート制御手段３２は、図５（ｅ）に示すように再生時のＶＢＶバッファがオーバーフローもアンダーフローも発生しないように圧縮映像データのデータレートを制御する必要がある。ここで、図５（ｃ）は、記録時に、時間の経過とともに各フレームがどのように記録されていくかを示す図である。また、図５（ｄ）は、再生時に、時間の経過とともに各フレームがどのように再生されていくかを示す図である。図５（ｃ）では有効なフレームの符号化が完了する毎にフレーム時間単位で記録が行われる。無効なフレームのタイミングでは記録は行わない事とする。また、有効なフレームでの記録のデータレートは、圧縮映像データの標準レートＲに６０／２４を乗算したものとし、Ｘｐには依存せずに一定である。従って、無効フレームを含めて平均化した記録レートはＲ×Ｘ／２４となる為、各フレームを圧縮符号化することにより生成されるデータ量、つまり、レート制御手段３２において、圧縮後の各フレームに対する目標データ量は（入力映像信号がＸｐ映像信号であるにも関わらず）２４ｐ映像信号を圧縮する場合と同一になる。
FIG. 5 is a diagram illustrating a data capacity of the
ここで、符号化された後の１フレームあたりの発生データ量はＩ、Ｂ、Ｐピクチャの種類やピクチャの絵柄によって変動するが、記録を行う時間タイミングは一定とする。つまり図５（ｃ）では有効フレームのタイミングで、各フレームに対応した圧縮ＴＳデータを記録すると簡易的に図示しているが、実際にはフレーム毎の発生符号量により、ＴＳ記録するタイミングと画像内容の時刻は変動する。しかし、記録に要する時間単位は常に１フレーム時間固定である。また、この発生データ量の変動はビットバッファ３６により吸収される。
Here, the amount of generated data per frame after encoding varies depending on the type of I, B, and P pictures and the picture pattern, but the timing of recording is constant. That is, in FIG. 5C, it is simply illustrated that the compressed TS data corresponding to each frame is recorded at the timing of the effective frame, but actually, the TS recording timing and the image are determined according to the generated code amount for each frame. The content time varies. However, the time unit required for recording is always fixed to one frame time. Further, the fluctuation of the generated data amount is absorbed by the
図６は、レート制御手段３２における処理手順を示す図である。まず、ステップＳ１において、再生フレームレートＹ（本実施例では２４に固定されている）及び再生ビットレート（圧縮映像データの標準レート）Ｒが設定される。ここで、ＹとＲの値は、例えばスイッチやＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）画面からの入力により決定しても良いし、映像記録装置の実装時に予め決定した値を不揮発性メモリーに記憶しておいて読み出すようにしても良い。次に、ステップＳ２において、撮影フレームレートＸの値をスイッチやＧＵＩ画面からの入力により設定する。 FIG. 6 is a diagram showing a processing procedure in the rate control means 32. First, in step S1, a playback frame rate Y (fixed to 24 in this embodiment) and a playback bit rate (standard rate of compressed video data) R are set. Here, the values of Y and R may be determined by, for example, input from a switch or a GUI (Graphical User Interface) screen, or values determined in advance when the video recording apparatus is mounted are stored in a nonvolatile memory. And may be read out. In step S2, the value of the shooting frame rate X is set by input from a switch or a GUI screen.
続いてステップＳ３において、実際のレート制御に用いるパラメータを算出する。ひとつは映像符号化部２１への入力映像フレームレートｐｉｃｔｕｒｅ＿ｒａｔｅであり、これについては撮影フレームレートＸの値をそのまま使用できる。もうひとつは、有効フレームにおける圧縮映像データの目標レートｂｉｔ＿ｒａｔｅであり、これは再生ビットレートＲに伝送フレームレートと再生フレームレートの比（６０／Ｙ）を掛けることで求めることができる。
Subsequently, in step S3, parameters used for actual rate control are calculated. One is the input video frame rate picture_rate to the
最後にステップＳ４において、ステップＳ３により求めたＰｉｃｔｕｒｅ＿Ｒａｔｅ、ｂｉｔ＿ｒａｔｅの値を用いて圧縮符号化処理のレート制御を行う。ここで、レート制御の方法は任意の方法を用いることが可能である。例えば、ＭＰＥＧ２規格化の際に用いられ、公知となっているＭＰＥＧ２ ＴＭ５（Ｔｅｓｔ Ｍｏｄｅｌ ５）におけるレート制御方法が使用可能である。ＭＰＥＧ２ ＴＭ５のレート制御方法を用いた場合について以下に説明する。 Finally, in step S4, the rate control of the compression encoding process is performed using the values of Picture_Rate and bit_rate obtained in step S3. Here, any method can be used as the rate control method. For example, a rate control method in MPEG2 TM5 (Test Model 5), which is used when MPEG2 is standardized, can be used. The case where the MPEG2 TM5 rate control method is used will be described below.
レート制御手段３２において、あるＧＯＰ（Ｇｒｏｕｐ ｏｆ Ｐｉｃｔｕｒｅ）の次のピクチャに割り当てられる目標データ量は、例えば数１に示した式で設定される。ここで、Ｔｉは次のＩピクチャに割り当てられる目標データ量である。Ｔｐは次のＰピクチャに割り当てられる目標データ量である。Ｔｂは次のＢピクチャに割り当てられる目標データ量である。また、ＫｐおよびＫｂは量子化手段３５の処理内容に依存して決まる定数である。Ｒｇｏｐは現在処理中のＧＯＰに割り当てられたビット数の残量である。Ｎｐ、Ｎｂは現在処理中のＧＯＰに含まれるＰピクチャ、Ｂピクチャの残数である。Ｘｉ、Ｘｐ、Ｘｂはそれぞれ先に符号化されたＩピクチャ、Ｐピクチャ、Ｂピクチャの複雑さを示す指標である。これらのパラメータの詳細はＭＰＥＧ２ ＴＭ５の中で公開されており、ここでは説明を省略する。
In the rate control means 32, the target data amount allocated to the next picture of a certain GOP (Group of Pictures) is set by the equation shown in
数１において、Ｒｇｏｐは符号化するシーケンスの先頭で初期値として数２が与えられ、その後１ピクチャを符号化する毎に更新される。ここでＮはシーケンスの最初のＧＯＰに含まれるピクチャの数である。
In
従って、数１により求められるＴｉ、Ｔｐ、Ｔｂは、圧縮映像データの目標レートｂｉｔ＿ｒａｔｅとフレームレートｐｉｃｔｕｒｅ＿ｒａｔｅにより変化する。レート制御手段３２をＭＰＥＧ２ ＴＭ５に準じて（数１および数２を用いて）実装した場合に、図５（ｂ）に示したバッファ制御はｂｉｔ＿ｒａｔｅをＲ・（６０／２４）、ｐｉｃｔｕｒｅ＿ｒａｔｅをＸとすることで容易に実現可能である。
Therefore, Ti, Tp, and Tb calculated by
このように、入力されてくる映像信号のフレームレートがＸフレーム／秒であり、システムストリームの再生時の予め設定されているフレームレートがＹフレーム／秒であり、システムストリームに含まれる圧縮映像データの再生時の基準データレートがＲビット／秒である場合、映像符号化部２１は、入力されてくる映像信号をＲ×（Ｘ／Ｙ）ビット／秒のデータレートで圧縮符号化するようにレート制御を行う。
Thus, the frame rate of the input video signal is X frames / second, the preset frame rate at the time of playback of the system stream is Y frames / second, and the compressed video data included in the system stream When the reference data rate at the time of reproduction is R bits / second, the
なお、先に図５において、圧縮後の各フレームに対する目標データ量は（入力映像信号がＸｐ映像信号であるにも関わらず）２４ｐ映像信号を圧縮する場合と同一になることを示したが、これに対応してステップＳ３における処理をｐｉｃｔｕｒｅ＿ｒａｔｅ＝Ｙ、ｂｉｔ＿ｒａｔｅ＝Ｒと設定する処理に変更することも可能である。先に示したＭＰＥＧ２ ＴＭ５のレート制御の場合、レート制御に関連する式がいずれもｂｉｔ＿ｒａｔｅ／ｐｉｃｔｕｒｅ＿ｒａｔｅの割合により変化する式となっており、いずれか一方だけを用いないため、数３に示したようにｂｉｔ＿ｒａｔｅをＲ、ｐｉｃｔｕｒｅ＿ｒａｔｅをＹとしても同じ結果が得られるということになる。 In FIG. 5, the target data amount for each frame after compression has been shown to be the same as when compressing a 24p video signal (although the input video signal is an Xp video signal). Corresponding to this, it is possible to change the processing in step S3 to processing for setting picture_rate = Y and bit_rate = R. In the case of the rate control of MPEG2 TM5 shown above, all the expressions related to the rate control are expressions that change depending on the ratio of bit_rate / picture_rate, and only one of them is not used. If bit_rate is set to R and picture_rate is set to Y, the same result can be obtained.
すなわち、入力されてくる映像信号のフレームレートがＸフレーム／秒であり、システムストリームの再生時の予め設定されているフレームレートがＹフレーム／秒であり、システムストリームに含まれる圧縮映像データの再生時の基準データレートがＲビット／秒である場合、映像符号化部２１は、入力されてくる映像信号フレームレートがＸであるにも関わらず、フレームレートがＹの映像信号をＲビット／秒のデータレートで圧縮符号化するようにレート制御を行っても上記と同様の結果を得ることが出来る。
That is, the frame rate of the input video signal is X frames / second, the preset frame rate at the time of playback of the system stream is Y frames / second, and playback of the compressed video data included in the system stream is performed. When the reference data rate at that time is R bits / second, the
要するに、入力されてくる映像信号のフレームレートが再生時のフレームレートと異なる場合であっても、映像符号化部２１は、再生時のフレームレートに対応する、圧縮映像データの再生時の基準データレートに実質上一致するように入力されてくる映像信号を圧縮符号化する。従って、再生時のＶＢＶバッファがオーバーフローもアンダーフローも発生しないように圧縮映像データのデータレートを制御することが出来る。
In short, even when the frame rate of the input video signal is different from the frame rate at the time of playback, the
次に、本発明の実施例における時刻管理情報の生成について詳細に説明する。先に述べたように、本実施例においては、再生時に２４ｐ映像信号を圧縮符号化及び多重したシステムストリームを再生する場合と同様の制御が行われるようにＰＣＲ、ＰＴＳ、ＤＴＳの値を変更するとともに、ＰＣＲ、ＰＴＳ、ＤＴＳを多重する間隔も変更する必要がある。
ここで、本発明においては、ＰＣＲ，ＰＴＳ，ＤＴＳを多重する際の基本となるＳＴＣクロックを図５（ｃ）に示すように有効フレームの記録時のみ駆動する間欠動作とする。無効フレームの記録に相当する期間はクロックを停止させる。従ってその間はＰＣＲ，ＰＴＳ，ＤＴＳのカウント動作は停止する事になる。また、ＳＴＣクロックの動作を通常記録時２７ＭＨｚに対して処理フレームレート（６０ｐ相当）と再生フレームレート２４ｐの比を掛けた値(２７×６０/２４ＭＨｚ)とする。すなわち有効フレーム期間のみを通常の６０／２４倍でタイミングカウントとする事とする。この動作により、図５（ｃ）に示す記録時での有効フレームのみでの1フレーム時間（１／６０秒）あたりのカウント数は、図５（ｄ）に示す再生時の１フレーム時間（１／２４秒）でのカウント数と等しく、有効フレームのみでのカウント積算値は、記録時と再生時で等価となる。従って、このＳＴＣの制御により、レートＸｐに依存する事なくＰＣＲ、ＰＴＳ、ＤＴＳの算出を行う事が可能となる。
Next, generation of time management information in the embodiment of the present invention will be described in detail. As described above, in this embodiment, the values of PCR, PTS, and DTS are changed so that the same control as in the case of reproducing a system stream obtained by compressing and encoding a 24p video signal at the time of reproduction is performed. At the same time, it is necessary to change the interval for multiplexing PCR, PTS, and DTS.
Here, in the present invention, the STC clock that is the basis for multiplexing PCR, PTS, and DTS is an intermittent operation that is driven only during the recording of an effective frame, as shown in FIG. The clock is stopped for a period corresponding to the recording of the invalid frame. Accordingly, the counting operation of PCR, PTS, and DTS is stopped during that time. The STC clock operation is set to a value (27 × 60/24 MHz) obtained by multiplying the ratio of the processing frame rate (corresponding to 60p) and the reproduction frame rate 24p to 27 MHz during normal recording. That is, only the effective frame period is set to 60/24 times the normal timing count. With this operation, the number of counts per one frame time (1/60 seconds) in only the effective frame at the time of recording shown in FIG. 5C becomes one frame time (1) during reproduction shown in FIG. / 24 seconds), and the count integrated value for only the effective frame is equivalent for recording and reproduction. Therefore, this STC control makes it possible to calculate PCR, PTS, and DTS without depending on the rate Xp.
図７はＳＴＣクロック生成手段５３の構成の一例を示すブロック図である。このＳＴＣクロック生成手段５３は、有効フレーム期間のタイミングを生成し全体の制御を切り替える制御手段６０、ＳＴＣの原クロック２７ＭＨｚを入力し６０／２４逓倍するＰＬＬ回路６１、制御手段６０からのタイミング信号により有効フレーム期間のみクロックを出力するクロック停止スイッチ６２、及び記録フレームレートと再生フレームレートが異なる可変速記録時と通常記録でクロックを切り替える切替スイッチ６３を備える。
FIG. 7 is a block diagram showing an example of the configuration of the STC clock generation means 53. This STC clock generation means 53 is based on a control means 60 that generates the timing of the effective frame period and switches the whole control, a
図７に示した構成により、ＳＴＣクロックの原クロック（２７ＭＨｚ）から図５の図５（ｃ）に示す有効フレーム記録期間のみ６０／２４倍としたクロックを生成する事が可能である。 With the configuration shown in FIG. 7, it is possible to generate a clock that is 60/24 times the effective frame recording period shown in FIG. 5C from the original clock (27 MHz) of the STC clock.
なお、ＰＴＳ、ＤＴＳ、ＰＶＲのいずれかまたは全てにおいて、上記の回路構成で行うのと同等の処理をソフトウエアプログラムで行う事も可能である。その場合はＳＴＣクロック生成回路は仮想的に実現し、回路は不要となる。 Note that, in any or all of PTS, DTS, and PVR, it is possible to perform a process equivalent to that performed in the above circuit configuration by a software program. In that case, the STC clock generation circuit is virtually realized, and the circuit becomes unnecessary.
なお、図４、図５には撮影フレームレートＸ＝８で、再生時に３倍クイックモーションとなる場合を図示したが、図８、図９に示したように撮影フレームレートＸを再生フレームレート２４フレーム／秒よりも高いフレームレートとし、再生時にスローモーションを実現することも可能である。この場合、図４と図８、図５と図９とを比較してもわかるように、撮影フレームレートＸと再生フレームレート２４の大小関係が異なるだけで、上記した構成及び動作を適用することで実現可能である。
4 and 5 illustrate the case where the shooting frame rate X = 8 and triple quick motion during playback, the shooting frame rate X is set to the
以上、実施例１においては、有効フレーム（Ｘｐ映像信号）のみを記録することで、記録媒体の消費量が少ない映像記録装置を提供することができる。また、画像圧縮符号化としてフレーム内符号化ではなく、フレーム間符号化であるＭＰＥＧ２を用いることで高圧縮率を得ることができるため、記録媒体の消費量はより少なくすむ。さらに、予め設定された再生フレームレート（２４フレーム／秒）に合わせて圧縮符号化処理、多重処理を行うため、再生時に通常記録した場合と同一フレームレート（２４フレーム／秒）、同一データレートＲで再生することが可能で、特殊な装置を必要としない映像記録装置を提供することができる。 As described above, in the first embodiment, it is possible to provide a video recording apparatus that consumes less recording medium by recording only effective frames (Xp video signals). In addition, since the high compression rate can be obtained by using MPEG2 which is inter-frame coding instead of intra-frame coding as image compression coding, the consumption of the recording medium can be further reduced. Furthermore, since compression encoding processing and multiplexing processing are performed in accordance with a preset reproduction frame rate (24 frames / second), the same frame rate (24 frames / second) and the same data rate R as those in the normal recording at the time of reproduction are performed. It is possible to provide a video recording apparatus that can be played back by a video player and that does not require a special apparatus.
なお言うまでもないが、実施例１においては撮影したＸｐ映像信号を６０ｐ映像信号にプルダウンして映像記録装置に入力し、再生フレームレートを２４フレーム／秒として説明したが、任意のＮフレーム／秒にプルダウン変換した映像信号を映像記録装置に入力して、再生フレームレートをＭフレーム／秒として処理することが出来る。 Needless to say, in the first embodiment, the photographed Xp video signal is pulled down to the 60p video signal and input to the video recording apparatus, and the playback frame rate is 24 frames / second. The video signal subjected to pull-down conversion can be input to a video recording apparatus and processed with a playback frame rate of M frames / second.
以上、示したように本実施例では、ＳＴＣクロックを間欠的に動作し、その周波数は標準周波数に対して記録処理フレームレートと再生フレームレートの比を乗じた周波数で多重化を行う事が可能であり、有効フレームレートに依存しないＳＴＣクロックの制御が可能となる。その為、記録の途中で有効フレームレートが変動する場合でもＳＴＣクロックは一定であり、処理の簡素化が図れる。 As described above, in this embodiment, the STC clock is intermittently operated, and the frequency can be multiplexed at a frequency obtained by multiplying the standard frequency by the ratio of the recording processing frame rate and the reproduction frame rate. Thus, it is possible to control the STC clock independent of the effective frame rate. Therefore, even when the effective frame rate fluctuates during recording, the STC clock is constant, and the processing can be simplified.
（実施例２）
図１０に本発明の実施例２における映像記録装置２のブロック図を示す。図１及び図３と共通の構成要素については同一番号を付与し、詳細な説明を省略する。記録部２３は、ＡＴＳ値生成手段９０、ＡＴＳ多重手段９１、及び記録媒体制御部９２を備える。
(Example 2)
FIG. 10 shows a block diagram of the
ＭＰＥＧ２−ＴＳをＴＳ多重手段２２から記録手段２３に転送する際に、実際の転送可能レートが高い場合にはＴＳパケットは間欠的に転送されることになる。また、ＭＰＥＧ２−ＴＳを記録媒体に記録する際に効率よく記録することを目的として、実際のトランスポートストリーム中にあるＮｕｌｌパケットなどの不要な情報を削除する場合がある。これらの場合には、記録手段２３へＴＳパケットが入出力されるタイミングを何らかの形で記録媒体に記録する必要がある。この目的でブルーレイ（Ｂｒｕ−ｒａｙ）ディスクなどではＡＴＳ（Ａｒｒｉｖａｌ Ｔｉｍｅ Ｓｔａｍｐ）が用いられている。 When the MPEG2-TS is transferred from the TS multiplexing means 22 to the recording means 23, TS packets are intermittently transferred if the actual transferable rate is high. Also, unnecessary information such as a null packet in an actual transport stream may be deleted for the purpose of efficiently recording MPEG2-TS when recording on a recording medium. In these cases, it is necessary to record the timing at which TS packets are input / output to / from the recording means 23 in some form on the recording medium. For this purpose, ATS (Arrival Time Stamp) is used in Blu-ray discs and the like.
以下、通常の記録再生におけるＡＴＳの効果について説明する。図１１にＭＰＥＧ２−ＴＳを記録手段２３に記録する際のパケットタイミング保存の概念を示す。図１１（ａ）はＴＳ多重手段２２から記録手段２３への入力ＴＳである。図１１（ｂ）は記録媒体に実際に記録されるＴＳである。図１１（ｃ）は記録媒体から再生され、出力されるＴＳである。３００〜３０２はＮｕｌｌパケットである。３０３〜３０５はＴＳパケットの無いタイミングを示す。 The effect of ATS in normal recording / reproduction will be described below. FIG. 11 shows the concept of packet timing storage when MPEG2-TS is recorded in the recording means 23. FIG. 11A shows an input TS from the TS multiplexing means 22 to the recording means 23. FIG. 11B shows a TS that is actually recorded on the recording medium. FIG. 11C shows a TS that is reproduced from the recording medium and output. 300 to 302 are Null packets. 303 to 305 indicate timings when there is no TS packet.
図１１（ａ）の入力ＴＳにおいて、３００から３０２に示したようにＮｕｌｌパケットが含まれているとすると、これらのＮｕｌｌパケット自体は映像・音声の記録再生に必要な情報を何ら含まないため、図１１（ｂ）の記録ＴＳにおいては削除して記録したい。ただし、ＭＰＥＧ２−ＴＳにおいてＰＣＲは到着タイミングが時刻情報を持つため、再生時に図１１（ｂ）のままの状態で再生すると正しいＳＴＣが再生されず、図１１（ｃ）に示したようにＮｕｌｌパケットの部分はパケットの無いままタイミングを空けるか、あるいはＮｕｌｌパケットを再度挿入して出力する必要がある。これを実現するために、図１１（ｂ）では記録する各パケットの先頭にそのパケットの入力タイミングを示すＡＴＳを付加して記録している。 In the input TS of FIG. 11A, if Null packets are included as shown in 300 to 302, these Null packets themselves do not include any information necessary for video / audio recording and reproduction. In the recording TS of FIG. 11B, it is desired to delete and record. However, since the arrival timing of the PCR in MPEG2-TS has time information, if it is played back in the state as shown in FIG. 11B, the correct STC is not played back, and a Null packet as shown in FIG. 11C. It is necessary to leave the timing of the part with no packet, or insert the Null packet again and output it. In order to realize this, in FIG. 11B, an ATS indicating the input timing of the packet is added and recorded at the head of each packet to be recorded.
図１２にＡＴＳが付加されたＴＳパケットの例を示す。ＭＰＥＧ２−ＴＳのＴＳパケット１８８バイトの前にＡＴＳ４バイトが付加される。このようなＡＴＳ付加は例えばＡＴＳ値生成手段９０としてフリーランの２７ＭＨｚで動作する３２ビットのカウンタを用いてそのカウンタ値をＡＴＳ多重手段９１に入力し、各ＴＳパケットがＡＴＳ記録手段２３に入力された時点でのカウンタ値をそのままそのＴＳパケットの前に付加すれば実現できる。
FIG. 12 shows an example of a TS packet to which ATS is added.
このようにしてＡＴＳを付加されたＴＳパケットの再生タイミングを再現する回路例を図１３に示す。再生装置は、スムージングバッファ７０、スムージングバッファ７０に記憶されているＡＴＳ７１、比較器７２、読み出し制御部７３、及びカウンタ７４を備える。
FIG. 13 shows an example of a circuit that reproduces the reproduction timing of the TS packet to which the ATS is added in this way. The playback apparatus includes a smoothing
図１１（ｂ）に示した記録ＴＳがスムージングバッファ７０に入力される。スムージングバッファ７０に記憶されたＴＳパケットのうち、最初に記憶されたＴＳパケットに付加されたＡＴＳ７１が読み出されて比較器７２に入力される。一方、カウンタ７４は記録の際にＡＴＳを生成するために用いられたのと同一周波数の２７ＭＨｚクロックで動作し、カウンタ値を比較器７２へ出力する。
The recording TS shown in FIG. 11B is input to the smoothing
図１１（ｂ）の記録ＴＳを再生する際に、最初に再生されるＴＳパケットに付加されたＡＴＳがカウンタ７４にロードされるとともに、最初のＴＳパケットが出力される。これ以降は、比較器７２が続くＴＳパケットに付加されたＡＴＳ７１の値とカウンタ７４の値を比較し、一致したときに読み出し制御部７３に一致情報を伝える。読み出し制御部７３は一致情報が比較器７２から入力されると、その時刻にＡＴＳ７１が付加されていたＴＳパケットがスムージングバッファ７０から読み出されるように制御する。以上の動作により、スムージングバッファ７０から読み出されるＴＳパケットは図１１（ｃ）のように入力ＴＳ（図１１（ａ））と同じタイミングで出力される。図１１（ｃ）の３０３〜３０５の部分は対応するＡＴＳを付加されたＴＳパケットが無いため、データが無いまま時間が経過して空き領域となる。
When the recorded TS in FIG. 11B is reproduced, the ATS added to the TS packet to be reproduced first is loaded into the
以上が通常記録再生、すなわち撮影フレームレートの値Ｘと再生フレームレートの値Ｙが同一である場合のＡＴＳの効果である。例えば記録媒体がメモリーであった場合、アクセスにアドレス指定が必要であることなどから、入力トランスポートストリームそのままではパケット間のタイミングを保持して記録再生することができず、ＡＴＳのような仕組みで入力時のパケット間タイミングを再現することは必須の動作となる。 The above is the effect of ATS in normal recording / reproduction, that is, when the value X of the shooting frame rate and the value Y of the reproduction frame rate are the same. For example, if the recording medium is a memory, it is necessary to specify an address for access. Therefore, the input transport stream cannot be recorded and played back while maintaining the timing between packets. It is essential to reproduce the inter-packet timing at the time of input.
次に本発明に係る、撮影フレームレートの値Ｘと再生フレームレートの値Ｙを異なる値に設定した場合の構成及び動作について説明する。なお、ここでは再生フレームレートＹ＝（２４／１．００１）ｆｐｓの場合を前提として説明する。またここでは、再生時のＭＰＥＧ２−ＴＳの基準データレートＲｔｓ＝２４Ｍｂｐｓとして説明する。 Next, the configuration and operation in the case where the photographing frame rate value X and the reproduction frame rate value Y according to the present invention are set to different values will be described. Here, description will be made on the assumption that the reproduction frame rate Y = (24 / 1.001) fps. Here, the description will be made assuming that the reference data rate Rts of MPEG2-TS at the time of reproduction is 24 Mbps.
図１４は撮影フレームレートの値Ｘ＝（８／１．００１）ｆｐｓである場合の各部動作を示すタイミング図である。図１４（ａ）はＰＥＳ化手段５０から出力される記録側のビデオＰＥＳである。記録側のビデオＰＥＳには撮影フレームレート（有効フレームレート）８ｆｐｓの映像信号の１フレーム分を圧縮したデータ毎にＰＴＳ／ＤＴＳが付加される。従って、ＰＴＳ／ＤＴＳが付加される間隔は撮影フレームレートを反映する。また、実施例１にて説明したように、有効フレーム期間のみＳＴＣが駆動され、圧縮データが出力される。 図１４（ｂ）はＡＴＳ多重手段９１から出力されるＡＴＳを付加されたＭＰＥＧ２−ＴＳである。図１４（ａ）のビデオＰＥＳは細かく分割されてそれぞれＴＳパケット（ＴＳＰ）のペイロードに格納される。
FIG. 14 is a timing chart showing the operation of each part when the value of the shooting frame rate X = (8 / 1.001) fps. FIG. 14A shows a recording-side video PES output from the
ここで、本発明においては、ＡＴＳのカウンタを図１４に示すように有効フレームの記録時のみ駆動する間欠動作とする。無効フレームの記録に相当する期間はカウンタを停止させる。また、ＡＴＳカウンタの動作は通常記録時２７ＭＨｚに対して処理フレームレート（６０ｐ相当）と再生フレームレート２４ｐの比を掛けた値(２７×６０/２４ＭＨｚ)とする。すなわち有効フレーム期間のみを通常の６０／２４倍でタイミングカウントとする事とする。また、再生時は通常通り２７ＭＨｚでカウントするので、図１４（ｂ）に示す記録時での有効フレームのみでの１フレーム時間（１／６０秒）あたりのカウント数は、図１４（ｃ）に示す再生時の１フレーム時間（１／２４秒）でのカウント数と等しく、有効フレームのみでのカウント積算値は、記録時と再生時で等価となる。従って、このＡＴＳカウンタの動作により、有効フレームレートＸｐに依存する事なく再生時に２４Ｐのタイミングで動作するＡＴＳカウンタの制御を行う事が可能となる。 In the present invention, as shown in FIG. 14, the ATS counter is set to an intermittent operation that is driven only when an effective frame is recorded. The counter is stopped during a period corresponding to the recording of the invalid frame. The operation of the ATS counter is a value (27 × 60/24 MHz) obtained by multiplying the ratio of the processing frame rate (equivalent to 60p) and the reproduction frame rate 24p to 27 MHz during normal recording. That is, only the effective frame period is set to 60/24 times the normal timing count. Further, since the reproduction is counted at 27 MHz as usual, the number of counts per one frame time (1/60 seconds) in only the effective frame at the time of recording shown in FIG. 14 (b) is shown in FIG. 14 (c). It is equal to the number of counts in one frame time (1/24 seconds) at the time of reproduction shown, and the count integrated value only in the effective frame is equivalent at the time of recording and reproduction. Therefore, the operation of the ATS counter makes it possible to control the ATS counter that operates at the timing of 24P during reproduction without depending on the effective frame rate Xp.
ここで、ＡＴＳカウンタのクロック制御は実施例１に示すＳＴＣクロックと同様の制御で実現する事は可能である。また、同一のクロックとする事も出来る。 Here, the clock control of the ATS counter can be realized by the same control as the STC clock shown in the first embodiment. The same clock can also be used.
図１４（ｃ）は記録媒体から再生され、元のＴＳパケットのタイミングが再現された後のＭＰＥＧ２−ＴＳである。ただし、完全に記録時と同じタイミングではなく、撮影フレームレートと再生フレームレートの比だけデータレートが変化している。なお、本来この段階ではＡＴＳは通常削除されるが、説明の簡単のためにここではＡＴＳを残した図を用いて説明する。 FIG. 14C shows the MPEG2-TS that is reproduced from the recording medium and the timing of the original TS packet is reproduced. However, the data rate changes by the ratio of the shooting frame rate and the playback frame rate, not at the same timing as when recording. Although ATS is normally deleted at this stage, for the sake of simplicity of explanation, here, description will be made with reference to a diagram in which ATS is left.
また、図１４（ｄ）は図１４（ｃ）のＭＰＥＧ２−ＴＳから分離したビデオＰＥＳである。この図についても、記録側のビデオＰＥＳ（図１４（ａ））に対して、撮影フレームレートと再生フレームレートの比だけデータレートが変化している。 FIG. 14D shows a video PES separated from the MPEG2-TS in FIG. Also in this figure, the data rate is changed by the ratio of the shooting frame rate and the playback frame rate with respect to the video PES on the recording side (FIG. 14A).
以上、実施例２においては、ＡＴＳ（ＡｒｒｉｖａｌＴｉｍｅＳｔａｍｐ）を用いてＴＳパケットタイミングを再生する記録再生系においても可変フレームレート記録が可能で、予め設定された再生フレームレート（２４フレーム／秒）に合わせて圧縮符号化処理、多重処理を行うため、再生時に特殊な装置を必要とせずに通常記録した場合と同一フレームレート（２４フレーム／秒）、同一ＴＳデータレートＲｔｓで再生できる映像記録装置を提供することができる。 As described above, in the second embodiment, variable frame rate recording is possible even in a recording / reproducing system that reproduces TS packet timing using ATS (ArrivalTimeStamp), and it is adapted to a preset reproduction frame rate (24 frames / second). Provided is a video recording apparatus capable of reproducing at the same frame rate (24 frames / second) and the same TS data rate Rts as in the case of normal recording without performing a special apparatus at the time of reproduction because compression encoding processing and multiplexing processing are performed. be able to.
さらに、ＡＴＳクロックを間欠的に動作し、その周波数は標準周波数に対して記録処理フレームレートと再生フレームレートの比を乗じた周波数で多重化を行う事が可能であり、有効フレームレートに依存しないＡＴＳクロックの制御が可能となる。その為、記録の途中で有効フレームレートが変動する場合でもＡＴＳクロックは一定であり、処理の簡素化が図れる。 Further, the ATS clock is intermittently operated, and the frequency can be multiplexed at a frequency obtained by multiplying the standard frequency by the ratio of the recording processing frame rate and the reproduction frame rate, and does not depend on the effective frame rate. The ATS clock can be controlled. For this reason, even when the effective frame rate fluctuates during recording, the ATS clock is constant, and the processing can be simplified.
なお、本発明の実施例においては、多重化としてＭＰＥＧ２−ＴＳを用いることを前提として説明したが、多重化の方式はこれに限るものではなく、例えばＭＰＥＧ２−ＰＳ（Ｐｒｏｇｒａｍ Ｓｔｒｅａｍ）などを用いてもよい。同様に、映像の圧縮符号化としてＭＰＥＧ２ビデオ符号化を用いることを前提として説明したが、圧縮符号化の方式もこれに限るものではなく、例えばＭＰＥＧ４ビデオ符号化、Ｈ．２６４ビデオ符号化、ＤＶＣ（Ｄｉｇｉｔａｌ Ｖｉｄｅｏ Ｃａｓｓｅｔｔｅ）における圧縮符号化などを用いてもよい。 The embodiments of the present invention have been described on the assumption that MPEG2-TS is used for multiplexing. However, the multiplexing method is not limited to this. For example, MPEG2-PS (Program Stream) is used. Also good. Similarly, the description has been made on the assumption that MPEG2 video coding is used as video compression coding. However, the compression coding method is not limited to this. H.264 video coding, compression coding in DVC (Digital Video Cassette), or the like may be used.
さらに、本実施例では、映像記録装置２が有効フレーム抽出部２０及び映像符号化部２１を備えているとして説明したが、これに限らず、映像記録装置２が、有効フレーム抽出部２０、映像符号化部２１、及び音声符号化部２４を備えていなくても構わない。この場合、映像記録装置２以外の外部の装置が有効フレーム抽出部２０、映像符号化部２１、及び音声符号化部２４を備えている。そして、撮像装置１から出力されたＸｐ映像信号６と有効フレームフラグ７は、この外部の装置で処理され、その結果外部の装置から圧縮映像データが出力される。そして、映像記録装置２は、この外部の装置から出力された圧縮映像データを入力してＴＳ多重部２２にてシステムストリームを生成する。このように、映像記録装置２自体が入力映像信号の圧縮符号化を行わず、映像記録装置２が圧縮符号化された圧縮映像データを入力して多重処理のみを行うものであっても構わない。
Furthermore, in the present embodiment, the
尚、本発明のプログラムは、上述した本発明の映像記録装置の全部又は一部の手段の機能をコンピュータにより実行させるためのプログラムであって、コンピュータと協働して動作するプログラムである。 The program of the present invention is a program for causing a computer to execute the functions of all or part of the above-described video recording apparatus of the present invention, and is a program that operates in cooperation with the computer.
又、本発明の記録媒体は、上述した本発明の映像記録装置の全部又は一部の手段（又は、装置、素子等）の機能をコンピュータにより実行させるためのプログラムを担持した記録媒体であり、コンピュータにより読み取り可能且つ、読み取られた前記プログラムが前記コンピュータと協動して前記機能を実行する記録媒体である。 The recording medium of the present invention is a recording medium carrying a program for causing a computer to execute the functions of all or part of the above-described video recording apparatus of the present invention (or the device, element, etc.). It is a recording medium that can be read by a computer, and the read program executes the function in cooperation with the computer.
尚、本発明の上記「一部の手段」とは、それらの複数の手段の内の、一つ又は幾つかの手段を意味する。 The “part of means” of the present invention means one or several means out of the plurality of means.
又、本発明の上記「手段の機能」とは、前記手段の全部又は一部の機能を意味する。
又、本発明のプログラムの一利用形態は、コンピュータにより読み取り可能な記録媒体に記録され、コンピュータと協働して動作する態様であっても良い。
Further, the “function of the means” of the present invention means all or a part of the function of the means.
Further, one usage form of the program of the present invention may be an aspect in which the program is recorded on a computer-readable recording medium and operates in cooperation with the computer.
又、本発明のプログラムの一利用形態は、伝送媒体中を伝送し、コンピュータにより読みとられ、コンピュータと協働して動作する態様であっても良い。 Further, one usage form of the program of the present invention may be an aspect in which the program is transmitted through a transmission medium, read by a computer, and operated in cooperation with the computer.
又、本発明のデータ構造としては、データベース、データフォーマット、データテーブル、データリスト、データの種類などを含む。 The data structure of the present invention includes a database, data format, data table, data list, data type, and the like.
又、記録媒体としては、ＲＯＭ等が含まれ、伝送媒体としては、インターネット等の伝送媒体、光・電波・音波等が含まれる。 The recording medium includes a ROM and the like, and the transmission medium includes a transmission medium such as the Internet, light, radio waves, sound waves, and the like.
又、上述した本発明のコンピュータは、ＣＰＵ等の純然たるハードウェアに限らず、ファームウェアや、ＯＳ、更に周辺機器を含むものであっても良い。 The computer of the present invention described above is not limited to pure hardware such as a CPU, but may include firmware, an OS, and peripheral devices.
尚、以上説明した様に、本発明の構成は、ソフトウェア的に実現しても良いし、ハードウェア的に実現しても良い。 As described above, the configuration of the present invention may be realized by software or hardware.
本発明にかかる映像記録装置は、例えば、ビデオカメラとして有用であり、特に映画におけるスローモーション効果やクイックモーション効果をフィルムではなく電子的なフレームレート変換処理により得るビデオカメラに適している。 The video recording apparatus according to the present invention is useful as, for example, a video camera, and is particularly suitable for a video camera that obtains a slow motion effect and a quick motion effect in a movie by electronic frame rate conversion processing instead of a film.
１ 撮像装置
２ 映像記録装置
３ 電子ビューファインダー
４ マイク
５ 制御部
６ ６０ｐ映像信号
７ 有効フレームフラグ
１０ ＣＣＤ
１１ フレームメモリ
１２ カメラ処理部
１３ ＣＣＤ駆動回路
１４ 駆動パルス切換回路
２０ 有効フレーム抽出部
２１ 映像符号化部
２２ ＴＳ多重部
２３ 記録部
２４ 音声符号化部
DESCRIPTION OF
DESCRIPTION OF
Claims (9)
前記圧縮映像データに前記時刻管理情報を多重化したシステムストリームを生成する多重手段と、
前記多重手段において生成される前記システムストリームを記録媒体に記録する記録手段とを備え、
入力されてくる前記映像信号の記録フレームレートと、前記システムストリームを記録再生および復号した後に得られる再生映像信号において予め設定されている再生フレームレートとが異なる場合において、
前記クロック発生手段は、間欠的にクロックを発生し、
前記多重手段は、前記再生フレームレートに対応した前記時刻管理情報を、前記クロック発生手段において発生された間欠的なクロックのタイミングで前記圧縮映像データに多重したシステムストリームを生成し、
前記記録手段は、当該システムストリームを前記記録媒体に記録する
ことを特徴とする映像記録装置。 A clock generation means for generating a clock serving as a reference for the time in order to multiplex time management information for defining a time related to a decoding process on compressed video data generated by compressing and encoding a video signal;
Multiplexing means for generating a system stream in which the time management information is multiplexed with the compressed video data;
Recording means for recording the system stream generated by the multiplexing means on a recording medium,
In the case where the recording frame rate of the input video signal is different from the preset playback frame rate in the playback video signal obtained after recording and playback and decoding of the system stream,
The clock generating means intermittently generates a clock,
The multiplexing means generates a system stream in which the time management information corresponding to the reproduction frame rate is multiplexed with the compressed video data at an intermittent clock timing generated by the clock generation means;
The video recording apparatus, wherein the recording unit records the system stream on the recording medium.
入力されてくる前記映像信号が、各フレームを１回または複数回繰り返すことにより生成された映像信号である場合であって、入力されてくる前記映像信号の生成元となったフレームである有効フレームを示す有効フレームフラグが入力される場合、入力されてくる前記有効フレームフラグを利用して入力されてくる前記映像信号から前記有効フレームを検出する有効フレーム検出手段を備え、
前記クロック発生手段は、検出される前記有効フレームに相当する期間のみクロックを発生し、前記有効フレーム以外の期間である無効フレームに相当する期間ではクロックを停止することで間欠的にクロックを発生する
ことを特徴とする請求項１記載の映像記録装置。 The video recording device further includes:
The input video signal is a video signal generated by repeating each frame one or more times, and is an effective frame that is a frame from which the input video signal is generated When an effective frame flag indicating is input, it includes effective frame detection means for detecting the effective frame from the video signal input using the input effective frame flag,
The clock generation means generates a clock only during a period corresponding to the detected effective frame, and intermittently generates a clock by stopping the clock during a period corresponding to an invalid frame other than the effective frame. The video recording apparatus according to claim 1.
復号処理の動作基準となる基準クロックを逓倍するＰＬＬ（Ｐｈａｓｅ Ｌｏｃｋｅｄ Ｌｏｏｐ）部と、
前記ＰＬＬ部から入力されるクロックに対して、前記有効フレームに相当する期間のみクロックを発生し、前記無効フレームに相当する期間ではクロックを停止するためのクロック停止スイッチ部と、
前記記録フレームレートと前記再生フレームレートとが等しい場合には、前記基準クロックが前記ＰＬＬ部及び前記クロック停止スイッチ部を通らないようにし、前記記録フレームレートと前記再生フレームレートとが異なる場合には、前記ＰＬＬ部及び前記クロック停止スイッチ部を通るように回路を選択する切替スイッチ部とを備える
ことを特徴とする請求項２記載の映像記録装置。 The clock generation means includes
A PLL (Phase Locked Loop) unit that multiplies a reference clock that is an operation reference for decoding processing;
A clock stop switch unit for generating a clock only for a period corresponding to the valid frame with respect to a clock input from the PLL unit, and for stopping the clock in a period corresponding to the invalid frame;
When the recording frame rate and the reproduction frame rate are equal, the reference clock is prevented from passing through the PLL unit and the clock stop switch unit, and the recording frame rate and the reproduction frame rate are different. The video recording apparatus according to claim 2, further comprising: a selector switch unit that selects a circuit so as to pass through the PLL unit and the clock stop switch unit.
前記記録フレームレートより大である記録処理フレームレートに同期して動作し、入力される映像信号の前記有効フレームと前記無効フレームとで処理を切り替える制御部を備える
ことを特徴とする請求項３記載の映像記録装置。 The clock generation means further includes:
4. A control unit that operates in synchronization with a recording processing frame rate that is greater than the recording frame rate, and that switches processing between the valid frame and the invalid frame of an input video signal. Video recording device.
ことを特徴とする請求項４記載の映像記録装置。 The control unit further controls the clock stop switch unit by transmitting a timing signal so as to generate a clock only during a period corresponding to the effective frame detected by the effective frame detection unit. Item 5. The video recording apparatus according to Item 4.
ことを特徴とする請求項１記載の映像記録装置。 The clock generation means generates a clock having a reference clock frequency F when the recording frame rate and the reproduction frame rate are equal, and when the recording frame rate Xp and the reproduction frame rate X are different, The video recording apparatus according to claim 1, wherein a clock having a frequency of F × Y / X is generated, where Y is a processing frame rate.
ことを特徴とする請求項１記載の映像記録装置。 The multiplexing means performs multiplexing corresponding to the MPEG standard, and the time management information is PCR (Program Clock Reference) or SCR (System Clock Reference), which is a timing reference for decoding and output (display), and each frame after decoding The video recording apparatus according to claim 1, further comprising: a PTS (Presentation Time Stamp) indicating the output timing of the video and a DTS (Decoding Time Stamp) indicating the timing of the decoding.
前記システムストリームを構成する前記パケットに再生処理に関する時刻を規定するパケット再生時刻情報を生成する生成部と、
前記パケット再生時刻情報である第二の多重信号を、前記クロック発生手段において発生される間欠的なクロックのタイミングで前記多重手段において生成される前記システムストリームに多重する第二多重部とを備える
ことを特徴とする請求項１記載の映像記録装置。 The recording means further includes:
A generating unit that generates packet reproduction time information that defines a time related to reproduction processing for the packets constituting the system stream;
A second multiplexing unit that multiplexes the second multiplexed signal, which is the packet reproduction time information, with the system stream generated by the multiplexing unit at an intermittent clock timing generated by the clock generating unit. The video recording apparatus according to claim 1.
前記圧縮映像データに前記時刻管理情報を多重化したシステムストリームを生成する多重ステップと、
前記多重ステップにおいて生成される前記システムストリームを記録媒体に記録する記録ステップとを含み、
入力されてくる前記映像信号の記録フレームレートと、前記システムストリームを記録再生および復号した後に得られる再生映像信号において予め設定されている再生フレームレートとが異なる場合において、
前記クロック発生ステップにおいては、間欠的にクロックを発生し、
前記多重ステップにおいては、前記再生フレームレートに対応した前記時刻管理情報を、前記クロック発生ステップにおいて発生された間欠的なクロックのタイミングで前記圧縮映像データに多重したシステムストリームを生成し、
前記記録ステップにおいては、当該システムストリームを前記記録媒体に記録する
ことを特徴とする映像記録方法。 A clock generation step of generating a clock serving as a reference for the time in order to multiplex time management information that defines a time related to a decoding process, with respect to compressed video data generated by compressing and encoding a video signal;
A multiplexing step for generating a system stream in which the time management information is multiplexed with the compressed video data;
Recording the system stream generated in the multiplexing step on a recording medium,
In the case where the recording frame rate of the input video signal is different from the preset playback frame rate in the playback video signal obtained after recording and playback and decoding of the system stream,
In the clock generation step, a clock is intermittently generated,
In the multiplexing step, a system stream is generated by multiplexing the time management information corresponding to the reproduction frame rate with the compressed video data at the intermittent clock timing generated in the clock generation step,
In the recording step, the system stream is recorded on the recording medium.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005346735A JP2007158432A (en) | 2005-11-30 | 2005-11-30 | Video recording device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005346735A JP2007158432A (en) | 2005-11-30 | 2005-11-30 | Video recording device |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2007158432A true JP2007158432A (en) | 2007-06-21 |
Family
ID=38242258
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2005346735A Pending JP2007158432A (en) | 2005-11-30 | 2005-11-30 | Video recording device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2007158432A (en) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007312007A (en) * | 2006-05-17 | 2007-11-29 | Sony Corp | Unit and method for processing moving image data, stream-generating device, and imaging apparatus |
| JP2007312006A (en) * | 2006-05-17 | 2007-11-29 | Sony Corp | Device and method for generating stream, imaging apparatus, and data processing unit |
| JP2011518469A (en) * | 2008-03-20 | 2011-06-23 | トムソン ライセンシング | System and method for controlling playback time of transport stream data stored in a multi-channel broadcast multimedia system |
| JP2012065175A (en) * | 2010-09-16 | 2012-03-29 | Casio Comput Co Ltd | Camera shake correction device, camera shake correction method, and program |
| US8561105B2 (en) | 2008-11-04 | 2013-10-15 | Thomson Licensing | System and method for a schedule shift function in a multi-channel broadcast multimedia system |
-
2005
- 2005-11-30 JP JP2005346735A patent/JP2007158432A/en active Pending
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007312007A (en) * | 2006-05-17 | 2007-11-29 | Sony Corp | Unit and method for processing moving image data, stream-generating device, and imaging apparatus |
| JP2007312006A (en) * | 2006-05-17 | 2007-11-29 | Sony Corp | Device and method for generating stream, imaging apparatus, and data processing unit |
| US8073313B2 (en) | 2006-05-17 | 2011-12-06 | Sony Corporation | Moving picture data processing apparatus, stream generating apparatus, imaging apparatus, and moving picture data processing method |
| US8195024B2 (en) | 2006-05-17 | 2012-06-05 | Sony Corporation | Stream generating apparatus, imaging apparatus, data processing apparatus and stream generating method |
| JP2011518469A (en) * | 2008-03-20 | 2011-06-23 | トムソン ライセンシング | System and method for controlling playback time of transport stream data stored in a multi-channel broadcast multimedia system |
| US8711862B2 (en) | 2008-03-20 | 2014-04-29 | Thomson Licensing | System, method and apparatus for pausing multi-channel broadcasts |
| US9191608B2 (en) | 2008-03-20 | 2015-11-17 | Thomson Licensing | System and method for displaying priority transport stream data in a paused multi-channel broadcast multimedia system |
| US8561105B2 (en) | 2008-11-04 | 2013-10-15 | Thomson Licensing | System and method for a schedule shift function in a multi-channel broadcast multimedia system |
| JP2012065175A (en) * | 2010-09-16 | 2012-03-29 | Casio Comput Co Ltd | Camera shake correction device, camera shake correction method, and program |
| US8571386B2 (en) | 2010-09-16 | 2013-10-29 | Casio Computer Co., Ltd. | Motion blur correction device and motion blur correction method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8699863B2 (en) | Video recording apparatus, multiplexing method, picture encoding method, program, and recording medium for variable frame-rate recording | |
| JP4669902B2 (en) | Video recording apparatus, multiplexing method, program, and recording medium | |
| JP4904914B2 (en) | STREAM GENERATION DEVICE, IMAGING DEVICE, AND STREAM GENERATION METHOD | |
| JP5258885B2 (en) | Encoded stream reproduction apparatus and encoded stream reproduction method | |
| JPH08195072A (en) | Device and method for recording/reproducing digital data | |
| JP4515465B2 (en) | Moving picture photographing apparatus and moving picture photographing method, moving picture reproducing apparatus and moving picture reproducing method for reproducing a video signal recorded on a recording medium | |
| JP4221669B2 (en) | Recording apparatus and method, recording medium, and program | |
| US20050013593A1 (en) | Method and apparatus for guaranteeing seamless reproduction of a plurality of data streams | |
| JP2004349993A (en) | Image recording device | |
| JP3951839B2 (en) | Image data reproducing apparatus and method | |
| KR20040080930A (en) | Information processing apparatus and method | |
| JP2007158432A (en) | Video recording device | |
| JP2005303336A (en) | Video signal recording apparatus and video signal reproducing apparatus | |
| JP2021078045A (en) | Output control device, output control method, and program | |
| JP2002354419A (en) | Recording reproducing equipment and method therefor, recording medium and program thereof | |
| JP5046907B2 (en) | Recording apparatus, control method therefor, and program | |
| US7239795B2 (en) | Picture data reproducing apparatus and method | |
| JP2006065962A (en) | Device and method for reproducing | |
| US7382972B2 (en) | Recording apparatus and method | |
| JP3897783B2 (en) | Image processing apparatus, control method therefor, computer program, and computer-readable storage medium | |
| JP2005322977A (en) | Recording reproducing device intergrated with camera | |
| JP2015029211A (en) | Imaging device | |
| JP2005159525A (en) | Digital reproducing apparatus or reproducing method | |
| JP2003333526A (en) | Encoding method of intermittent moving picture signal, recording apparatus, reproducing apparatus, and recording and reproducing apparatus | |
| JP2005011453A (en) | Digital information recorder |