WO2006003808A1

WO2006003808A1 - 符号化または復号化装置、および記録再生端末

Info

Publication number: WO2006003808A1
Application number: PCT/JP2005/011286
Authority: WO
Inventors: Toshiyasu Sugio; Hiroaki Toida; Takahiro Nishi; Tadamasa Toma; Hisao Sasai
Original assignee: Matsushita Electric Industrial Co., Ltd.
Priority date: 2004-07-06
Filing date: 2005-06-20
Publication date: 2006-01-12
Also published as: JPWO2006003808A1; EP1768401A4; CN100477770C; EP1768401A1; KR20070038957A; JP4709154B2; WO2006003808A8; CN1954601A; US20070258702A1

Abstract

　本発明は、汎用スロットを持つ記録再生端末に、取り外し可能な符号化または復号化装置を提供することを目的とする。　音声または画像を表す信号を記録または再生する記録再生端末１０３と、記録再生端末１０３に着脱自在に接続されるリムーバブル型符号化装置１００とを備える記録再生装置であって、記録再生端末１０３は、記録再生端末１０３に関する情報である端末情報を格納する端末情報格納部１０５を備え、リムーバブル型符号化装置１００は、記録再生端末１０３に接続されると、端末情報を記録再生端末１０３から取得する端末情報取得部１０１と、取得された端末情報に基づいて、音声または画像を表す信号を符号化または復号化する信号変換部１０２とを備える。

Description

明細書

符号化または復号化装置、および記録再生端末

技術分野

[0001] 本発明は、映像信号や音声信号を圧縮符号ィ匕する取り外し可能な符号ィ匕または復号ィ匕装置と、符号ィヒまたは復号ィヒ装置が着脱される記録再生端末等に関する。背景技術

[0002] 地上波デジタル放送の開始や、カメラ付き携帯などの普及により、映像や音声をノ、ードディスクや蓄積メディア等に保存するコーデック手法が多様化して、る。例えば、映像の分野では MPEG2、 MPEG4や MPEG4—AVC、音声の分野では AMRや MPEG4—AACなどが知られて!/、る。 DVDレコーダやカメラ付き携帯電話機および車載端末などの製品は、各機器間の AV連携をとるために、製品本来のメイン機能とは別に上記複数のコーデック手法を専用 LSIやソフトとして搭載する。これにより、製品のコストが上昇している。また、規格等で使用するコーデック手法が変化した場合、古、製品は新 U、コーデック手法による符号ィ匕データを受け取る手段を備えて、たとしても、それを復号ィ匕する手段を備えていないため、受け取った符号ィ匕データから映像や音声を再生することができない。さらに、どのようなコーデック手法の復号化装置を製品に搭載するかはメーカ側のお仕着せになっており、ユーザは製品を購買する際に必要なコーデック手法を選択することができず、頻繁に使用しな、コ一デック手法にまで料金を支払う必要がある。

[0003] 上記課題を解決するための例として、以下のような特許文献が開示されている。

[0004] 第 1の例は、様々な符号ィ匕方式に対応したデータ再生装置に関するものである。

[0005] 図 1は、第 1の例である従来の携帯型データ再生装置の構成を示すブロック図である。携帯型データ再生装置 700は、符号化データとその符号化データを復号するデコードプログラムとを格納した半導体メモリカード 701がスロットに挿入されれば、半導体メモリカード 701内のデコードプログラムをデコード手段 702内のメモリ 703にロードする。そして次に半導体メモリカード 701内の符号ィ匕データを読み出し、メモリ 703 にロードしたデコードプログラムを用いて符号ィ匕データを復号して再生する。図 1のような構造にすれば、半導体メモリカード 701内のデコードプログラムを変更することで、携帯型データ再生装置 1は様々な符号ィ匕方式に対応できる (特許文献 1参照。 ) o [0006] 第 2の例は、 PCカード間におけるビデオデータ転送の効率向上に関するものである。このシステムを利用した動画像エンコーダシステムの構成例を図 2に示す。図 2は、第 2の例である従来の動画像エンコーダシステムの構成を示すブロック図である。図 2では、外部のビデオカセットレコーダ (VCR) 801から入力したビデオ信号をビデォキヤプチャボード 802でデジタル化し、 PCIバス 805を使用しな!、カード間ダイレクトパス 804を用いてエンコーダカード 803に入力する。エンコーダカード 803は入力されたデジタルのビデオ信号を符号化し、 PCIバス 805経由でシステムのメモリ 807 に転送される。これにより、ビデオデータなどをシステムバスを介さずに PCカード間で直接転送できるようになり、 CPU808の負荷を軽減し、システムバスの性能に依存しな、複数の PCカードを使用したシステムを構築できる。以上の動画像エンコーダシステムを用いれば、エンコーダカードを差し替えることによって様々な符号ィ匕方式に対応したエンコードシステムを構築することができる (特許文献 2参照。 )。

特許文献 1 :特開 2000— 13237号公報

特許文献 2 :特開平 9 237166号公報

発明の開示

発明が解決しょうとする課題

[0007] しかしながら、特許文献 1では、携帯型データ再生装置 700はデコード手段 702を実現するための LSIを搭載する必要があるため、再生装置のコストを削減できるわけではなぐ上記課題を完全には解決できない。また、記録装置に関する内容は記載されていない。

[0008] また、特許文献 2では、記録装置側に複数の PCIスロットを用意し、カード間ダイレタトパスを持つ PCカードコントローラを備える必要があり、記録装置への実装負担が大きい。また、符号ィ匕データをエンコーダシステム内部のメモリに格納するため、ェンコーダカード 803に符号ィ匕データを格納し、他の機器に挿入して復号するといつたことができな、ため、 AV機器間でビデオデータなどのデータを共有すると、つた AV 機器の連携に不向きである。 [0009] 本発明は、上記課題を解決するためになされたもので、多様なコーデック手法に対応できる符号ィ匕または復号ィ匕装置およびそのような符号ィ匕または復号ィ匕装置を備えた記録再生端末を提供することを目的とする。

課題を解決するための手段

[0010] 上記課題を解決するため、本発明の記録再生端末は、符号化または復号化装置が着脱自在に接続され、音声または画像を表す信号を記録または再生する記録再生端末であって、自己の記録再生端末の記録再生能力に関する情報である端末情報を格納し、前記符号ィヒまたは復号ィヒ装置が接続されると、前記端末情報を前記符号化または復号化装置に出力する端末情報格納手段と、音声または画像を表す信号を記録する時には、音声または画像を表す前記信号を、前記符号化または復号化装置に送信することによって符号化させる信号送信手段とを備えることを特徴とする。

[0011] また、本発明において、前記記録再生端末は、さらに、音声または画像を表す信号を符号化して得られる符号化データを、前記符号化または復号化装置の内部に格納させるとしてもよい。

[0012] さらに、本発明において、前記端末情報は、前記記録再生端末に内蔵される内蔵符号化または復号化装置の有無を示す情報を含み、前記記録再生端末は、前記内蔵符号化または復号化装置がな!ヽ場合、音声または画像を含む前記信号を前記符号ィ匕または復号ィ匕装置に符号化させるとしてもよい。

[0013] さらに、本発明において、前記記録再生端末は、前記内蔵符号化または復号化装置がない場合、前記符号化または復号化装置に格納されている前記符号化データを前記符号ィヒまたは復号ィヒ装置で復号して得られた音声または画像を表す信号を前記符号化または復号化装置から受信し、再生する再生手段を備えるとしてもよい。

[0014] また、本発明において、前記端末情報は、前記内蔵符号化または復号化装置の符号化形式を示す符号化形式情報を含み、前記記録再生端末は、さらに、音声または画像を表す信号を所定の符号化形式で符号化または復号化する内蔵符号化または復号ィ匕装置を備え、前記符号ィ匕または復号ィ匕装置に格納されている前記符号ィ匕データの符号化形式が、前記符号化形式情報に示される符号化形式と異なる場合、前記再生手段は、前記符号化または復号化装置で復号して得られた音声または画像を含む前記信号を受信して再生し、前記符号化形式情報に示される符号化形式と一致する場合、前記内蔵符号ィヒまたは復号ィヒ装置は前記符号ィヒデータをそのまま受信して復号するとしてもよい。

[0015] また、本発明において、前記記録再生端末は、さらに、前記符号化または復号ィ匕装置が、互いに異なる複数の符号ィ匕形式で符号ィ匕または復号ィ匕を行うことができる場合、前記符号化または復号化装置から、選択可能な前記符号化形式の通知を受信する符号化形式通知受信手段と、前記符号化または復号化装置から通知された複数の前記符号化形式を表示し、利用者から 1つの符号化形式の選択を受け付ける符号化形式選択手段とを備え、前記記録再生端末は、利用者に選択された符号ィ匕形式で、音声または画像を表す信号を前記符号ィ匕または復号ィ匕装置に符号化させるとしてちよい。

[0016] さらに、本発明において、前記端末情報は、前記記録再生端末に内蔵される内蔵符号化または復号化装置の有無を示す情報と、前記内蔵符号化または復号化装置がある場合、前記内蔵符号化または復号化装置の符号化形式を示す符号化形式情報とを含み、前記記録再生端末は、前記符号ィヒまたは復号ィヒ装置に格納されている前記符号化データの符号化形式が、 (1)前記符号化形式情報に示される符号化形式と異なる場合、符号化形式が前記符号化形式情報に示される符号化形式に変換された符号化データを受信し、 (2)前記符号化形式情報に示される符号化形式と一致する場合、前記符号化データをそのまま受信する符号化データ受信手段とを備えるとしてちよい。

[0017] また、本発明において、前記記録再生端末は、さらに、前記符号化または復号ィ匕装置による符号化または復号化処理の作業領域として提供可能なメモリと、前記符号化または復号化装置から前記メモリの使用要求を受信するメモリ使用要求受信手段と、前記使用要求を受信すると、前記メモリの一部または全部の領域を前記符号化または復号ィ匕装置に使用させるメモリ制御部とを備えるとしてもよい。

[0018] さらに、本発明において、前記端末情報は、前記記録再生端末に備えられる前記メモリの空き容量を示すメモリ情報を含み、前記記録再生端末は、さらに、前記メモリの空き容量を定期的に検出する空き容量検出手段と、前記メモリ制御部は、新たに検出された空き容量の値で、前記端末情報内の前記メモリ情報を更新するとしてもよい

[0019] また、本発明の符号化または復号化装置は、音声または画像を表す信号を記録または再生する記録再生端末に、着脱自在に接続される符号化または復号化装置であって、前記記録再生端末に接続されると、前記記録再生端末の記録再生能力に関する情報である端末情報を前記記録再生端末から取得する端末情報取得手段と、取得された前記端末情報に基づいて、音声または画像を表す信号を符号化または復号化する符号化復号化手段とを備えることを特徴とする。

[0020] さらに、本発明において、前記端末情報は、前記記録再生端末に内蔵される内蔵符号化または復号化装置の有無を示す情報と、前記内蔵符号化または復号化装置がある場合、前記内蔵符号化または復号化装置の符号化形式を示す符号化形式情報とを含み、前記符号化復号化手段は、さらに、前記符号化データ格納手段に格納されている前記符号化データの符号化形式が、（1)前記符号化形式情報に示される符号化形式と異なる場合、前記符号化データの符号化形式を前記符号化形式情報に示される符号化形式に変換し、 (2)前記符号化形式情報に示される符号化形式と一致する場合、前記符号ィヒデータをそのまま前記記録再生端末に送信するトランスコーディング部を備えるとしてもよい。

[0021] また、本発明において、前記符号化復号化手段は、異なる符号化形式で符号化または復号化を行う複数の符号化復号化部を備え、前記符号化復号化手段は、複数の前記符号ィ匕形式のうち、前記符号ィ匕データのビット数が最小となる符号ィ匕形式の前記符号ィ匕復号ィ匕部により音声または画像を表す信号を符号ィ匕するとしてもよい。

[0022] さらに、本発明において、前記符号化復号化手段は、音声または画像を含む前記信号が動画像信号である場合、前記符号化データ格納手段の空き容量に応じて、前記動画像信号のフレームレートと解像度とのうち少なくとも 1つを変換し、変換後の信号を符号ィ匕するとしてもよい。

[0023] また、本発明におヽて、前記符号化データ格納手段は、前記符号化または復号化装置に着脱自在に接続されるメモリカードに備えられるとしてもよ、。 [0024] さらに、本発明において、前記符号化復号化手段は、ビデオ符号化と、ビデオ復号化と、音声符号化と、音声復号化と、ビデオトランスコーディングと、音声トランスコーデイングのうち少なくとも 1つを行うとしてもよい。

[0025] なお、本発明は、このような符号ィ匕または復号ィ匕装置や記録再生端末として実現することができるだけでなぐこのような符号ィ匕または復号ィ匕装置や記録再生端末が備える特徴的な手段をステップとする符号ィヒまたは復号ィヒ方法や記録再生方法として実現したり、それらのステップをコンピュータに実行させるプログラムとして実現したりすることもできる。そして、そのようなプログラムは、 CD—ROM等の記録媒体やインターネット等の伝送媒体を介して配信することができるのは言うまでもない。発明の効果

[0026] 以上のように、本発明の記録再生端末によれば、記録再生端末に着脱可能な符号化または復号ィ匕装置を接続するだけで音声または画像を表す信号の符号ィ匕および復号ィ匕を行うことができるという効果を有する。また、記録再生端末にコーデック LSI やソフトコーデックを搭載する必要がなくなり、コストの削減につながるという効果を有する。また、規格等で使用するコーデック手法に変更が生じた場合でも、新しいコーデック手法に対応した符号化または復号化装置を挿入すれば、古!ヽ記録再生端末でも対応可能となるという効果を有する。また、ユーザは使用用途に応じて符号ィ匕または復号ィ匕装置を交換することができ、ユーザ嗜好に基づ、た記録再生端末を提供することができる、という効果を有する。

[0027] また、本発明によると、符号ィ匕または復号ィ匕装置を別の符号ィ匕または復号ィ匕装置に入れ替えることによって、ビデオまたは音声の符号化、復号ィ匕およびトランスコーデイングを切り替えることができる、という効果を有する。

[0028] また、本発明によると、符号化または復号化装置が記録再生端末に挿入されると、符号ィ匕または復号ィ匕装置は記録再生端末の端末情報を取得するため、ビデオ等の符号ィ匕および復号ィ匕を行う度に端末情報を取得する必要がなくなる、という効果を有する。

[0029] また、本発明によると、生成した符号化データを符号化または復号化装置の符号化データ格納手段に格納するため、いろいろな記録再生端末間で符号ィ匕または復号化装置を交換し、符号ィヒまたは復号ィヒ装置内の符号ィヒデータ格納手段に格納された符号ィヒデータを再生することが可能となり、記録再生端末間の AV連携が容易になる、という効果を有する。

[0030] また、本発明によると、記録再生端末と符号化または復号化装置との間の最大データ転送量情報を取得することによって、符号ィ匕または復号ィ匕装置で復号したビデオのフレームレートまたは解像度を前記最大データ転送量に応じて変換することが可能となり、記録再生端末でのリアルタイム再生または、復号時より高画質なビデオの再生が可能となる、という効果を有する。

[0031] また、本発明によると、記録再生装置の表示デバイスに適当な解像度情報を取得することによって、符号ィ匕または復号ィ匕装置は復号したビデオの解像度を記録再生装置にあわせて変換することができ、符号ィ匕または復号ィ匕装置を挿入する端末毎に適当な解像度のビデオを出力することができる、という効果を有する。

[0032] また、本発明によると、記録再生端末の持つ内蔵符号ィ匕装置情報を取得し、記録再生端末が復号できる符号化形式は符号化データとして転送することによって、サイズの大きい復号後のビデオを転送するよりも転送量を抑えることができる、という効果を有する。

[0033] また、本発明によると、記録再生端末で作成した符号化データを符号化または復号化装置内の内部メモリ内に直接格納することが可能となり、複数の符号ィ匕形式を内部メモリに保持することができる、という効果を有する。

[0034] また、本発明によると、符号ィ匕または復号ィ匕装置の内部メモリの空き容量に応じて、記録再生端末力受信したビデオのフレームレートおよび解像度を低下させることによって、記録中に内部メモリの空き容量が不足することを防止できる、という効果を有する。

[0035] また、本発明によると、記録再生端末が新しいコーデック形式に対応していない古い製品でも、 SDスロット等の汎用スロットさえ保持していれば、符号化または復号ィ匕装置で新しいコーデック形式の符号ィ匕データにトランスコーディングすることにより、再生が可能となる、という効果を有する。

[0036] また、本発明によると、符号化データを格納する符号化データ格納手段が符号化または復号ィ匕装置力取り外し可能となり、符号ィ匕データを格納するメモリの空き容量が不足した場合に、符号化または復号化装置自体を取り替えずに、半導体メモリだけを交換することによって、新たなビデオの符号ィ匕および復号ィ匕を行うことができる、という効果を有する。

図面の簡単な説明

[図 1]図 1は、第 1の例である従来の携帯型データ再生装置の構成を示すブロック図である。（従来技術）

[図 2]図 2は、第 2の例である従来の動画像エンコーダシステムの構成を示すブロック図である。

[図 3]図 3は、本発明の実施の形態 1の記録再生装置の一例を表すブロック図である。（実施の形態 1)

[図 4]図 4は、記録再生端末からリムーバブル型符号ィ匕装置の内部メモリへデータを転送する際の記録再生装置の動作を示すフローチャートである。

[図 5]図 5は、リムーバブル型符号化装置の内部メモリから記録再生端末へデータを転送する際の記録再生装置の動作を示すフローチャートである。

[図 6]図 6 (a)は、端末情報の記述の一例を示す表である。図 6 (b)は、端末情報に示される各項目の IDと IDが示す各項目の内容との関係を示す端末情報テーブルの一例を示す表である。

[図 7]図 7は、本実施の形態 1における信号変換部の内部構造を示したブロック図である。

[図 8]図 8は、記録再生端末力データが転送されてきた場合の信号変換部の動作を示すフローチャートである。

[図 9]図 9は、ビデオデータの変換パラメータを求める場合の手順を示すフローチヤ一トである。

[図 10]図 10は、内部メモリに格納されているデータを外部にデータ転送する場合の信号変換部の動作を示すフローチャートである。

[図 11]図 11は、変換パラメータを決定する制御部の動作を示すフローチャートである [図 12]図 12は、図 4に示した解像度変換部の内部構造を示したブロック図である。

[図 13]図 13は、図 12に示した解像度変換部の動作を示すフローチャートである。

[図 14]図 14は、図 7に示したフレームレート変換部の内部構造を示したブロック図である。

[図 15]図 15は、図 14に示したフレームレート変換部の動作を示すフローチャートである。

[図 16]図 16は、本実施の形態 1の記録再生装置の他の例を示すブロック図である。圆 17]図 17 (a)および (b)は、端末情報格納部に格納される端末情報および端末情報テーブルを示す図である。

[図 18]図 18は、実施の形態 2の記録再生装置の一例を示すブロック図である。（実施の形態 2)

[図 19]図 19は、実施の形態 2における信号変換部の内部構造を示したブロック図である。

[図 20]図 20は、トランスコーディングを行う場合の図 19に示した信号変換部の動作を示すフローチャートである。

[図 21]図 21は、実施の形態 3の記録再生装置の一例を示すブロック図である。（実施の形態 3)

[図 22]図 22は、図 21に示した信号変換部の内部構成を示すブロック図である。

[図 23]図 23は、実施の形態 4の記録再生装置の一例を示すブロック図である。（実施の形態 4)

[図 24]図 24は、図 23に示した信号変換部の内部構成の一例を示すブロック図である。

[図 25]図 25は、信号変換部内の 1つのエンコード部を用いてビデオデータを符号ィ匕する際の制御部の動作を示すフローチャートである。

[図 26]図 26は、ユーザに選択された符号化形式でビデオデータを符号化する場合の制御部の動作を示すフローチャートである。

[図 27]図 27は、リムーバブル型符号ィ匕装置を交換するだけで家電機器間での AV連携を行う AV連携ネットワークの一例を示す図である。符号の説明

100 リムーバブル型符号ィヒ装置

101 端末情報取得部

102 信号変換部

103 記録再生端末

104 SDスロット

105 端末情報格納部

106 内部メモリ

107 カメラ

108 ディスプレイ

140 記録再生端末

141 制御部

142 メモリ

143 端末情報格納部

150 リムーバブル型符号ィヒ装置

151 端末情報取得部

152 信号変換部

201 制御部

202 MPEG— AVCエンコード部

203 MPEG- AVCデコ一ド部

204 解像度変換部

205 フレームレート変換部

207 データバス

301 解像度変換判定部

302 部

303 画素補間部

401 フレームレート変換判定部

402 部 403 フレーム補間部

500 信号変換部

501 トランスコーディング部

502 制御部

600 リムーバブル型符号ィヒ装置

602 信号変換部

604 miniSDスロット

606 miniSDカード

700 携帯型データ再生装置

701 半導体メモリカード

702 デコード手段

703 メモリ

802 ビデオキヤプチヤボード

803 エンコーダカード

804 カード間ダイレクトパス

805 ノス

807 メモリ

808 CPU

1400 リムーバブル型符号化装置

1401 記録再生端末

1402 MPEG— SP復号化装置

2200 ICカード

2201 冷蔵庫

2202 テレビ

2203 カーナビゲーシヨン

2204 電子レンジ

2205 PDA

2206 携帯電話機 2210 カードスロット

2300 リムーバブル型符号ィ匕装置

2301 信号変換部

2401 制御部

2402 MPEG— ASPエンコード部

2403 MPEG— SPエンコード部

2404 MPEG— AVCエンコード部

2405 エンコード部

発明の実施するための最良の形態

[0039] 以下、図面を参照しながら本発明の実施の形態について説明する。

[0040] (実施の形態 1)

本実施の形態 1の記録再生装置は、記録再生端末には符号化装置を内蔵せず、内蔵カメラで撮影したビデオデータ等を着脱自在なリムーバブル型符号ィ匕装置で符号化し、符号化されたビデオデータ等をリムーバブル型符号ィ匕装置に内蔵のメモリ等に格納する。なお、実施の形態 1では、リムーバブル型符号化装置の信号変換部として MPEG4— AVCコーデック、記録再生端末の接続スロットとして SDスロット、ビデォデータの形式として YUV形式を例にとって説明する。また、本実施の形態 1では、記録再生端末には符号ィ匕装置が内蔵されていないものとする。

[0041] 図 3は、本発明の実施の形態 1の記録再生装置の一例を表すブロック図である。記録再生装置は、リムーバブル型符号ィ匕装置 100および記録再生端末 103を備え、リムーバブル型符号ィ匕装置 100と記録再生端末 103とは、例えば、 SDスロット 104などのカードスロットを介して相互に接続される。このリムーバブル型符号ィ匕装置 100は、記録再生端末 103から取得されたビデオデータ等を符号ィ匕して内部メモリに格納し、内部メモリに格納されている符号化データを復号して記録再生端末 103に送信する機能を備えた符号ィ匕装置であって、記録再生端末 103から端末情報を取得し、格納する端末情報取得部 101と、 MPEG4— AVCコ一デック処理を行う信号変換部 1 02とを備える。信号変換部 102は、さらに、内部メモリ 106を備え、内部メモリ 106は、端末情報取得部 101によって取得された端末情報を格納する他、信号変換部 102 によって符号化された符号化データを格納する。

[0042] 記録再生端末 103は、記録再生端末 103とリムーバブル型符号ィ匕装置 100との間のデータのやり取りに使用する SDスロット 104、記録再生端末 103の端末情報を格納している端末情報格納部 105、ビデオや静止画像を撮影するカメラ 107、画像やテキストを表示するためのディスプレイ 108を備える。

[0043] 記録再生端末 103は、リムーバブル型符号ィ匕装置 100が SDスロット 104に挿入されると、端末情報格納部 105に格納されている端末情報を、例えば、 SDインターフエースなどを介してリムーバブル型符号ィ匕装置 100に転送する。また、記録再生端末 103は内蔵のカメラ 107等で撮影したビデオデータや、ビデオデータ以外の通信等で得られた符号化済みの符号化データや、テキストファイル等のデータをリムーパブル型符号ィ匕装置 100に転送することによって、リムーバブル型符号ィ匕装置 100の端末情報取得部 101をデータの格納部として利用する。そして、ビデオデータを再生する場合や、テキストデータを表示する場合には、リムーバブル型符号化装置 100から対象データを読み込み、ディスプレイに表示する。

[0044] リムーバブル型符号ィ匕装置 100は、記録再生端末 103から SDインターフェースを介して転送されてきた端末情報を、端末情報取得部 101によって受信し、記録再生端末 103の最大データ転送量情報や解像度情報および内蔵符号化装置情報を取得する。そして、記録再生端末 103からデータが転送されると、データの種類に応じて変換処理を加えた後、内部メモリ 106に格納する。また、記録再生端末 103に内部メモリ 106のデータを転送する際にも、データの種類に応じて変換処理をカ卩え、記録再生端末 103に転送する。例えば、内部メモリ 106内のデータが MPEG2で符号ィ匕されている場合には、符号化データを MPEG2で復号化して記録再生端末 103に送出する。

[0045] 次に、実施の形態 1における記録再生端末 103からリムーバブル型符号ィ匕装置 10 0の内部メモリ 106へのデータ転送について図 4を用いて説明する。図 4は、記録再生端末 103からリムーバブル型符号ィ匕装置 100の内部メモリ 106へデータを転送する際の記録再生装置の動作を示すフローチャートである。まず、記録再生端末 103 は内蔵のカメラ 107等で撮影した YUV形式のビデオデータや、それ以外の通信等で得られた符号ィ匕済みの符号ィ匕データやテキストファイル等のデータを、 SDインタ一フェースを介してリムーバブル型符号ィ匕装置 100に転送する（ステップ S10)。信号変換部 102は受信したデータがビデオデータ力どうかを判定し (ステップ S 11)、ビデォデータならば MPEG4—AVC方式で符号ィ匕して信号変換部 102内の内部メモリ 106に格納する (ステップ S12)。信号変換部 102によって受信されたデータがビデォデータでなければ、受信したデータをそのまま内部メモリ 106に格納する（ステップ S13)。

[0046] 次に、実施の形態 1におけるリムーバブル型符号ィ匕装置 100の内部メモリ 106から記録再生端末 103へのデータ転送の流れについて図 5を用いて説明する。図 5は、リムーバブル型符号ィ匕装置 100の内部メモリ 106から記録再生端末 103へデータを転送する際の記録再生装置の動作を示すフローチャートである。まず、記録再生端末 103からリムーバブル型符号ィ匕装置 100にデータ転送要求が発生すると (ステップ S20)、端末情報取得部 101は記録再生端末 103の端末情報を、信号変換部 102 に送信する (ステップ S21)。次に信号変換部 102は、再生要求のあったデータが符号ィ匕データ力どうかを判定し (ステップ S22)、符号ィ匕データでなければ、そのまま記録再生端末 103に転送する (ステップ S27)。転送要求のあったデータが符号化データならば、その符号化形式が記録再生端末 103の内蔵符号化装置情報の符号化形式と一致するか否かを判定することにより、記録再生端末 103で復号可能かどうかを判定する (ステップ S23)。そして、記録再生端末 103で復号可能ならば、符号化データをそのまま記録再生端末 103に転送する (ステップ S27)。ただし、本実施の形態 1では、記録再生端末 103に符号ィ匕装置が内蔵されていない場合を想定しているので、端末情報には、記録再生端末 103に符号ィ匕装置が内蔵されていない旨が記述されている。このような場合、信号変換部 102は、ステップ S23において、再生要求のあったデータがどのような符号ィ匕形式の符号ィ匕データであっても記録再生端末 103で復号不可能と判定する。

[0047] 再生要求のあったデータが符号ィ匕データであり、記録再生端末 103で復号不可能ならば、信号変換部 102は、符号化データをリムーバブル型符号化装置 100内で復号可能かどうかを判定し (ステップ S24)、復号可能ならば内部メモリ 106の符号ィ匕デ一タを復号する。そして、端末情報取得部 101が取得した最大データ転送量情報と解像度情報によってフレームレートと解像度を変換し、変換後のビデオデータを記録再生端末 103に転送する (ステップ S25)。リムーバブル型符号ィ匕装置内でも復号不可能の場合は、記録再生端末 103に再生不可能の信号を送る (ステップ S26)。

[0048] なお、記録再生端末 103が符号化装置を内蔵している場合、記録再生端末 103は、リムーバブル型符号ィ匕装置 100から受信したデータが符号ィ匕データならば内蔵する符号ィ匕装置で復号して再生し、リムーバブル型符号ィ匕装置 100から受信したデータが符号化されてヽなヽビデオデータやテキストデータの場合は、そのまま再生または表示するものとする。

[0049] なお、ステップ S21はステップ S22と S23の間に行っても構わない。また、ステップ S 26の再生不可能の信号は、記録再生端末 103に再生ができないことが伝われば、エラー信号等のどのような方法であっても構わな、。

[0050] 次に、端末情報取得部 101が取得する記録再生端末 103の端末情報のフォーマツト例を図 6に示す。図 6 (a)は、端末情報の記述の一例を示す表である。図 6 (b)は、端末情報に示される各項目の IDと IDが示す各項目の内容との関係を示す端末情報テーブルの一例を示す表である。図 6 (a)に示すように、端末情報は最大データ転送量情報、解像度情報および内蔵符号化装置情報の内容がそれぞれ IDで記述される。最大データ転送量情報は、記録再生端末 103の持つ SDインターフェースの最大データ転送量を示している。図 6 (b)に示すように、最大データ転送量情報の IDが「0 」のとき、記録再生端末 103の SDインターフェースの最大データ転送量は 2MByte Zsecであり、 IDが「1」のとき、最大データ転送量は 4MByteZsecであり、 IDが「2」のとき、最大データ転送量は 8MByteZsecである。また、解像度情報は、記録再生端末 103のディスプレイ 108に適切な解像度を示している。図 6 (b)に示すように、解像度情報の IDが「0」のとき、適切な解像度は「SubQCIF」であり、 IDが「1」のとき適切な解像度は「QCIF」である。また、解像度情報の IDが「2」のとき、適切な解像度は「QVGA」であり、解像度情報の IDが「3」のとき、適切な解像度は「VGA」であり、解像度情報の IDが「4」のとき、適切な解像度は「SD」である。内蔵符号化装置情報は、記録再生端末 103に内蔵される内蔵符号化装置の符号化形式を示している。図 6 (b)の端末情報テーブルに示すように、内蔵符号化装置情報の IDが「0」のとき、記録再生端末 103には符号ィ匕装置が内蔵されていない。また、内蔵符号化装置情報の IDが「 1」のとき、内蔵されて、る符号化装置の符号化形式は「MPEG2」であり、内蔵符号化装置情報の IDが「2」のとき、内蔵されてヽる符号化装置の符号化形式は「MPEG4— SP」である。また、内蔵符号化装置情報の IDが「3」のとき、記録再生端末 103に内蔵されて、る符号化装置の符号化形式は「MPEG4— ASP」である。このように、端末情報に記述されている各項目の内容は図 5の端末情報テーブル内の ID番号で識別される。従って、図 6 (a)の端末情報の例では、記録再生端末 103 の最大データ転送量は 8MByteZsec、適切な解像度は QVGA、符号化装置は内蔵されて!、な!/、と!/、うことが表わされて!/、る。

[0051] 次に、本実施の形態 1における信号変換部 102の構成について説明する。図 7は、本実施の形態 1における信号変換部 102の内部構造を示したブロック図である。図 7 に示すように信号変換部 102は、端末情報取得部 101からの端末情報によって各部を制御する制御部 201と、 MPEG4— AVCのエンコード処理を行う MPEG4— AVC エンコード部 202と、 MPEG4—AVCのデコード処理を行う MPEG4—AVCデコード部 203と、ビデオの解像度変換を行う解像度変換部 204と、ビデオのフレームレートを変換するフレームレート変換部 205と、符号化データやテキストデータの格納および作業用メモリとして用いる内部メモリ 106と、データバス 207から成る。

[0052] 次に、データバス 207に記録再生端末 103からデータが転送されてきた場合の信号変換部 102の動作について図 8を用いて説明する。図 8は、記録再生端末 103からデータが転送されてきた場合の信号変換部 102の動作を示すフローチャートである。まず、データバス 207にデータが入力されると、制御部 201は入力データがビデォデータかどうかを判定する（ステップ S30)。入力データがビデオデータならば、制御部 201は入力ビデオデータの符号ィ匕後のデータサイズ力内部メモリ 106の空き容量を越えないように、フレームレートと解像度とをパラメータとして、入力ビデオデータを変換処理するための変換パラメータを、第一の所定の方法に従って決定する。そして、決定した変換パラメータをフレームレート変換部 205と解像度変換部 204とに送信する (ステップ S31)。フレームレート変換部 205は、受信した変換パラメータを用いてビデオデータのフレームレートを変換し、変換後のビデオデータを解像度変換部 204に転送する (ステップ S32)。解像度変換部 204は、受信した変換パラメ一タの値に従ってビデオの解像度を変換し、変換後のビデオデータを MPEG4— AV Cエンコード部 202に転送する（ステップ S33)。 MPEG4—AVCエンコード部 202は、入力されたビデオデータを MPEG4— AVC形式で符号化し、符号化データを内部メモリ 106に格納する（ステップ S34)。データバス 207にビデオデータ以外が入力された場合は、制御部 201は入力データをそのまま内部メモリ 106に格納する (ステツプ S35)。

[0053] なお、ステップ S32のフレームレート変換とステップ S33の解像度変換の順番は逆であっても構わない。

[0054] 次にビデオデータの変換パラメータを求める第一の所定の方法について説明する。図 9は、ビデオデータの変換パラメータを求める場合の手順を示すフローチャートである。ここでは、内部メモリ 106の空き容量に応じてビデオデータのフレームレートと解像度とを調節し、符号ィ匕データが内部メモリ 106の空き領域に格納できるように制御して、る。制御部 201はビデオデータのヘッダ等に格納されて、るビデオ情報から、ビデオのフレームレートと解像度とを取得する。そして、図 9のフローチャートに従つて、内部メモリ 106の空き容量に応じてビデオのフレームレートと解像度とを変換するための変換パラメータを決定する。以下、図 9のフローチャートを用いて、変換パラメータの決定法について説明する。まず、入力されたビデオデータのフレームレートと解像度とを、初期値として、それぞれ変数 framerateと変数 resolutionに設定する（ステップ S40)。なお、変数 framerateには入力ビデオデータのフレームレートの数値を、変数 resolutionには図 6の解像度情報に付加する ID番号のように、解像度が大きくなるほど番号が上昇する ID番号を格納する。次に、内部メモリ 106の空き容量が閾値 T H#frよりも小さぐかつ、変数 framerateが「1」より大きいかどうかを判定し (ステップ S4 1)、判定結果が真ならば、 framerateの値を「1」減らし、閾値 TH#frの値を半分にする (ステップ S42)。そして再びステップ S41の判定を行う。これらステップ S41と S42とを繰り返すことにより、内部メモリ 106の空き容量に応じてビデオのフレームレートを減少させるための変数 framerateを求める。次に、ステップ S41の判定結果が偽になれば、ステップ S43に進み、変数 framerateが「1」以下で、かつ、内部メモリ 106の空き容量が閾値 TH#reより小さぐかつ、変数 resolutionが「0」より大きいかを判定する。ステップ 43で判定結果が真ならば、変数 resolutionの値を「1」減らし、閾値 TH#reの値を半分にして力再びステップ S43の判定を行う。これらステップ S43と S44を繰り返すことで、フレームレートが「1」以下の場合に、内部メモリ 106の空き容量に応じてビデオの解像度を減少させるための変数 resolutionを求める。制御部 201は、以上の処理によって得られた変数 framerateと resolutionとを変換パラメータとし、それぞれフレームレート変換部 205と解像度変換部 204に送信する。

[0055] なお、今回はフレームレートを低下 (ステップ S41〜S42)させてから、解像度を低下 (ステップ S43〜S44)させたが、手順が逆であっても構わな!/、。

[0056] また、フレームレート変換部 205および解像度変換部 204による図 9に示したビデォデータのフレームレートおよび解像度の変換は、 MPEG4—AVCエンコード部 20 2が符号化を開始する前に 1回だけ行うとしてもよ、し、 MPEG4—AVCエンコード部 202による符号ィ匕中に、一定時間間隔で定期的にフレームレート変換部 205および解像度変換部 204を起動して行うとしてもよ、。

[0057] 次に、内部メモリ 106からデータバス 207を通して外部にデータ転送する場合の信号変換部 102の動作について説明する。図 10は、内部メモリ 106に格納されているデータを外部にデータ転送する場合の信号変換部 102の動作を示すフローチャートである。記録再生端末 103からデータ転送要求があると、制御部 201は転送要求のあったデータが符号ィ匕データどうかを判定し (ステップ S50)、符号ィ匕データでなければそのまま外部へ転送する (ステップ S57)。転送要求のあったデータが符号化データならば、制御部 201は、端末情報内の内蔵符号化装置情報から、転送要求のあつたファイル形式を記録再生端末 103で復号できる力否かを判断する (ステップ S51) 。記録再生端末 103で復号できると判断すれば、符号ィ匕データを内部メモリ 106から読み出し、そのまま外部へ出力する (ステップ S57)。符号化データを記録再生端末 103が復号できな!/、と判断したならば、信号変換部 102内の MPEG4 - AVCデコ一ド部 203で復号できるかどうかを判定し (ステップ S52)、復号できるならば、内部メモリ 106から読み出した符号ィ匕データを MPEG4—AVCデコード部 203に転送し、復号処理を行う。 MPEG4— AVCデコード部 203によって復号された YUV形式のビデォデータは、ピクチャ毎にいったん内部メモリ 106に格納される（ステップ S53)。次に、制御部 201は、端末情報内の最大データ転送量情報および解像度情報から、記録再生端末 103に転送するビデオのフレームレートおよび解像度を変換するための変換パラメータを第二の所定の方法によって決定し (ステップ S54)、決定した変換ノラメータをそれぞれフレームレート変換部 205と解像度変換部 204とに送信する。解像度変換部 204は、内部メモリ 106から YUV形式のビデオを読み出し、制御部 2 01から取得した変換パラメータに基づいて解像度変換を施し、フレームレート変換部 205に変換後のビデオを転送する (ステップ S55)。フレームレート変換部 205は、解像度変換部 204からビデオを受信し、制御部 201から取得した変換パラメータに基づいてビデオのフレームレートを変更しながら、外部へ出力する（ステップ S56)。記録再生端末 103でも MPEG4—AVCデコード部 203でも復号できない場合は、再生不可能の信号を外部に出力する (ステップ S58)。

[0058] なお、ステップ S58の再生不可能の信号は、記録再生端末 103に再生ができないことが伝われば、エラー信号等のどのような方法であっても構わない。

[0059] 次に、記録再生端末 103に転送するビデオのフレームレートおよび解像度を変換するための変換パラメータを求める第二の所定の方法について説明する。図 11は、変換パラメータを決定する制御部 201の動作を示すフローチャートである。制御部 2 01は、端末情報内の最大データ転送量情報と解像度情報とを用いて、図 11のフロ一チャートに従い、変換パラメータを決定する。以下、図 11のフローチャートを用いて変換パラメータの決め方を説明する。まず、初期値として、変数 resolutionに、図 6の解像度情報の ID番号を設定する (ステップ S60)。そして、最大データ転送量情報と変数 resolutionに格納された解像度の画像サイズとから、記録再生端末に転送可能なフレームレートを求め、変数 framerateに格納する（ステップ S61)。例えば、最大データ転送量が 4MByteZsec、解像度が VGAの場合、フレームレートは以下の式で求めることができる。

[0060] framerate = 4Mbyte/sec ÷ ( 640 X 480 X 1.5 ) Byte/frame = 9.1 fps

[0061] 次に、変数 framerateが「1」以下かどうかを判定し (ステップ S62)、判定結果が真ならば変数 resolutionの値を「1」減らす (ステップ S63)。そして、変数 resolutionが「0」よりも小さくなれば、転送不可能と判断し、終了する (ステップ S64)。変数 resolutionが「 0」以上ならば、再びステップ S61から S64を繰り返すことにより、フレームレートと解像度とを調整する。ステップ S62で変数 framerateが「1」より大きくなれば、フレームレートの最大値のクリッピングを行い (ステップ S65と S66)、処理を終了する。制御部 2 01は、以上の処理によって得られた変数 framerateと resolutionを変換パラメータとし、それぞれフレームレート変換部 205と解像度変換部 204とに送信する。

[0062] なお、今回はステップ S62においてフレームレートの最小値を「1」とした力「1」以上の値であっても構わない。また、ステップ S65と S66においてフレームレートの最大値を「30」とした力「30」以上の値であっても構わない。

[0063] 次に、解像度変換部 204の構成について説明する。図 12は、図 4に示した解像度変換部 204の内部構造を示したブロック図である。図 12に示すように解像度変換部 204は、制御部 201から受信した変換パラメータにより解像度変換部を切り替える解像度変換判定部 301と、 LPF(Low Pass Filter)を適用した後、画素を間引くことによりダウンコンバートを行う画素間引き部 302と、 LPFを用いて画素の補間を行うことによりアップコンバートを行う画素補間部 303から成る。

[0064] 次に、解像度変換部 204の動作について図 13のフローチャートを用いて説明する。図 13は、図 12に示した解像度変換部 204の動作を示すフローチャートである。まず、解像度変換判定部 301は、初期値として、入力ビデオデータのヘッダ力ゝら解像度を取得し、変数 org#resolutionに設定する（ステップ S70)。そして、変数 org#resolut ionと変換パラメータ resolutionの値を比較し、変換パラメータ resolutionの方が大きければ、 org#resolutionから resolutionへのアップコンバートを画素補間部 303によって行う（ステップ S72)。変換パラメータ resolutionの方が小さければ、 org#resolutionから resolutionへのダウンコンバートを画素間引き部 302によって行う（ステップ S73)。変換パラメータ resolutionと org#resolutionの値が同じならば解像度変換は行わな!/、。以上の手順に従って、解像度変換部 204は変換パラメータに基づいて入力ビデオの解像度変換を行う。なお、ステップ S72と S74のアップコンバートおよびダウンコンパ一トの方法は、 LPF等を用いて補間や間引きを行う方法であっても、画像の高域成分を復元する方法等であっても構わな、。

[0065] 次に、フレームレート変換部 205の構成について説明する。図 14は、図 7に示したフレームレート変換部 205の内部構造を示したブロック図である。図 14に示すようにフレームレート変換部 205は、制御部 201から受信した変換パラメータによりフレームレート変換部を切り替えるフレームレート変換判定部 401と、 LPFを適用した後、フレームを間引くことによりフレームレートを低下させるフレーム間引き部 402と、 LPFを用いてフレームの補間画像を作ることによりフレームレートを向上させるフレーム補間部 403から成る。

[0066] 次にフレームレート変換部 205の動作について図 15のフローチャートを用いて説明する。図 15は、図 14に示したフレームレート変換部 205の動作を示すフローチヤートである。まず、フレームレート変換判定部 401は、入力ビデオデータのヘッダからフレームレートを取得し、初期値として変数 org#framerateに設定する（ステップ S80) 。そして、変数 org#framerateと変換パラメータ framerateの値を比較し、変換パラメータ framerateの方が大きければ、 org#framerate力ら framerateへのアップコンノートをフレーム補間部 403によって行う（ステップ S82)。変換パラメータ framerateの方が小さければ、 org#framerateから framerateへのダウンコンバートをフレーム間引き部 402によつて行う（ステップ S83)。変換パラメータ framerateと org#framerateの値が同じならばフレームレート変換は行わない。以上の手順に従って、フレームレート変換部 205は変換パラメータに基づいて入力ビデオデータのフレームレート変換を行う。なお、フレームレートのアップコンバートおよびダウンコンバートの方法は、 LPF等を用いてフレームの補間や間引きを行う方法であっても、同じフレームを繰り返して用いる方法等であっても構わない。

[0067] 以上に示した実施の形態 1の構成によれば、記録再生端末 103は、 SDスロット等の汎用スロットおよび端末情報を格納するメモリ等の格納部を保持すれば、内部に符号ィ匕装置を備えなくても、リムーバブル型符号ィ匕装置 100を挿入するだけで内蔵のカメラ等で撮影した映像の符号ィ匕および復号ィ匕を行うことができる。

[0068] また、記録再生端末 103にコーデック LSIやソフトコーデックを搭載する必要がなくなり、コストの削減につながる。 [0069] また、符号化装置と符号化データ格納用メモリ（内部メモリ 106)とを記録再生端末力取り外し可能にすることで、記録再生端末間の AV連携をリムーバブル型符号ィ匕装置を交換するだけで行えるため、 AV連携が容易となる。

[0070] また、符号化装置と符号化データ格納用メモリを記録再生端末から取り外し可能にすることで、規格等で使用するコーデック手法に変更が生じた場合でも、新しいコーデック手法に対応したリムーバブル型符号化装置を挿入すれば、古！ヽ記録再生端末でも対応可能となる。

[0071] また、符号化装置と符号化データ格納用メモリを記録再生端末から取り外し可能にすることで、ユーザは使用用途に応じてリムーバブル型符号ィ匕装置を交換することができ、ユーザ嗜好に基づ、た記録再生端末 103を提供することができる。

[0072] また、端末情報取得部 101により記録再生端末 103のディスプレイ 108に適当な解像度情報を取得することによって、リムーバブル型符号ィ匕装置 100は復号したビデオの解像度を記録再生端末 103に合わせて変換することができる。これにより、リムーバブル型符号化装置 100を挿入する記録再生端末 103毎に適当な解像度のビデオデータを出力することができる。

[0073] また、記録再生端末 103の持つ汎用スロットの最大転送量情報を取得することによつて、リムーバブル型符号ィ匕装置 100は復号したビデオのフレームレートおよび解像度を転送量に応じて変換することができる。これにより、リムーバブル型符号ィ匕装置 1 00で復号したビデオデータを、記録再生端末 103でリアルタイム再生する際に、データ転送量が足りない場合でも、フレームレートまたは解像度を低下させることによつてリアルタイム再生が可能となる。また、データ転送量に余裕がある場合は、復号したビデオデータのフレームレートまたは解像度を上げることにより、より高画質なビデオデータを再生することができる。

[0074] また、記録再生端末 103の持つ内蔵符号化装置情報を取得し、記録再生端末 10 3が復号できる符号化形式は符号化データとして転送することによって、サイズの大きい復号後のビデオを転送するよりも転送量を抑えることができる。

[0075] また、記録再生端末 103で作成した符号ィ匕データは、そのままリムーバブル型符号化装置 100内の内部メモリ 106内に格納することが可能となり、複数の符号ィ匕形式で符号化された符号ィ匕データを内部メモリ 106に保持することができる。

[0076] また、リムーバブル型符号ィ匕装置 100の内部メモリ 106量の残量に応じて、記録再生端末 103から受信したビデオデータのフレームレートおよび解像度を低下させることによって、ビデオデータの記録中に内部メモリ 106の残量がなくなることを防止できる。

[0077] なお、今回の実施の形態では、コーデック手法として MPEG4— AVCを例として示したが、 MPEG2や MPEG4等のビデオコーデックであっても、 AMRや MPEG4— AAC等のオーディオコーデックであっても構わな!/ヽ。

[0078] なお、本実施の形態では、記録再生端末 103には符号ィ匕装置が内蔵されていないとして説明したが、内蔵されていても構わない。

[0079] さらに、本実施の形態では、リムーバブル型符号ィ匕装置 100を差し替えるだけで、使用中のリムーバブル型符号ィ匕装置 100に備えられているコーデックとは異なるコーデックに切り替えることができるとした。しかし、コーデックの切り替えは、リムーバブル型符号ィ匕装置 100の差し替えに限らない。これ以外に、例えば、 miniSDカードのスロットを備えたリムーバブル型符号ィ匕装置を用いて、バージョンアップされたコーデックが格納されている miniSDカードを差し替えるとしてもよい。また、記録再生端末 103 力 Sインターネット等の通信回線網を介して、バージョンアップされたコーデックをダウンロードしてくるようにしてもよ！、。

[0080] また、本実施の形態では記録再生端末 103とリムーバブル型符号ィ匕装置 100とのデータ転送部として SDスロットを例として示した力 USBインターフェースや PCIスロット等の沉用スロットであっても構わなヽ。

[0081] また、端末情報格納部 105は、記録再生端末 103の保持するメモリの一部を使用しても構わない。

[0082] さらに、リムーバブル型符号ィ匕装置は、記録再生端末に備えられるメモリを使用して符号ィ匕または復号ィ匕を行うとしてもよい。リムーバブル型符号ィ匕装置に備えられる内部メモリ 106は、リムーバブル型符号ィ匕装置が SDカードなどであることから、ある程度、メモリ容量に制限があるからである。図 16は、本実施の形態 1の記録再生装置の他の例を示すブロック図である。実施の形態 1の他の記録再生装置は、記録再生端末 140およびリムーバブル型符号ィ匕装置 150を備える。

[0083] 記録再生端末 140は、ある程度、容量の大き!/、メモリを備え、リムーバブル型符号化装置 150の要求に応じて符号ィ匕または復号ィ匕処理のための作業領域となるメモリ領域を提供する。記録再生端末 140は、 SDスロット 104、カメラ 107、ディスプレイ 10 8、制御部 141、メモリ 142、端末情報格納部 143を備える。制御部 141は、メモリ 14 2の空き容量を定期的にチェックして、メモリ 142の現在の空き容量で端末情報を更新する。図 17 (a)および (b)は、端末情報格納部 143に格納される端末情報および端末情報テーブルを示す図である。図 17 (a)に示すように、端末情報にはさらに、メモリ空き容量という項目が追加される。ここで、メモリ空き容量の端末情報 IDは「2」である。図 17 (b)を参照すると、端末情報テーブルの右下にメモリ空き容量のリストが含まれている。これによれば、 ID力「2」の場合、メモリ 142の空き容量が現在「128〜2 56MByteJであることが分力る。

[0084] リムーバブル型符号ィ匕装置 150は、例えば、符号化または復号化される動画像の画像サイズに応じて、記録再生端末 140に備えられるメモリ 142をフレームメモリとして使用する。リムーバブル型符号ィ匕装置 150は、端末情報取得部 151、信号変換部 152を備える。信号変換部 152には、内部メモリ 106が備えられる。端末情報取得部 151は、記録再生端末 140の端末情報格納部 143から、端末情報として、最大データ転送量情報、解像度情報、内蔵符号化装置情報の他に、さらに、メモリ空き容量を取得する。信号変換部 152は、例えば、符号化または復号化しようとする画像のサイズが HD(High Definition)サイズであれば記録再生端末 140のメモリ 142を使用し、画像のサイズ力 SSD(Standard Definition)サイズであれば内部メモリ 106を使用して符号ィ匕または復号ィ匕を行なう。具体的には、信号変換部 152は、画像のサイズが HD サイズであれば、記録再生端末 140の制御部 141に対してメモリ 142の使用要求を送信し、使用可能なメモリ領域の通知を受けて、動画像のデータをその領域に書き込む。ただし、端末情報取得部 151が取得した端末情報から、メモリ 142の空き容量を示す IDが「0」で、 HDサイズの動画像のフレームメモリとして使用するに十分な空き容量がない場合には、例えば、「メモリ容量が不足しています。何れかのアプリケーシヨンを閉じてください。」などのメッセージを、制御部 141を介してディスプレイ 108 に表示させる。このような構成とすることによって、リムーバブル型符号ィ匕装置 150は、大きいメモリ領域を要求される大画面、高画質の動画像であっても、記録再生端末 140に備えられるメモリ 142を借用することによって無理なく符号ィ匕または復号ィ匕することがでさる。

[0085] なお、上記他の例では、制御部 141がメモリ 142の空き容量を監視し、その都度、端末情報を更新するとしたが、これに限らず、端末情報にはメモリ 142のメモリ容量だけを記述しておいてもよいし、メモリ 142の有無だけを記述しておいてもよい。また、リムーバブル型符号ィ匕装置 150は、符号ィ匕または復号ィ匕しょうとする画像のサイズに応じて、メモリ 142を借用するとしたが、これに限らず、画像の大きさ以外のデータサィズに応じて借用してもょ、し、記録再生端末 140にメモリ 142が備えられて、る場合には、常に、メモリ 142を借用して符号ィ匕または復号ィ匕するとしてもよい。また、上記の例では、画像サイズが HDサイズである力 SDサイズであるかに応じて、記録再生端末 140のメモリ 142を使用する力否かを決定したが、本発明はこれに限定されない。例えば、リムーバブル型符号化装置 150が符号化または復号化しようとする画像のデータ量が、あら力じめ定めた閾値を超えた場合に、記録再生端末 140のメモリ 142 を使用するとしてもよい。さらに、記録再生端末 140のメモリ 142がリムーバブル型符号ィ匕装置 150によって使用される場合、上記の例では、符号ィ匕または復号ィ匕におけるフレームメモリとして使用されるとした。しかし、本発明はこのような用途に限定されず、他の用途 (例えば、動きベクトルメモリなど）に用いられてもよい。なお、上記他の例では、メモリ 142の空き容量力 HDサイズの動画像のフレームメモリとして使用するに十分でない場合には、例えば、「メモリ容量が不足しています。 · · ·」などのエラーメッセージを表示すると説明した力本発明はこれに限定されない。例えば、メモリ 14 2の空き容量が不足している場合には、まず、ビデオデータの音声信号をカットしてしまい、音声信号の符号ィ匕を行なわないようにしてもよい。また、記録再生端末 140のメモリ 142にカ卩えてさらに、リムーバブル型符号ィ匕装置 150の内部メモリ 106、および miniSDカードなどを併用するとしてもよ、。

[0086] また、本実施の形態では YUV形式のビデオデータを例として示した力 YUY2や RGB等の他のビデオ形式であっても構わな!/、。 [0087] また、本実施の形態では内蔵符号化装置情報を MPEG2、 MPEG4— SP、 MPE G4— ASP等のコーデック手法で分類した力より詳細に MPEG2符号化、 MPEG2 復号化、 MPEG2コーデック等に分類しても構わな、。

[0088] (実施の形態 2)

本実施の形態 2では、記録再生端末に MPEG4— SP復号ィ匕装置を備え、リムーバブル型符号化装置の信号変換部に、さらに、特定の符号化形式から他の符号化形式へ符号ィ匕形式の変換を行うビデオトランスコーディング部を備える点が実施の形態 1と異なる。このビデオトランスコーディング部を備えることによって、記録再生端末が内蔵の MPEG4— SP復号ィ匕装置を経由してしかビデオデータを再生できない場合にも、符号ィ匕データを再生させることができるようになる。記録再生端末の接続スロットとして SDスロットを備える点は、実施の形態 1と同様である。

[0089] 図 18は、実施の形態 2の記録再生装置の一例を示すブロック図である。同図において、図 3と同様の構成についてはすでに説明しているので、同一の参照符号を付し、説明を省略する。実施の形態 2の記録再生装置は、リムーバブル型符号ィ匕装置 1 400および記録再生端末 1401を備える。リムーバブル型符号ィ匕装置 1400は、信号変換部 500を備える点が実施の形態 1のリムーバブル型符号ィ匕装置 100と異なる。また、記録再生端末 1401は、 MPEG4— SP復号ィ匕装置 1402を備える点が実施の形態 1の記録再生端末 103と異なる。

[0090] 図 19は、実施の形態 2における信号変換部 500の内部構造を示したブロック図である。図 19に示すように信号変換部 500は、端末情報取得部 101からの端末情報によってトランスコーディング手法を制御する制御部 502と、内部メモリ 106部に格納されている符号ィ匕データのトランスコーディングを行うトランスコーディング部 501と、符号ィ匕データの格納および作業用メモリとして用いる内部メモリ 106と、 MPEG4-AV Cのエンコード処理を行う MPEG4— AVCエンコード部 202と、 MPEG4— AVCのデコード処理を行う MPEG4— AVCデコード部 203と、ビデオの解像度変換を行う解像度変換部 204と、ビデオのフレームレートを変換するフレームレート変換部 205 と、データバス 207とから成る。

[0091] 次に、実施の形態 2における信号変換部 500の動作について図 20を用いて説明する。図 20は、トランスコーディングを行う場合の図 19に示した信号変換部 500の動作を示すフローチャートである。記録再生端末 1401から内部メモリ 106にデータ転送要求があると、制御部 502は転送要求のあったデータが符号ィ匕データどうかを判定し (ステップ S90)、符号ィ匕データでなければそのまま記録再生端末 1401へ転送する (ステップ S94)。転送要求のあったデータが符号ィ匕データならば、制御部 502 は端末情報内の内蔵符号ィヒ装置情報力転送要求のあったファイル形式を記録再生端末 1401が復号できるかを判断する (ステップ S91)。記録再生端末 1401が復号できると判断すれば、符号ィ匕データを内部メモリ 106から読み出し、そのまま記録再生端末へ転送する (ステップ S96)。記録再生端末 1401が復号できない符号ィ匕データならば、信号変換部 500内のトランスコーディング部 501で記録再生端末 1401 が復号できる符号ィ匕形式にトランスコーディングできな、かを判断する (ステップ S92 ) oトランスコーディングできるならば、内部メモリ 106から読み出した符号ィ匕データをトランスコーディング部 501に転送し、内蔵符号化装置情報の符号化形式 (例えば、 MPEG4— SP)へトランスコーディングした後、記録再生端末 1401に転送する (ステップ S93)。トランスコーディングできなければ、再生不可能信号を出力し、再生できな、ことを記録再生端末 1401に知らせる (ステップ S95)。

[0092] 以上の内容を例を用いて、具体的に説明する。例えば記録再生端末 1401から内部メモリ 106内の MPEG4— AVC形式の符号ィ匕データに対して転送要求が発生した場合、まず、制御部 502は受信した端末情報の内蔵符号ィ匕装置情報から、記録再生端末 1401が MPEG4— SP復号ィ匕装置 1402を備えていると判断する。次に、トランスコーディング部 501で MPEG4— AVCから MPEG4— SPへのトランスコーディングが可能かどうかを判断し、可能ならばトランスコーディングを行い、作成した MPE G4— SP形式の符号化データを出力する。記録再生端末 1401は、リムーバブル型符号化装置 1400から MPEG4— SP形式の符号化データを受信し、内蔵する MPE G4— SP復号化装置 1402でデコードして再生する。

[0093] 以上の実施の形態 2により、記録再生端末 1401が MPEG4— SP復号ィ匕装置 140 2しか内蔵しておらず、かつ、リムーバブル型符号ィ匕装置 1400から受信した YUV形式のビデオを直接表示する表示部を備えて、な、場合でも、リムーバブル型符号ィ匕装置 1400で MPEG4— SP形式の符号化データにトランスコーディングすることで、記録再生端末 1401の MPEG4— SP復号化装置経由で MPEG4— AVC等の符号化データを再生することができる。これ〖こより、 MPEG4—AVC等の新しいコーデック形式に対応して、な、古、製品でも、 SDスロット等の汎用スロットさえ保持してヽれば、実施の形態 2のリムーバブル型符号ィ匕装置を用いることで MPEG4—AVC等の新ヽコ一デック形式の符号化データを再生できる。

[0094] なお、本実施の形態ではビデオトランスコーディング手法として MPEG4— AVCから MPEG4— SPの変換を例として示した力 MPEG2から MPEG4へのビデオトランスコ一ディング等であつても、 AMRや MPEG4— AACへのオーディオトランスコ一デイングであっても構わなヽ。

[0095] また、本実施の形態では記録再生端末が MPEG4SP復号ィ匕装置を備えている例を示したが、他の復号ィ匕装置を備えていても構わない。

[0096] また、本実施の形態では記録再生端末に MPEG4— SP等の復号化装置を備えている例を示した力記録再生端末は MPEG4— SP等の復号用プログラムを内蔵 CP Uで実行することによって符号ィ匕データを復号することができるとしても構わない。またその際、リムーバブル符号ィ匕装置 1400は、端末情報格納部 105に格納された記録再生端末の CPUの処理性能情報に応じて、トランスコーディング方法を切り替えても構わない。例えば、リムーバブル符号化装置 1400の内部メモリ 106に、 MPEG 4AVC等の復号処理負荷が高、符号化データが格納されて!、る場合、リムーバブル符号ィ匕装置 1400は端末情報格納部 105に格納された記録再生端末の CPU 処理性能情報を取得し、 CPU処理性能が高ければ、 MPEG— 4AVC等の復号処理負荷が高い符号ィ匕データをそのまま転送し、 CPU処理性能が低ければ、 MPEG 4AVC等の復号処理負荷が高い符号ィヒデータを MPEG4— SP等の復号処理負荷が低、符号ィ匕データにトランスコーディングして力も転送するとしてもよ、。

[0097] また、ここでは記録再生端末 1401とリムーバブル型符号ィ匕装置 1400のデータ転送部として SDスロットを例として示した力 USBインターフェースや PCIスロット等の汎用スロットであっても構わな、。

[0098] また、記録再生端末 1401には、端末情報を格納しておくために端末情報格納部 1 05と、う特別なメモリを備えておく必要はなく、記録再生端末 1401の保持するメモリの一部を端末情報格納部 105として使用しても構わない。

[0099] (実施の形態 3)

本実施の形態 3の記録再生装置では、記録再生端末は実施の形態 1と同様である力 miniSDスロットにより、リムーバブル型符号ィ匕装置に miniSDカードを着脱可能に接続し、 miniSDカードを内部メモリの代わりに使用する点が実施の形態 1と異なる。なお、本実施の形態 3では、リムーバブル型符号ィ匕装置の信号変換部として MPEG 4— AVCコーデック、記録再生端末の接続スロットとして SDスロット、リムーバブル型符号化装置のメモリスロットとして miniSDスロットを例とする。

[0100] 本発明の実施の形態 3のブロック図を図 21および図 22に示す。図 21は、実施の形態 3の記録再生装置の一例を示すブロック図である。図 21に示すように、リムーパブル型符号化装置 600には、新たに miniSDスロット 604が備えられている。図 22は、図 21に示した信号変換部 602の内部構成を示すブロックである。図 22に示すように、信号変換部 602から内部メモリ 106が除去されて、る。

[0101] 実施の形態 3の信号変換部 602は、実施の形態 1の内部メモリ 106の代わりに、リム一バブル型符号化装置 600の miniSDスロットに挿入された miniSDカード 606を、符号ィ匕データの格納および作業用メモリとして用いることによって、実施の形態 1で説明した各処理部により、 MPEG4— AVCのコーデック処理を行う。

[0102] 以上のように、実施の形態 3のリムーバブル型符号ィ匕装置 600によれば、符号化データを格納する内部メモリがリムーバブル型符号ィ匕装置力も取り外し可能となる。これにより、符号ィ匕データを格納するメモリの空き容量が不足した場合に、リムーバブル型符号化装置自体を取り替えな、でも、 miniSDカードなどの半導体メモリだけを交換することによって、新たなビデオの符号ィ匕および復号ィ匕を行うことができる。

[0103] なお、本実施の形態ではコーデック手法として MPEG4— AVCを例として示したが、 MPEG2や MPEG4等のビデオコーデックであってもよぐ AMRや MPEG4—AA C等のオーディオコーデックであっても構わなヽ。

[0104] また、ここでは記録再生端末とリムーバブル型符号ィ匕装置のデータ転送部として S Dスロットを例として示した力 USBインターフェースや PCIスロット等の汎用スロットであっても構わない。

[0105] また、ここではリムーバブル型符号ィ匕装置と半導体メモリとのデータ転送部として mi niSDスロットとを例として示したが、 USBインターフェースや PCIスロット等の汎用スロットであっても構わない。

[0106] また、端末情報格納部は、記録再生端末の保持するメモリの一部を使用しても構わない。

[0107] また、本実施の形態では YUV形式のビデオを例として示した力 YUY2や RGB等の他のビデオ形式であっても構わな、。

[0108] また、本実施の形態では内蔵符号化装置情報を MPEG2、 MPEG4— SP、 MPE G4— ASP等のコーデック手法で分類した力より詳細に MPEG2符号化、 MPEG2 復号化、 MPEG2コーデック等に分類しても構わな、。

[0109] (実施の形態 4)

本実施の形態 4の記録再生装置では、記録再生端末は実施の形態 1と同様である力リムーバブル型符号ィ匕装置が符号ィ匕形式の異なる複数のエンコード部を備える点が実施の形態 1と異なる。

[0110] 図 23は、実施の形態 4の記録再生装置の一例を示すブロック図である。同図のように、リムーバブル型符号ィ匕装置 2300は、複数のエンコード部を備えた信号変換部 2 301を備えている。図 24は、図 23に示した信号変換部 2301の内部構成の一例を示すブロック図である。信号変換部 2301は、記録再生端末 103から受信したビデオデータを異なる符号化形式で符号化し、内部メモリ 106に格納する処理部であって、内部メモリ 106、解像度変換部 204、フレームレート変換部 205、データバス 207、制御部 2401、 MPEG4— ASPエンコード部 2402、 MPEG4— SPエンコード部 2403、 MPEG4—AVCエンコード部 2404および MPEG2エンコード部 2405を備える。 M PEG4— ASPエンコード部 2402、 MPEG4— SPエンコード部 2403、 MPEG4— A VCエンコード部 2404および MPEG2エンコード部 2405は、それぞれ、 MPEG4— ASP、 MPEG4— SP、 MPEG4— AVCおよび MPEG2の符号化形式で、例えば、 YUV形式で入力されるビデオデータを符号化する処理部である。

[0111] 以上のように構成される信号変換部 2301の具体的な動作について、図面を参照して説明する。図 25は、信号変換部 2301内の 1つのエンコード部を用いてビデオデータを符号ィ匕する際の制御部 2401の動作を示すフローチャートである。この処理は、図 4のフローチャートのステップ S12におけるより詳細な処理内容を示している。制御部 2401は、記録再生端末 103から受信したデータがビデオデータであれば、信号変換部 2301に備えられているすべてのエンコード部にビデオデータの符号ィ匕を実行させる（S2001)。次いで、制御部 2401は、各エンコード部で符号ィ匕された符号化データのビット数をカウントし（S2002)、カウントされたビット数が最も少なくなつた符号ィ匕データを内部メモリ 106に格納する（S2003)。具体的には、記録再生端末 1 03から受信したデータがビデオデータであれば、制御部 2401は、 MPEG4-ASP エンコード部 2402、 MPEG4— SPエンコード部 2403、 MPEG4—AVCエンコード部 2404および MPEG2エンコード部 2405のすべてに符号化を実行させ、それらのうち、符号量が最も少なくなつた符号ィ匕データを内部メモリ 106に格納する。

[0112] また、このほかに、信号変換部 2301に備えられているエンコード部で実行することができる複数の符号ィ匕形式を提示して、その中から 1つをユーザに選択させるようにしてもよい。図 26は、ユーザに選択された符号化形式でビデオデータを符号化する場合の制御部 2401の動作を示すフローチャートである。記録再生端末 103から受信したデータがビデオデータであれば、制御部 2401は、例えば、実行可能な符号化形式をディスプレイ 108に一覧表示して、そのうちのどの符号ィ匕形式のエンコード部を使用して符号ィ匕を行うか、ユーザの選択を受け付ける（S2101)。ユーザによつて、一覧表示された符号化形式の 1つが選択されると (S2102)、選択された符号ィ匕形式に対応するエンコード部で符号化を実行させ (S2103)、符号化の結果得られた符号ィ匕データを内部メモリ 106に格納する（S2104)。

[0113] 以上のように、本実施の形態 4の記録再生装置によれば、リムーバブル型符号ィ匕装置 2300の信号変換部 2301に、複数のコーデック手法で符号ィ匕を行う複数のェンコ一ド部を備えるので、入力されるビデオデータに最適な、例えば、データの圧縮率の高いコーデック手法を選択して符号ィ匕を行うことができる。また、ユーザにとっては、ユーザの好みのコーデック手法を選択して符号ィ匕を行うことができるという効果がある [0114] なお、上記実施の形態 4では、信号変換部 2301に複数のエンコード部を備える場合についてのみ説明したが、同様にして、異なる符号化形式で符号化された符号ィ匕データを復号する複数のデコード部を備えるとしてもよい。また、複数のエンコード部と複数のデコード部とを備えるとしてもよい。このように、リムーバブル型符号ィ匕装置 2 300に複数のデコード部を備えておくことによって、例えば、様々な家電機器でインターネット等力もダウンロードされたビデオデータを、リムーバブル型符号ィ匕装置 230 0を差し替えるだけでデコードすることができる。図 27は、リムーバブル型符号ィ匕装置を交換するだけで家電機器間での AV連携を行う AV連携ネットワークの一例を示す図である。図 27に示すように、例えば、 AV連携ネットワークは、冷蔵庫 2201、テレビ 2202、カーナビゲーシヨン 2203、電子レンジ 2204、 PDA2205および携帯電話機 2206などを備える。これらの家電機器は、それぞれ、 SDカードなどの ICカード 220 0を接続するためのカードスロット 2210およびそのインターフェースを備えており、また、適宜ビデオデータを再生するためのモニタやスピーカなどを備えている。この IC カード 2200は、上記実施の形態 1〜4のリムーバブル型符号ィ匕装置であり、もちろん、実施の形態 3のようにミニカードスロットを備えていてもよい。同図のように、 ICカード 2200には、符号ィ匕されたビデオデータとそのビデオデータを復号するデコード部とが備えられているので、例えば、 YUV形式のビデオデータしか再生できない冷蔵庫 2201や電子レンジ 2204などであっても、ユーザは、それらのカードスロット 2210に I Cカード 2200を差し込むだけで、 ICカード 2200に格納されているビデオを楽しむことができる。また、それらの家電機器が通信機能を備えており、例えば、インターネットなど力も符号ィ匕された AVデータをダウンロードした場合に、その AVデータと符号化形式が一致するデコード部を備えていなくても、リムーバブル型符号ィヒ装置に復号可能な符号ィ匕形式であれば、カードスロット 2210に ICカード 2200を差し込むだけで復号することができる。

[0115] なお、上記実施の形態では、 MPEG4— ASPエンコード部 2402、 MPEG4— SP エンコード部 2403、 MPEG4—AVCエンコード部 2404および MPEG2エンコード部 2405を備える場合について説明した力信号変換部 2301は、これらすベてを備えている必要はなぐこれらのうち、 2つ以上を備えていればよい。また、これらとは異なる符号ィ匕形式のエンコード部やデコード部を備えるとしてもよい。

[0116] また、上記実施の形態に示した記録再生端末は、 AVデータなどの記録および再生の両方を行う装置であることを前提として説明したが、表示だけを行う装置であってもよいし、記録だけを行う装置であってもよい。

[0117] なお、ブロック図（図 3、図 7、図 12、図 14、図 16、図 18、図 19、図 21、図 22、図 2 3、図 24など）の各機能ブロックは典型的には集積回路である LSIとして実現される。これらは個別に 1チップィ匕されても良、し、一部または全てを含むように 1チップィ匕されても良い。例えばメモリ以外の機能ブロックが 1チップ化されていても良い。

[0118] なお、ここでは、 LSIとした力集積度の違いにより、 IC、システム LSI、スーパー LSI 、ウノレ卜ラ LSIと呼称されることちある。

[0119] また、集積回路化の手法は LSIに限るものではなぐ専用回路または汎用プロセサで実現してもよい。 LSI製造後に、プログラムすることが可能な FPGA (Field Program mable Gate Array)や、 LSI内部の回路セルの接続や設定を再構成可能なリコンフィギュラブノレ ·プロセッサなどを利用しても良、。

[0120] さらには、半導体技術の進歩または派生する別技術により LSIに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積ィ匕を行ってもよい。例えば、バイオ技術の適応等が可能性としてありえる。

[0121] また、各機能ブロックのうち、符号化または復号化の対象となるデータを格納する手段だけ 1チップィ匕せずに別構成としても良い。

産業上の利用可能性

[0122] 本発明は放送や通信および蓄積の分野において、映像や音声を記録再生する機器等として有用である。また、映像や音声を記録再生するための機能をワンチップに備えた集積回路としても有用である。また、静止画像記録再生機器等としても適用が可能である。本発明はさらに、 AVデータや符号ィ匕 Z復号ィ匕プログラムを記録した IC カードなどの記録媒体としても有用である。

Claims

請求の範囲

[1] 符号化または復号化装置が着脱自在に接続され、音声または画像を表す信号を記録または再生する記録再生端末であって、

自己の記録再生端末の記録再生能力に関する情報である端末情報を格納し、前記符号化または復号化装置が接続されると、前記端末情報を前記符号化または復号化装置に出力する端末情報格納手段と、

音声または画像を表す信号を記録する時には、音声または画像を表す前記信号を、前記符号化または復号化装置に送信することによって符号化させる信号送信手段とを備える

ことを特徴とする記録再生端末。

[2] 前記記録再生端末は、さらに、音声または画像を表す前記信号を符号化して得られる符号化データを、前記符号化または復号化装置の内部に格納させる

ことを特徴とする請求項 1記載の記録再生端末。

[3] 前記端末情報は、前記記録再生端末に内蔵される内蔵符号ィヒまたは復号ィヒ装置の有無を示す情報を含み、

前記記録再生端末は、前記内蔵符号化または復号化装置がない場合、音声または画像を含む前記信号を前記符号ィ匕または復号ィ匕装置に符号化させる

ことを特徴とする請求項 2記載の記録再生装置。

[4] 前記記録再生端末は、前記内蔵符号化または復号化装置がな！ヽ場合、前記符号化または復号ィ匕装置に格納されている前記符号ィ匕データを前記符号ィ匕または復号化装置で復号して得られた音声または画像を表す信号を前記符号ィヒまたは復号ィ匕装置から受信し、再生する再生手段を備える

ことを特徴とする請求項 3記載の記録再生端末。

[5] 前記端末情報は、前記内蔵符号ィ匕または復号ィ匕装置の符号ィ匕形式を示す符号ィ匕形式情報を含み、

前記記録再生端末は、さら〖こ、音声または画像を表す信号を所定の符号化形式で符号化または復号化する内蔵符号化または復号化装置を備え、

前記符号ィ匕または復号ィ匕装置に格納されている前記符号ィ匕データの符号ィ匕形式 1S 前記符号化形式情報に示される符号化形式と異なる場合、前記再生手段は、前記符号ィ匕または復号ィ匕装置で復号して得られた音声または画像を含む前記信号を受信して再生し、前記符号化形式情報に示される符号化形式と一致する場合、前記内蔵符号化または復号化装置は前記符号化データをそのまま受信して復号することを特徴とする請求項 4記載の記録再生端末。

[6] 前記記録再生端末は、さらに、

前記符号ィ匕または復号ィ匕装置が、互いに異なる複数の符号ィ匕形式で符号ィ匕または復号ィ匕を行うことができる場合、前記符号化または復号化装置から、選択可能な前記符号化形式の通知を受信する符号化形式通知受信手段と、

前記符号ィヒまたは復号ィヒ装置力通知された複数の前記符号ィヒ形式を表示し、利用者から 1つの符号化形式の選択を受け付ける符号化形式選択手段とを備え、前記記録再生端末は、利用者に選択された符号化形式で、音声または画像を表す信号を前記符号ィ匕または復号ィ匕装置に符号化させる

ことを特徴とする請求項 2記載の記録再生端末。

[7] 前記端末情報は、前記記録再生端末に内蔵される内蔵符号ィヒまたは復号ィヒ装置の有無を示す情報と、前記内蔵符号化または復号化装置がある場合、前記内蔵符号化または復号化装置の符号化形式を示す符号化形式情報とを含み、

前記記録再生端末は、前記符号化または復号化装置に格納されて!、る前記符号化データの符号化形式が、 (1)前記符号化形式情報に示される符号化形式と異なる場合、符号化形式が前記符号化形式情報に示される符号化形式に変換された符号化データを受信し、 (2)前記符号化形式情報に示される符号化形式と一致する場合、前記符号ィヒデータをそのまま受信する符号ィヒデータ受信手段とを備える

ことを特徴とする請求項 2記載の記録再生端末。

[8] 前記記録再生端末は、さらに、前記符号化または復号化装置による符号化または復号ィ匕処理の作業領域として提供可能なメモリと、

前記符号化または復号化装置から前記メモリの使用要求を受信するメモリ使用要求受信手段と、

前記使用要求を受信すると、前記メモリの一部または全部の領域を前記符号化または復号ィ匕装置に使用させるメモリ制御部とを備える

ことを特徴とする請求項 1記載の記録再生端末。

[9] 前記端末情報は、前記記録再生端末に備えられる前記メモリの空き容量を示すメモリ情報を含み、

前記記録再生端末は、さらに、前記メモリの空き容量を定期的に検出する空き容量検出手段を備え、

前記メモリ制御部は、新たに検出された空き容量の値で、前記端末情報内の前記メモリ情報を更新する

ことを特徴とする請求項 8記載の記録再生端末。

[10] 音声または画像を表す信号を記録または再生する記録再生端末に、着脱自在に接続される符号ィ匕または復号ィ匕装置であって、

前記記録再生端末に接続されると、前記記録再生端末の記録再生能力に関する情報である端末情報を前記記録再生端末から取得する端末情報取得手段と、取得された前記端末情報に基づ、て、音声または画像を表す信号を符号ィ匕または復号化する符号化復号化手段とを備える

ことを特徴とする符号化または復号化装置。

[11] 前記符号化または復号化装置は、さらに、

音声または画像を表す信号を符号化して得られる符号化データを格納する符号化データ格納手段を備え、

前記符号化復号化手段は、音声または画像を表す信号を符号化して、前記符号化データを前記符号化データ格納手段に格納する

ことを特徴とする請求項 10記載の符号ィ匕または復号ィ匕装置。

[12] 前記端末情報は、前記記録再生端末に内蔵される内蔵符号ィヒまたは復号ィヒ装置の有無を示す情報と、前記内蔵符号化または復号化装置がある場合、前記内蔵符号化または復号化装置の符号化形式を示す符号化形式情報とを含み、

前記符号化復号化手段は、さらに、

前記符号化データ格納手段に格納されている前記符号化データの符号化形式が、（1)前記符号化形式情報に示される符号化形式と異なる場合、前記符号化データの符号化形式を前記符号化形式情報に示される符号化形式に変換し、（2)前記符号化形式情報に示される符号化形式と一致する場合、前記符号化データをそのまま前記記録再生端末に送信するトランスコーディング部を備える

ことを特徴とする請求項 11記載の符号ィ匕または復号ィ匕装置。

[13] 前記符号化復号化手段は、異なる符号化形式で符号化または復号化を行う複数の符号化復号化部を備え、

前記符号化復号化手段は、複数の前記符号化形式のうち、前記符号化データのビット数が最小となる符号ィ匕形式の前記符号ィ匕復号ィ匕部により音声または画像を表す信号を符号化する

[14] 前記端末情報は、前記記録再生端末と前記符号化または復号化装置との間の単位時間当たりの最大データ転送量を示す情報を含み、

前記符号化復号化手段は、前記符号化データ格納手段内の前記符号化データから動画像信号を復号した場合、前記最大データ転送量情報に応じて、復号した前記動画像信号のフレームレートと解像度とのうち少なくとも 1つを、前記動画像信号の単位時間当たりのデータ量が前記最大データ転送量を超えないように変換することを特徴とする請求項 11記載の符号ィ匕または復号ィ匕装置。

[15] 前記端末情報は、前記再生手段の適正解像度を示す解像度情報を含み、

前記符号化復号化手段は、前記符号化データ格納手段内の前記符号化データから動画像信号を復号した場合、前記解像度情報に応じて復号された前記動画像信号の解像度を前記適正解像度に変換する

[16] 前記符号化または復号化装置は、さらに、

前記符号化データ格納手段に格納すべき信号を、前記記録再生端末から受信する信号受信手段を備え、

前記符号化復号化手段は、受信された前記信号が符号化データならば、符号ィ匕せずにそのまま格納する

[17] 前記符号化復号化手段は、音声または画像を含む前記信号が動画像信号である場合、前記符号化データ格納手段の空き容量に応じて、前記動画像信号のフレームレートと解像度とのうち少なくとも 1つを変換し、変換後の信号を符号ィ匕することを特徴とする請求項 11記載の符号ィ匕または復号ィ匕装置。

[18] 前記符号ィヒデータ格納手段は、前記符号ィヒまたは復号ィヒ装置に着脱自在に接続されるメモリカードに備えられる

[19] 前記符号化復号化手段は、ビデオ符号化と、ビデオ復号化と、音声符号化と、音声復号化と、ビデオトランスコーディングと、音声トランスコーディングのうち少なくとも 1つを行う

[20] 前記端末情報は、前記符号化または復号化装置による利用が可能な、前記記録再生端末に内蔵されるメモリの有無を示すメモリ情報を含み、

前記符号化復号化手段は、音声または画像を含む前記信号が動画像信号であり、前記記録再生端末に内蔵されるメモリがある場合、前記記録再生端末に前記メモリの使用を要求する

[21] 前記端末情報は、前記符号化または復号化装置による利用が可能な、前記記録再生端末に内蔵されるメモリの容量を示すメモリ情報を含み、

前記符号化復号化手段は、音声または画像を含む前記信号が動画像信号である場合、符号化または復号化しようとする画像のサイズと、前記端末情報に示される前記メモリの容量とに応じて、前記記録再生端末に前記メモリの使用を要求することを特徴とする請求項 10記載の符号ィ匕または復号ィ匕装置。

[22] 音声または画像を表す信号を記録または再生する記録再生端末に、着脱自在に接続される符号ィヒまたは復号ィヒ装置を実装する集積回路であって、

前記記録再生端末に接続されると、前記記録再生端末に関する情報である端末情報を前記記録再生端末から取得する端末情報取得手段と、

取得された前記端末情報に基づ、て、音声または画像を表す信号を符号ィ匕または復号ィヒする符号ィヒ復号ィヒ手段とを備える集積回路。

符号化または復号化装置が着脱自在に接続され、音声または画像を表す信号を記録または再生する記録再生端末における記録再生方法であって、

自己の記録再生端末の記録再生能力に関する情報である端末情報を記憶手段にあらかじめ格納しておき、前記符号ィ匕または復号ィ匕装置が接続されると、前記端末情報を前記符号化または復号化装置に出力し、

音声または画像を表す信号を記録する時には、音声または画像を表す前記信号を、前記符号ィ匕または復号ィ匕装置に送信することによって符号化させる

ことを特徴とする記録再生方法。