WO2006046357A1 - 情報出力装置、情報出力制御方法、情報出力制御プログラム - Google Patents

Abstract

　出力装置と接続する機器の違い、および出力するメディアストリームの組合せに応じて出力方法を最適に変化させ、利便性を向上させる。 　メディアストリームの状態を検知するメディア状態検知手段１５、２５、３５、４５が制御部９０にメディア状態検知信号を送信し、出力手段５１とメディアストリームを視認または聴取可能に提示する提示装置との接続状態を検知する接続状態検知手段６２、７２、８２が制御部９０に接続状態検知信号を送信する。制御部９０はメディアストリームの優先的な出力状態を規定する優先出力情報９３１とメディア状態検知信号と接続状態検知信号に基づいて出力状態を決定し、出力手段５１はメディアストリームを提示装置に出力する。

Description

明 細 書

情報出力装置、情報出力制御方法、情報出力制御プログラム

技術分野

[0001] 本発明は映像音響データの出力機能を有する情報出力装置に関するものである。

背景技術

[0002] 近年、携帯電話端末の多機能化が進み、通話機能や電子メールの送受信機能以 外に、テレビ放送やラジオ放送などを受信する機能が備えられ、テレビ放送やラジオ 放送などのコンテンツを視聴する機能や、メモリーカードなどに記憶された映画や音 楽などのコンテンツを再生する機能などを備えるようになってきている。このような携 帯電話端末においては、コンテンツ再生中にも通話することができるので、コンテンツ の再生を中断することなく通話によるコミュニケーションを行うことができる（例えば、特 許文献 1参照)。

[0003] このような従来のコンテンツ再生機能を備えた携帯電話端末においてコンテンツ再 生中に着信があった場合、接続されたステレオヘッドホンの片側のスピーカーからコ ンテンッ再生音を出力し、もう一方のスピーカーから通話音声を出力するようにしたも のである。

[0004] これによりユーザは、コンテンツ再生音と通話音声の両方を混乱なく同時に認識す ることが可能となっている。（例えば、特許文献 1参照)。

特許文献 1：特開 2002— 27029号公報

発明の開示

発明が解決しょうとする課題

[0005] し力しながら、上記従来の携帯電話端末にあっては、携帯電話端末に接続された 音響機器の種類によってはコンテンツ再生音と通話音声とを区別して、同時に聴取 する事ができな 、場合があった。

[0006] たとえば上記携帯電話端末力 再生される音声は、ステレオヘッドホン力 モノラル イヤホンに変更した場合には、コンテンツ音と通話音声の両者が重畳されて再生され てしまう。あるいはコンテンツ再生音と通話音声の 、ずれか一方だけが再生されてし まう。このように、ユーザは、コンテンツ再生音と通話音声とを区別して、同時に聴取 する事ができな力つた。このため、ユーザは、再生コンテンツの聴取と通話とを同時に 行うことが困難であった。

[0007] また、携帯電話端末に接続する音響機器の機能や性能に応じた最適な提示方法 を自動的に選択するものではな力つた。

[0008] たとえば、高性能なヘッドホンを接続した場合には音楽コンテンツをヘッドホンに、 通話音声を端末の内蔵スピーカーに出力する。または、通話専用のモノラルヘッドホ ンとマイクがセットになったヘッドセットを接続した場合には通話音声をヘッドセットに 、音楽コンテンツを端末の内蔵スピーカーに出力する。このように、接続する機器の 機能や性能に応じて出力の状態を自動的に切替えることができな力つた。

[0009] 本発明は、上記従来の課題を解決するものであり、携帯電話端末と接続する音響 機器、および出力するメディアストリームの組合せに応じて出力方法を最適にするこ とができることができる情報出力装置を提供することを目的としている。

[0010] また本発明は、上記従来の課題を解決するものであり、携帯電話端末と接続する音 響機器、および出力するメディアストリームの組合せに応じて出力方法を最適に変化 させる出力制御方法を提供することを目的としている。

[0011] また本発明は、上記従来の課題を解決するものであり、携帯電話端末と接続する音 響機器、および出力するメディアストリームの組合せに応じて出力方法を最適に変化 させる情報出力制御プログラムを提供することを目的としている。

[0012] なお、本明細書中に表記するメディアストリームとは、少なくとも画像または音または 振動に変換可能で時系列に配置された一連のデータ列を指す。例として通話音声 やテレビ放送やラジオ放送、メモリーカードなどに記憶した動画や音楽などの映像や 音響やバイブレーションパターンなどが想定される。 課題を解決するための手段

[0013] 前記従来の課題を解決するために、本発明の情報出力装置は、メディアストリーム の状態を検知し第 1の検知信号を送出するメディア状態検知手段と、前記メディアス トリームを提示する提示装置の接続状態を検知し第 2の検知信号を送出する接続状 態検知手段と、前記メディア状態検知手段から出力された第 1の検知信号と前記メデ ィァストリーム接続状態検知手段力 出力された第 2の検知信号とに基づき前記メデ ィァストリームの出力状態を決定するメディアストリーム出力状態決定手段と、前記メ ディアストリーム出力状態決定手段の指示に基づき前記メディアストリームを前記提 示装置に出力する出力手段とを有する。上記構成によれば、メディアストリームをどの ように提示装置に出力するかを、メディアストリームの組合せと提示装置の接続状態 に応じて変化させることができるため、利便性を向上させることができる。

[0014] また本発明の情報出力装置は、前記メディア状態検知手段が 1ないしは複数のメ ディアストリームの状態を検知し第 1の検知信号を送出することを特徴とするものであ る。上記構成によれば、メディアストリームそれぞれの状態に応じて、提示装置の出 力を変化させることができるため、利便性を向上させることができる。

[0015] また本発明の情報出力装置は、前記接続状態検知手段が 1ないしは複数の提示 装置の接続状態を検知して第 2の検知信号を送出し、前記メディアストリーム出力状 態決定手段は、前記メディアストリームを前記複数の提示装置の一つに出力すること を決定する構成をとる。上記構成によれば、 1ないしは複数のメディアストリームを複 数の提示装置のなかの一つの提示装置にまとめて出力させることができるため、 1箇 所に情報をまとめることができるため利便性を向上する。

[0016] また本発明の情報出力装置は、前記接続状態検知手段が複数の提示装置の接続 状態を検知し第 2の検知信号を送出し、前記メディアストリーム出力状態決定手段は 前記メディアストリームを前記複数の提示装置に出力することを決定する構成を有す る。上記構成によれば、 1ないしは複数のメディアストリームをそれぞれの提示装置に 出力することができるため、ひとつひとつのメディアストリームの情報がより明確に識 別可能となる。

[0017] また、本発明の情報出力装置は、前記メディアストリームの出力状態を規定する優 先出力情報に基づいて前記出力状態を決定することを特徴とするものである。上記 構成によれば、メディアストリームをどのように提示装置に出力するかを、メディアストリ ームの組合せと提示装置の接続状態に応じて最適に変化させることができるため、 利便性を向上させることができる。

[0018] また、本発明の情報出力装置は、前記優先出力情報を設定する設定手段を備える ものである。上記構成によれば、メディアストリームをどのように提示装置に出力する かを、ユーザの好みを反映して最適に変化させることができるため、利便性を向上さ せることができる。

[0019] また、本発明の情報出力装置は、前記情報出力装置への操作入力を検出して操 作入力情報を出力する操作入力受付手段を備え、当該操作入力情報に基づいて前 記出力状態を決定することを特徴とするものである。上記構成によれば、メディアスト リームをどのように提示装置に出力するかを、ユーザの選択に応じて柔軟に変化させ ることができるため、利便性を向上させることができる。

[0020] また、本発明の情報出力制御方法は、メディアストリームを出力する出力制御方法 であって、メディアストリームの状態を検知する工程と、検知した前記メディアストリー ムの状態を第 1の検知信号として送出する工程と、前記メディアストリームを提示する 提示装置の接続状態を検知する工程と、検知した前記提示装置の接続状態を第 2 の検知信号として送出する工程と、前記第 1の検知信号と前記第 2の検知信号とに 基づき前記メディアストリームの出力状態を決定する工程と、前記メディアストリームを 前記出力状態に基づき前記提示装置に出力する工程を有する。上記方法によれば メディアストリームをどのように提示装置に出力するかを、メディアストリームの組合せ と提示装置の接続状態に応じて変化させることができるため、利便性を向上させるこ とがでさる。

[0021] また、本発明の情報出力制御方法は、前記メディアストリームの出力状態を規定す る優先出力情報に基づいて前記メディアストリームの出力状態を決定するものである 。上記方法によれば、メディアストリームをどのように提示装置に出力するかを、メディ ァストリームの組合せと提示装置の接続状態に応じて最適に変化させることができる ため、利便性を向上させることができる。

[0022] また、本発明の情報出力制御方法は、前記優先出力情報を変更する工程を含むも のである。上記方法によれば、メディアストリームをどのように提示装置に出力するか を、ユーザの好みを反映して最適に変化させることができるため、利便性を向上させ ることがでさる。

[0023] また、本発明の情報出力制御方法は、操作入力を検知して操作入力情報を出力 する工程と、前記操作入力情報の出力に基づいて前記出力状態を決定するもので ある。上記方法によれば、メディアストリームをどのように提示装置に出力するかを、 ユーザの選択に応じて柔軟に変化させることができるため、利便性を向上させること ができる。

[0024] また、本発明の情報出力制御プログラムは、メディアストリームを出力する情報出力 制御プログラムであって、メディアストリームの状態を検知し、前記メディアストリームの 状態を第 1の検知信号として送出するステップと、前記メディアストリームを提示する 提示装置の接続状態を検知するステップと前記提示装置の接続状態を第 2の検知 信号として送出するステップと、前記第 1の検知信号と前記第 2の検知信号とに基づ き前記メディアストリームの出力状態を決定するステップと、前記メディアストリームを 前記出力状態に基づき前記提示装置に出力するステップと、から成る情報出力制御 プログラムである。上記プログラムによれば、メディアストリームをどのように提示装置 に出力するかを、メディアストリームの組合せと提示装置の接続状態に応じて変化さ せることができるため、利便性を向上させることができる。

[0025] また、本発明の情報出力制御プログラムは、前記出力状態が、前記メディアストリー ムの優先的な出力状態を規定する優先出力情報に基づいて決定するものである。上 記プログラムによれば、メディアストリームをどのように提示装置に出力するかを、メデ ィァストリームの組合せと提示装置の接続状態に応じて最適に変化させることができ るため、利便性を向上させることができる。

[0026] また、本発明の情報出力制御プログラムは、前記優先出力情報を変更するステップ を含むものである。上記プログラムによれば、メディアストリームをどのように提示装置 に出力するかを、ユーザの好みを反映して最適に変化させることができるため、利便 性を向上させることができる。

[0027] また、本発明の情報出力制御プログラムは、操作入力を検知するステップを有し、 前記出力状態を、前記操作入力に基づいて決定するものである。上記プログラムに よれば、メディアストリームをどのように提示装置に出力するかを、ユーザの選択に応 じて柔軟に変化させることができるため、利便性を向上させることができる。 発明の効果 [0028] 本発明によれば、情報出力装置に接続する提示装置の違い、および出力するメデ ィァストリームの組合せに応じて出力方法を最適に変化させることができ、利便性を 向上させることができる。

図面の簡単な説明

[0029] [図 1]本発明の実施の形態における携帯電話端末の簡略構成図

[図 2]本発明の実施の形態における携帯電話端末の詳細構成図

[図 3]本発明の実施の形態における携帯電話端末のフローチャート

圆 4]本発明の実施の形態における携帯電話端末の優先出力情報を示す図

[図 5] (a)本発明の実施の形態 1における携帯電話端末で音楽コンテンツを再生して

V、るイメージ図（b)音楽コンテンツを再生しながら通話を行うイメージ図

[図 6]本発明の実施の形態 1における携帯電話端末のシーケンス図

[図 7]本発明の実施の形態 1における携帯電話端末のメディア状態情報、接続状態 情報、出力状態情報を示す図

[図 8]本発明の実施の形態 1における出力開始表示を示す図

[図 9] (a)本発明の実施の形態 2における携帯電話端末で音楽コンテンツを再生して

V、るイメージ図（b)音楽コンテンツを再生しながら通話を行うイメージ図

[図 10]本発明の実施の形態 2における携帯電話端末シーケンス図

[図 11]本発明の実施の形態 2における携帯電話端末のメディア状態情報、接続状態 情報、出力状態情報を示す図

[図 12]本発明の実施の形態 2における出力開始表示を示す図

[図 13] (a)本発明の実施の形態 3における携帯電話端末で TV放送受信のイメージ 図 (b)TV放送を受信しながら通話を行うイメージ図

[図 14]本発明の実施の形態 3における携帯電話端末のシーケンス図

[図 15]本発明の実施の形態 3における携帯電話端末のメディア状態情報、接続状態 情報、出力状態情報を示す図

[図 16] (a)本発明の実施の形態 3における補助情報の表示を示す図 (b)本発明の実 施の形態 3における出力開始表示を示す図

[図 17]本発明の実施の形態 3における操作入力情報の記述形式を示す図 圆 18] (a)本発明の実施の形態 4における「音質優先モード」を示す図 (b)「外部出力 優先モード」を示す図（c)「秘匿通話モード」を示す図

[図 19] (a)本発明の実施の形態 4における優先出力情報の選択画面図 (b)設定処理 画面図

符号の説明

1 携帯電話端末

102 接続状態検知手段

103 第 2の検知信号

105 メディア状態検知手段

106 第 1の検知信号

2 提示装置

10 無線通信部

11 無線通信手段

12 符号化手段

13 復号手段

15 第 1メディア状態検知手段

20 着信音再生部

21 着信音再生手段

25 第 2メディア状態検知手段

30 音楽再生部

31 音楽データ蓄積部

32 音楽再生手段

35 第 3メディア状態検知手段

40 放送受信部

41 放送受信手段

42 分離手段

43 音声復号手段

44 画像復号手段 45 第 4メディア状態検知手段

51 出力手段

52 内蔵マイク

53 表示手段

54 十字キー

55 操作入力受付手段

551 操作入力情報

56 設定手段

61 Bluetooth通信手段

62 第 1接続状態検知手段

63 Bluetoothヘッド、セッ卜

71 ヘッドホンジャック

72 第 2接続状態検知手段

73 ステレ才ヘッドホン

75 モノラルイヤホン

81 内蔵スピーカー

82 第 3接続状態検知手段

90 制御部

91 出力先決定手段

92 状態情報保持手段

921 メディア状態情報

922 接続状態情報

923 出力状態情報

93 優先出力情報保持手段

931 優先出力情報

発明を実施するための最良の形態

以下本発明を実施するための最良の形態について、図面を参照しながら説明する 。なお、実施の形態を説明するための全図において、同一の構成要素には同一符 号を付与し、重複する説明は、省略する。

[0032] 図 1は、本発明の携帯電話端末の構成図である。図 1に記載した構成要素のうち、 携帯電話端末 1が本発明の情報出力装置に該当する部分である。携帯電話端末 1 はメディア状態検知手段 105、接続状態検知手段 102、出力手段 51、制御部 90を 備える。

[0033] 提示装置 2は携帯電話端末 1に接続され、出力手段 51が出力するメディアストリー ムを視認または聴取可能に提示する装置である。提示装置 2は例えば、内蔵液晶デ イスプレイ、外部接続したディスプレイ装置、 LED、内蔵スピーカー、ヘッドセット、ス テレオヘッドホンなどが考えられる。

[0034] メディア状態検知手段 105は、出力手段 51に入力されるメディアストリームの開始、 再生中、終了などの状態を検知する。そして、メディア状態検知手段 105は検知した メディアストリームの状態とメディアストリームの種類の情報を第 1の検知信号 106とし て制御部 90に通知する。

[0035] 接続状態検知手段 102は、出力手段 51と提示装置 2との接続状態を検知する。そ して、接続状態検知手段 102は検知した接続状態と接続先の提示装置の種類など を第 2の検知信号 103として制御部 90に通知する。接続状態とは、提示装置との接 続が結合された状態、および離れた状態、また提示装置に備えられた音量調節器な ど調節器の状態など、提示装置と携帯電話端末 1との接続状態である。

[0036] 制御部 90は、第 1の検知信号 106と第 2の検知信号 103に基づいて出力手段 51 の出力状態を決定して出力手段 51に指示する。出力手段 51は、入力されたメディア ストリームを制御部 90が決定した出力状態に基づいて提示装置 2に出力する。

[0037] 図 2は、本発明の実施の形態を説明するための携帯電話端末 1の内部構成をさら に詳しく示した構成図である。

[0038] 無線通信部 10は、無線回線網を介して他の情報装置との無線通信を司る部分で ある。

[0039] 無線通信部 10は、無線通信手段 11、符号化手段 12、復号手段 13、第 1メディア 状態検知手段 15を備える。無線通信手段 11は、無線回線網との接続と切断および 符号化した通話音声データの送受信を行うとともに、着信を検出して着信音再生手 段 21に通知する。また、無線通信手段 11は、通話の開始と終了を検出し、第 1メディ ァ状態検知手段 15に通知する。符号化手段 12は、内蔵マイク 52および Bluetooth 通信手段 61が出力する通話音声を符号化して無線通信手段 11に出力する。復号 手段 13は、無線通信手段 11が受信した通話音声データを復号し、得られた音声メ ディアストリームを出力手段 51の入力チャンネル IN1に出力する。第 1メディア状態検 知手段 15は、無線通信手段 11からの通知に基づ!/、て通話音声のメディア状態の情 報を含むメディア状態検知信号 16を出力先決定手段 91に出力する。

[0040] 着信音再生部 20は、着信があつたときに着信メロディ等の着信音を再生する機能 をもつ部分である。着信音再生部 20は着信音再生手段 21、第 2メディア状態検知手 段 25を備える。着信音再生手段 21は、無線通信手段 11からの着信の通知を受け、 着信音を再生して出力手段 51の入力チャンネル IN2に再生音のメディアストリームを 出力するとともに、再生の開始と終了を第 2メディア状態検知手段 25に通知する。第 2メディア状態検知手段 25は、着信音再生手段 21からの通知に基づいて着信音の メディア状態の情報を含むメディア状態検知信号 26を出力先決定手段 91に出力す る。

[0041] 音楽再生部 30は、音楽コンテンツを再生する機能をもつ部分である。音楽再生部 30は音楽データ蓄積部 31、音楽再生手段 32、第 3メディア状態検知手段 35を備え る。

[0042] 音楽データ蓄積部 31は、音楽コンテンツのデータを AAC (Advanced Audio C oding)や、 MP3 (MPEG— 1 Audio Layer3)などの圧縮形式で蓄積する。音楽 再生手段 32は、音楽データ蓄積部 31が蓄積している音楽データを再生して出力手 段 51の入力チャンネル IN3に再生音のメディアストリームを出力するとともに、再生の 開始と終了、および再生中のコンテンツのメディア種別を第 3メディア状態検知手段 3 5に通知する。第 3メディア状態検知手段 35は、音楽再生手段 32からの通知に基づ いて再生音のメディア状態の情報を含むメディア状態検知信号 36を出力先決定手 段 91に出力する。

[0043] 放送受信部 40は、 TVやラジオの放送を受信して再生する部分である。放送受信 部 40は放送受信手段 41、分離手段 42、音声復号手段 43、画像復号手段 44、第 4 メディア状態検知手段 45を備える。放送受信手段 41は、受信した放送波を検波して 放送内容を含む MPEG4 (Moving Picture Experts Group Phase 4)形式 のプログラムストリームを分離手段 42に出力する。分離手段 42は、放送受信手段 41 が出力したプログラムストリームを音声データと画像データに分離し、音声復号手段 4 3、画像復号手段 44にそれぞれ出力する。音声復号手段 43は、分離手段 42が出力 した音声データを復号して出力手段 51の入力チャンネル IN4に復号音声のメディア ストリームを出力するとともに、音声データの開始と終了、およびメディア種別を第 4メ ディア状態検知手段 45に通知する。画像復号手段 44は、分離手段 42が出力した画 像データを復号して画像フレームごとのピックスマップデータを生成し、表示手段 53 に出力する。第 4メディア状態検知手段 45は、音声復号手段 43からの通知に基づい て復号音声のメディア状態の情報を含むメディア状態検知信号 46を出力先決定手 段 91に出力する。

[0044] なお、本発明の実施の形態において、第 1メディア状態検知手段 15、第 2メディア 状態検知手段 25、第 3メディア状態検知手段 35、第 4メディア状態検知手段 45が図 1のメディア状態検知手段 105に該当する。メディア状態検知信号 16、 26、 36、 46 が図 1の第 1の検知信号 106に該当する。メディア状態検知信号 16、 26、 36、 46は メディア状態を含む。メディア状態は、メディアストリームが開始している Z開始してい な ヽの 、ずれかの値と、メディアストリームのメディア種別との組合せによって定義さ れる。前記の「メディア種別」とはメディアストリームの品質を分類した種別であり、「Hi Fi^テレオ」、 「ステレオ」、 「モノラル」、 「モノラル通話」のいずれかの値をとる。

[0045] 出力手段 51は、出力先決定手段 91が決定した出力状態の指示に従って、入力チ ヤンネル IN1、 IN2、 IN3、 IN4に入力されたメディアストリームを、出力チャンネル O UT1、 OUT2、 OUT3へ出力する。このとき、複数の入力チャンネルに入力されたメ ディアストリームを同一の出力チャンネルに同時に出力するよう指示された場合には 、それらのメディアストリームを重畳して出力する。また、同一の入力チャンネルに入 力されたメディアストリームを複数の出力チャンネルに同時に出力するよう指示された 場合には、指定されたすベての出力チャンネルにそのメディアストリームを出力する。

[0046] なお、本発明の実施の形態において、出力状態は、入力されたメディアストリームを どの出力チャンネルに出力するか、すなわちメディアストリームの出力経路で定義さ れる。

[0047] 内蔵マイク 52は、通話時にユーザが発する音声を電気信号に変換して符号ィ匕手 段 12に出力する。表示手段 53は、画像復号手段 44から出力されるピックスマップデ ータを表示したり、出力先決定手段 91の指示により、メッセージや選択項目等を表示 してユーザに提示する。十字キー ₅4は、ユーザの操作を入力するための操作子であ る。操作入力受付手段 55は、十字キー 54の操作による操作入力を受け付けて操作 入力情報 551を出力先決定手段 91に出力する。設定手段 56は、十字キー 54の操 作による操作入力を受け付けて、優先出力情報保持手段 93が保持する優先出力情 報 931を設定する。

[0048] Bluetooth通信手段 61は Bluetooth通信機能を有するヘッドセット 63と通信し、 出力手段 51の出力チャンネル OUT1に出力される音声をヘッドセット 63に、ヘッド セット 63に入力された音声を符号ィ匕手段 12にそれぞれ出力するとともに、ヘッドセッ ト 63との通信接続の開始と終了を第 1接続状態検知手段 62に通知する。第 1接続状 態検知手段 62は、 Bluetooth通信手段 61からの通知に基づいてヘッドセット 63の 接続状態の情報を含む接続状態検知信号 64を出力先決定手段 91に出力する。

[0049] ヘッドホンジャック 71は、ステレオヘッドホン 73またはモノラルイヤホン 75を出力手 段 51に接続するための端子であり、出力手段 51の出力チャンネル OUT2に出力さ れる音声を出力するとともに、ステレオヘッドホン 73やモノラルイヤホン 75が着脱され たことを第 2接続状態検知手段 72に通知する。第 2接続状態検知手段 72は、ヘッド ホンジャック 71からの通知に基づいて、ステレオヘッドホン 73とモノラルイヤホン 75の 接続状態の情報を含む接続状態検知信号 74を出力先決定手段 91に出力する。

[0050] 内蔵スピーカー 81は、出力手段 51の出力チャンネル OUT3に出力される音声メ ディアストリームを聴取可能な音声に変換して放音する。また、内蔵スピーカー 81は 、放音可能な状態であるかどうかを第 3接続状態検知手段 82に通知する。マナーモ ードの設定により内蔵スピーカー 81がオフになった場合には、放音できないことを第 3接続状態検知手段 82に通知する。第 3接続状態検知手段 82は、内蔵スピーカー 8 1からの通知に基づいて、内蔵スピーカー 81の接続状態の情報を含む接続状態検 知信号 84を出力先決定手段 91に出力する。

[0051] なお、本発明の実施の形態において、ヘッドセット 63、ステレオヘッドホン 73、モノ ラルイヤホン 75、内蔵スピーカー 81が図 1の提示装置 2に該当する。また、第 1接続 状態検知手段 62、第 2接続状態検知手段 72、第 3接続状態検知手段 82が図 1の接 続状態検知手段 102に該当する。また、接続状態は、出力手段 51にどの提示装置 が接続されているかで定義される。なお、提示装置は携帯電話端末に内蔵されるも の、アダプターを通して接続されるもの、 Blootooth通信による接続されるものの他 に USB接続のヘッドセットやスピーカー、 IrDAなどの近距離通信による接続のもの などでもよい。

[0052] 制御部 90は出力先決定手段 91、状態情報保持手段 92、優先出力情報保持手段 93を備える。出力先決定手段は状態情報保持手段 92、優先出力情報保持手段 93 の情報に基づいてメディアストリームの出力状態を決定し、決定した出力状態を出力 手段 51に出力する。

[0053] 状態情報保持手段 92は、携帯電話端末 1の状態を表すメディア状態情報 921、接 続状態情報 922、および出力状態情報 923を保持する。メディア状態情報 921は、 出力手段 51の入力チャンネル IN1〜IN4の全メディア状態を記述した情報であり、メ ディア状態検知信号 16、 26、 36、 46のメディア状態に基づいて作成、更新される。 接続状態情報 922は、出力手段 51の出力チャンネル OUTl〜OUT3の全接続状 態を記述した情報であり、接続状態検知信号 64、 74、 84の接続状態に基づいて作 成、更新される。出力状態情報 923は、現在の出力状態を表す情報であり、出力手 段 51の入力チャンネル IN1〜IN4に入力されているメディアストリームがどの出力チ ヤンネルに出力されているかを記述した情報である。優先出力情報保持手段 93は、 優先出力情報 931を保持する。

[0054] 出力先決定手段 91は、メディア状態検知信号 16、 26、 36、 46のメディア状態と、 接続状態検知信号 64、 74、 84の接続状態と、優先出力情報保持手段 93が保持す る優先出力情報 931と、操作入力受付手段 55が出力する操作入力情報 551に基づ いて、出力手段 51の出力状態を決定する。そして、出力先決定手段 91は出力手段 51に出力状態の更新を指示する。また、状態情報保持手段 92が保持するメディア 状態情報 921、接続状態情報 922、出力状態情報 923の更新も行う。

[0055] 図 3は、本発明の実施の形態における携帯電話端末のメディア状態検知手段がメ ディア状態の変化を検知した時、または接続状態検知手段が提示装置と接続状態と の変化を検知した時の制御動作手順を示すフローチャートである。出力先決定手段 91は受信した信号がメディア状態検知信号か接続状態検知信号かにより処理を分 岐する (ステップ S1001)。メディア状態検知信号を検出した場合、状態情報保持手 段 92が保持するメディア状態情報 921をメディア状態検知信号に基づいて更新する (ステップ S1002)。接続状態検知信号を検出した場合、状態情報保持手段 92が保 持する接続状態情報 922を接続状態検知信号に基づ 、て更新する (ステップ 1003

) o

[0056] ステップ S1004〜ステップ S1014では、出力状態を決定する処理を行う。まず、出 力先決定手段 91はチャンネルを表す変数 Cに入力チャンネル IN1をセットする (ステ ップ S1004)。次に、出力先決定手段 91は状態情報保持手段 92が保持するメディ ァ状態情報 921を参照し、チャンネルおすなわち入力チャンネル IN1にメディアスト リームが入力されている状態であるかどうかを調べる (ステップ S1005)。入力されて いる状態とは、通話が開始されている状態、着信音が再生されている状態、音楽コン テンッが再生されている状態、音声データが開始されている状態などである。チャン ネル Cにメディアストリームが入力されて 、る場合はメディア状態情報力 入力中のメ ディアストリームの種別を取得し、メディアストリームの種別を変数 Mに代入する (ステ ップ S 1006)。そして、状態情報保持手段 92が保持する接続状態情報 922と、優先 出力情報保持手段 93が保持する優先出力情報 931を参照し、接続されている提示 装置 2のうちでメディア種別 Mの優先度が最も高い提示装置を、提示装置を表す変 数 Dに代入する (ステップ S 1007)。このとき、メディア種別 Mの優先度が最も高い装 置 Dが複数ある場合 (ステップ S 1008)、そのメディアストリームをどの提示装置に出 力するかの選択肢と入力を促すテキスト（=補助情報)の表示を表示手段 53に指示 する（ステップ S 1009)。

[0057] 続いて、ユーザが十字キー 54を操作することにより選択肢を選択すると、操作入力 受付手段 55が選択操作を受け付けて出力する操作入力情報 551を受け取る (ステツ プ S1010)。出力先決定手段 91は受け取った操作入力情報 551から提示装置名を 抽出して変数 Dに代入する (ステップ S 1011)。ここで、出力先決定手段 91は、提示 装置 Dが接続されて!、る出力手段 51の出力チャンネル（OUTl〜OUT3の!、ずれ 力 に、入力チャンネル Cに入力されているメディアストリームを出力するという情報を 、状態情報保持手段 92が保持する出力状態情報 923に記憶する (ステップ S1012)

[0058] すべての入力チャンネルについてステップ S1006〜ステップ S1012の処理が完了 していない場合は (ステップ S1013)、出力先決定手段 91は次の入力チャンネルを Cとして（ステップ S1014)、ステップ S1005に戻り同様の処理を行う。

[0059] 出力手段 51のすベての入力チャンネルについてステップ S1004〜ステップ S101 4の処理が完了すると、出力先決定手段 91は出力状態情報 923に従って出力状態 を更新するよう出力手段 51に指示する (ステップ S1015)。また、出力先決定手段 91 はステップ S1015の指示により新たに出力を開始した提示装置について、出力を開 始した旨を表示するよう表示手段 53に指示する (ステップ S1016)。

[0060] 図 4は、本発明の実施の形態における優先出力情報 931を示す図である。縦方向 の見出しは出力手段 51に接続される提示装置を示し、横方向の見出しは出力手段 51の入力となるメディアストリームの種別を示す。各欄の数値は、各提示装置に対す るメディアストリームの種別ごとの出力優先度を示す。数値 0が最も低優先度であり、 3が最も高優先度であることを表す。たとえば、ヘッドセットに対してはモノラル通話（ 優先度 3)を最も優先的に出力し、 Hi— Fi^テレオ (優先度 0)を最も低い優先度で出 力することを示している。

[0061] 以下では、本発明の実施の形態における携帯電話端末における、メディア状態お よび接続状態が変化した際の動作を、図 5〜図 17を用いて説明する。

[0062] (第 1の実施の形態）

実施の形態 1では、携帯電話端末で音楽コンテンツを再生している最中に着信が あり、通話を行う。通話中に、 Bluetoothヘッドセットを携帯電話端末に接続すると、 音楽を内蔵スピーカーで、通話音声をヘッドセットで聴取することができるよう、出力 状態を自動的に切り替えるものである。 [0063] 図 5は、本発明の実施の形態 1における携帯電話端末の利用イメージの説明図で ある。

[0064] 携帯電話端末 1で再生している音楽が内蔵スピーカー 81から放音され、ユーザが それを聴いている（図 5 (a) )時、着信がある。このとき、ユーザは Bluetoothヘッドセ ット 63の電源をオンすることによりヘッドセット 63と携帯電話端末 1との通信を確立し 、ヘッドセット 63から放音される通話音声を聴くとともに、内蔵スピーカー 81から放音 される音楽を継続して聴 、て 、る（図 5 (b) )。

[0065] 図 6は、実施の形態 1における携帯電話端末の処理シーケンス図である。図 6の中 で、斜線のハッチングを施した部分は、その箇所で制御部 90が先に説明した図 3の フローチャートを実行していることを表している。また、図 ₇は、実施の形態 1における 携帯電話端末の処理にぉ 、て、状態情報保持手段 92が保持するメディア状態情報 921、接続状態情報 922、および出力状態情報 923が、処理が進むにつれてどう変 化するかを示した図である。図 7中に示す各ステップ番号は、図 6のシーケンスに付 与したステップ番号に対応している。空欄となっている箇所は、前ステップから内容が 変化していないことを表す。また、メディア状態、接続されている装置、出力内容の欄 の「一」は、値が設定されて 、な 、ことを表す。

[0066] 以下、図 6、図 7を用いて実施の形態 1における携帯電話端末の処理の流れを説明 する。まず、初期状態では、メディア状態情報 921は図 7の 1100aに示す状態となつ ている。すなわち、出力手段 51の入力チャンネル IN1〜IN4にメディアストリームは 入力されていない。接続状態情報 922は 1100bに示す状態となっている。すなわち 、出力手段 51の出力チャンネル OUT3に内蔵スピーカーが接続されて放音可能と なっており、その他の出力チャンネル (OUTl、 OUT2)には提示装置は接続されて いない。出力状態情報 923は 1100cに示す状態となっている。すなわち、出力チヤ ンネル OUT1〜OUT3には何も出力されて ヽな 、。

[0067] 音楽再生の開始 (ステップ S101)により、音楽再生手段 32が出力する音楽コンテ ンッ (メディア種別 =「Hi— Fi^テレオ」）のメディアストリームが、出力手段 51の入力 チャンネル IN3に入力される（ステップ S102、 S103)。第 3メディア状態検知手段 35 は、音楽再生が開始したことを検知し (ステップ S104)、制御部 90に対してメディア 状態検知信号 36を送信する（ステップ S105)。ステップ S106で制御部 90は図 3の フローチャートに示す処理を開始し、図 3のステップ S1001と S1002の処理〖こより、 図 7の 1106aに示すようメディア状態情報 921を更新し、図 3のステップ S 1004〜S 1 014の処理により、出力状態を決定し、図 7の 1106cに示すよう出力状態情報 923を 更新する。すなわち、入力チャンネル IN3に入力されているメディアストリームを出力 チャンネル OUT3へ出力するよう更新する。

[0068] ステップ S1015の処理で、出力状態情報 1106cに従って出力手段 51に出力状態 更新を指示すると (ステップ S 107)、出力手段 51は出力状態を変更し (ステップ S10 8)、出力チャンネル OUT3へ音楽コンテンツのメディアストリームを出力開始すると（ ステップ S 109)、出力チャンネル OUT3に接続されている内蔵スピーカー 81が音楽 を放音する。図 3のステップ S1016では、内蔵スピーカー 81に新たに出力を開始し たので、その旨の表示を表示手段 53に指示する (ステップ S110)。

[0069] 着信があると (ステップ S111)、着信音再生手段 21が着信音の再生を開始し、着 信音 (メディア種別 =「ステレオ」）のメディアストリーム力 出力手段 51の入力チャン ネル IN2に入力される (ステップ S 112、 S113)。第 2メディア状態検知手段 25は、着 信音再生が開始したことを検知し (ステップ S 114)、制御部 90に対してメディア状態 検知信号 26を送信する（ステップ S115)。ステップ S116で制御部 90は図 3のフロー チャートに示す処理を開始し、図 3のステップ S1001と S1002の処理〖こより、図 7の 1 116aに示すようメディア状態情報 921を更新し、図 3のステップ S 1004〜S1014の 処理により、出力状態を決定し、図 7の 1116cに示すよう出力状態情報 923を更新 する。すなわち、入力チャンネル IN2と IN3に入力されているメディアストリームを重 畳して出力チャンネル OUT3へ出力するよう更新する。

[0070] ステップ S1015の処理で、出力状態情報 1116cに従って出力手段 51に出力状態 更新を指示すると (ステップ S 117)、出力手段 51は出力状態を変更し (ステップ S 11 8)、出力チャンネル OUT3へ音楽コンテンツと着信音のメディアストリームを重畳して 出力開始すると (ステップ S119)、内蔵スピーカー 81が音楽と着信音を重畳した状 態で放音する。

[0071] オフフック操作があると (ステップ S120)、復号手段 13が出力する通話音声 (メディ ァ種別 =「モノラル通話」）のメディアストリーム力 出力手段 51の入力チャンネル IN 1に入力される (ステップ S121)とともに、着信音の再生が停止する (ステップ S122) 。第 1メディア状態検知手段 15は、通話の開始を検知し (ステップ S 124)、制御部 90 に対してメディア状態検知信号 16を送信する（ステップ S125)。ステップ S126で制 御部は図 3のフローチャートに示す処理を開始し、図 3のステップ S1001と S1002の 処理により、図 7の 1126aに示すようメディア状態情報 921を更新し、図 3のステップ S1004〜S1014の処理により、出力状態を決定し、図 7の 1126cに示すよう出力状 態情報 923を更新する。すなわち、入力チャンネル IN1と IN3に入力されているメデ ィァストリームを重畳して出力チャンネル OUT3へ出力するよう更新する。

[0072] ステップ S1015の処理で、出力状態情報 1126cに従って出力手段 51に出力状態 更新を指示すると (ステップ S 127)、出力手段 51は出力状態を変更し (ステップ S12 8)、出力チャンネル OUT3へ音楽コンテンツと通話音声のメディアストリームを重畳 して出力開始すると (ステップ S129)、内蔵スピーカー 81が音楽と通話音声を重畳し た状態で放音する。

[0073] Bluetoothヘッドセット 63の電源がオンとなり、 Bluetooth通信手段 61がヘッドセ ット 63との通信の確立を第 1接続状態検知手段 62に通知すると (ステップ S130)、第 1接続状態検知手段 62は制御部 90に対して接続状態検知信号 64を送信する (ステ ップ S131)。ステップ S132で制御部 90は図 3のフローチャートに示す処理を開始し 、図 3のステップ S1001と S1002の処理〖こより、図 7の 1132bに示すよう接続状態情 報 922を更新する。すなわち、出力手段 51の出力チャンネル OUT1にヘッドセットが 、OUT3に内蔵スピーカーがそれぞれ接続されて放音可能となっていることを示すよ う更新する。

[0074] 続いて、ステップ S1004〜S1014の処理を実行する力 C=IN1の場合のステツ プ S 1007の処理において、メディア種別 M (=「モノラル通話」）の優先度が最も高い 装置 Dとしてヘッドセットが選択される。なぜなら、図 4の優先出力情報 931の「モノラ ル通話」の列に記されているヘッドセットの優先度「3」は、内蔵スピーカーの優先度「 2」に比較して高い優先度を示しているからである。以上の判断に基づいて出力状態 を決定し、図 7の 1132cに示すよう出力状態情報 923を更新する。すなわち、入力チ ヤンネル INIに入力されている通話音声のメディアストリームを出力チャンネル OUT 1へ、入力チャンネル IN3に入力されている音楽のメディアストリームを出力チャンネ ル OUT3へそれぞれ出力するよう更新する。

[0075] ステップ S1015の処理で、出力状態情報 1132cに従って出力手段 51に出力状態 更新を指示すると (ステップ S133)、出力手段 51は出力状態を変更し、出力チャン ネル OUT1へ通話音声のメディアストリームを (ステップ S 134)、出力チャンネル OU T3へ音楽のメディアストリームを (ステップ S 135)それぞれ出力開始する。

[0076] その結果、ヘッドセット 63から通話音声が、内蔵スピーカー 81から音楽がそれぞれ 放音される。ヘッドセット 63が新たに出力を開始したので、ステップ S1016でその旨 の表示を表示手段 53に指示する（ステップ S 136)。ステップ S 136における表示手 段 53の表示出力を図 8に示す。

[0077] 以上、本発明の実施の形態 1では、携帯電話端末で音楽コンテンツを再生している 最中に着信があり通話を行う際に、 Bluetoothヘッドセットを携帯電話端末に接続す ると、音楽を内蔵スピーカーで、通話音声をヘッドセットで聴取することができるよう、 出力状態を自動的に切り替える。

[0078] このように本実施の形態の情報出力装置、または情報出力制御方法、または情報 出力制御プログラムによれば、出力手段に入力されるメディアストリームの状態を検 知し、提示装置と出力手段との接続状態を検知し、検知の結果と優先出力情報に基 づいて出力手段の出力状態を決定している。これにより、出力するメディアストリーム の組合せと提示装置の接続の状態に応じて、メディアストリームの提示状態を自動的 に変化させることができるので、ユーザはわずらわし 、切替え操作をせずに最適な状 態で視聴を続けることができ、利便性が向上する。

[0079] また、本実施の形態の情報出力装置、または情報出力制御方法、または情報出力 制御プログラムによれば、音楽再生音と着信音の二つのストリーミングを同一の提示 装置である内蔵スピーカーに重畳して出力することにより、音楽再生中であっても着 信が合ったことに気がつきやすくなり、ユーザの利便性が向上する。

[0080] また、本実施の形態の情報出力装置、または情報出力制御方法、または情報出力 制御プログラムによれば、音楽再生音と通話音の二つのストリーミングを内蔵スピー カーと Bluetoothヘッドセットに分けて出力することにより、音楽再生中であっても通 話音を明瞭に聞き分けて通話することができ、ユーザの利便性が向上する。

[0081] (第 2の実施の形態）

本発明の実施の形態 2では、携帯電話端末で音楽コンテンツを再生してステレオ ヘッドホンで聴いている最中に着信があり、ユーザがオフフックボタンを押すと、音楽 をステレオヘッドホンで聴きながら通話音声を内蔵スピーカーで聴くことができるよう、 出力状態を自動的に切り替えるものである。

[0082] 図 9は、本発明の実施の形態 2における携帯電話端末の利用イメージの説明図で ある。

[0083] 携帯電話端末 1で再生して!/、る音楽力ステレオヘッドホン 73から放音され、ユーザ がそれを聴いている（図 9 (a) )時、着信があり、ユーザはオフフックボタンを押し、携 帯電話端末 1を耳に当てた状態で、内蔵スピーカー 81から放音される通話音声をス テレオヘッドホン 73ごしに聴きながら通話している（図 9 (b) )。

[0084] 図 10は、実施の形態 2における携帯電話端末の処理シーケンス図である。また、図 11は、実施の形態 2における携帯電話端末の処理において、状態情報保持手段 92 が保持するメディア状態情報 921、接続状態情報 922、および出力状態情報 923が 、処理が進むにつれてどう変化するかを示した図である。

[0085] 以下、図 10、図 11を用いて実施の形態 2における携帯電話端末の処理の流れを 説明する。まず、初期状態では、メディア状態情報 921は図 11の 2200aに示す状態 となっている。すなわち、出力手段 51の入力チャンネル IN1〜IN4にメディアストリー ムは入力されていない。接続状態情報 922は 2200bに示す状態となっている。すな わち、出力手段 51の出力チャンネル OUT2にステレオヘッドホン力 OUT3に内蔵 スピーカーがそれぞれ接続されて放音可能となっており、その他の出力チャンネル（ OUT1)には提示装置は接続されていない。出力状態情報 923は 2200cに示す状 態となつている。すなわち、出力チャンネル OUTl〜OUT3には何も出力されていな い。

[0086] 音楽再生の開始 (ステップ S 201)により、音楽再生手段 32が出力する音楽コンテ ンッ (メディア種別 =「Hi— Fi^テレオ」）のメディアストリームが、出力手段 51の入力 チャンネル IN3に入力される（ステップ S 202、 S203)。第 3メディア状態検知手段 35 は、音楽再生が開始したことを検知し (ステップ S204)、制御部 90に対してメディア 状態検知信号 36を送信する（ステップ S205)。ステップ S206で制御部 90は図 3の フローチャートに示す処理を開始し、図 3のステップ S1001と S1002の処理〖こより、 図 11の 2206aに示すようメディア状態情報 921を更新し、図 3のステップ S1004〜S 1014の処理により、出力状態を決定し、図 11の 2206cに示すよう出力状態情報 92 3を更新する。すなわち、入力チャンネル IN3に入力されているメディアストリームを 出力チャンネル OUT2へ出力するよう更新する。

[0087] ステップ S1015の処理で、出力状態情報 2206cに従って出力手段 51に出力状態 更新を指示すると (ステップ S 207)、出力手段 51は出力状態を変更し (ステップ S20 8)、出力チャンネル OUT2へ音楽コンテンツのメディアストリームを出力開始すると（ ステップ S209)、出力チャンネル OUT2に接続されているステレオヘッドホン 73が音 楽を放音する。図 3のステップ S1016では、ヘッドホン 73に新たに出力を開始したの で、その旨の表示を表示手段 53に指示する (ステップ S210)。

[0088] 着信があると (ステップ S211)、着信音再生手段 21が着信音の再生を開始し、着 信音 (メディア種別 =「ステレオ」）のメディアストリーム力 出力手段 51の入力チャン ネル IN2に入力される (ステップ S212、 S213)。第 2メディア状態検知手段 25は、着 信音再生が開始したことを検知し (ステップ S214)、制御部 90に対してメディア状態 検知信号 26を送信する（ステップ S215)。ステップ S216で制御部は図 3のフローチ ヤートに示す処理を開始し、図 3のステップ S1001と S1002の処理〖こより、図 11の 2 216aに示すようメディア状態情報 921を更新し、図 3のステップ S 1004〜S1014の 処理により、出力状態を決定し、図 11の 2216cに示すよう出力状態情報 923を更新 する。すなわち、入力チャンネル IN2と IN3に入力されているメディアストリームを重 畳して出力チャンネル OUT2へ出力するよう更新する。

[0089] ステップ S1015の処理で、出力状態情報 2216cに従って出力手段 51に出力状態 更新を指示すると (ステップ S 217)、出力手段 51は出力状態を変更し (ステップ S21 8)、出力チャンネル OUT2へ音楽コンテンツと着信音のメディアストリームを重畳して 出力開始すると (ステップ S219)、ステレオヘッドホン 73が音楽と着信音を重畳した 状態で放音する。

[0090] オフフック操作があると (ステップ S220)、復号手段 13が出力する通話音声 (メディ ァ種別 =「モノラル通話」）のメディアストリーム力 出力手段 51の入力チャンネル IN 1に入力される (ステップ S221)とともに、着信音の再生が停止する (ステップ S222) 。第 1メディア状態検知手段 15は、通話の開始を検知し (ステップ S224)、制御部 90 に対してメディア状態検知信号 16を送信する（ステップ S225)。ステップ S226で制 御部は図 3のフローチャートに示す処理を開始し、図 3のステップ S1001と S1002の 処理により、図 11の 2226aに示すようメディア状態情報 921を更新する。

[0091] 続いて、ステップ S1004〜S1014の処理を実行する力 C=IN1の場合のステツ プ S 1007の処理において、メディア種別 M (=「モノラル通話」）の優先度が最も高い 装置 Dとして内蔵スピーカーが選択される。なぜなら、図 4の優先出力情報 931の「モ ノラル通話」の列に記されている内蔵スピーカーの優先度「2」は、ステレオヘッドホン の優先度「1」に比較して高い優先度を示しているからである。以上の判断に基づい て出力状態を決定し、図 11の 2226cに示すよう出力状態情報 923を更新する。

[0092] すなわち、入力チャンネル IN1に入力されているメディアストリームを出力チャンネ ル OUT3へ、 IN3に入力されているメディアストリームを OUT2へ、それぞれ出力す るよう更新する。

[0093] ステップ S1015の処理で、出力状態情報 2226cに従って出力手段 51に出力状態 更新を指示すると (ステップ S 227)、出力手段 51は出力状態を変更し (ステップ S22 8)、出力チャンネル OUT2へ音楽コンテンツのメディアストリームを (ステップ S229) 、 OUT3へ通話音声のメディアストリームを (ステップ S230)それぞれ出力開始すると 、内蔵スピーカー 81が通話音声を放音し、ヘッドホン 73が音楽を放音する。内蔵ス ピーカー 81が新たに出力を開始したので、ステップ S1016でその旨の表示を表示 手段 53に指示する (ステップ S231)。このときの表示出力を図 12に示す。

[0094] 以上、本発明の実施の形態における実施の形態 2では、携帯電話端末で音楽コン テンッを再生してステレオヘッドホンで聴 ヽて 、る最中に着信があり、ユーザがォフフ ックボタンを押すと、音楽をステレオヘッドホンで聴きながら通話音声を内蔵スピーカ 一で聴くことができるよう、出力状態を自動的に切り替える。 [0095] (第 3の実施の形態）

本発明の実施の形態 3では、提示装置の接続状態を変更した際、優先度の競合す る出力状態を選択肢としてユーザに提示して選択させ、ユーザの選択に基づいて出 力状態を切り替えるものである。

[0096] 図 13は、本発明の実施の形態 3における携帯電話端末の利用イメージの説明図で ある。携帯電話端末 1が TV放送を受信し、 TV音声が内蔵スピーカー 81から放音さ れ、ユーザがそれを聴いている（図 13 (a) )時、着信があり、ユーザはモノラルィャホ ン 75を携帯電話端末 1のヘッドホンジャック 71に接続し、モノラルイヤホン 75から放 音される通話音声を聴くとともに、内蔵スピーカー 81から放音される TV音声を継続し て聴いている（図 13 (b) )。

[0097] 図 14は、実施の形態 3における携帯電話端末の処理シーケンス図である。また、図 15は、実施の形態 3における携帯電話端末の処理において、状態情報保持手段 92 が保持するメディア状態情報 921、接続状態情報 922、および出力状態情報 923が 、処理が進むにつれてどう変化するかを示した図である。

[0098] 以下、図 14、図 15を用いて実施の形態 3における携帯電話端末の処理の流れを 説明する。まず、初期状態では、メディア状態情報 921は図 15の 3300aに示す状態 となっている。すなわち、出力手段 51の入力チャンネル IN1〜IN4にメディアストリー ムは入力されていない。接続状態情報 922は 3300bに示す状態となっている。すな わち、出力手段 51の出力チャンネル OUT3に内蔵スピーカーが接続されて放音可 能となっており、その他の出力チャンネル (OUTl、 OUT2)には提示装置は接続さ れていない。出力状態情報 923は 3300cに示す状態となっている。すなわち、出力 チャンネル OUTl〜OUT3には何も出力されて!ヽな!、。

[0099] TV放送受信の開始 (ステップ S301)により、音声復号手段 43が出力する TV音声

(メディア種別 =「モノラル」）のメディアストリーム力 出力手段 51の入力チャンネル I N4に入力される (ステップ S302、 S303)。第 4メディア状態検知手段 45は、 TV音 声の出力が開始したことを検知し (ステップ S304)、制御部 90に対してメディア状態 検知信号 46を送信する（ステップ S305)。ステップ S306で制御部 90は図 3のフロー チャートに示す処理を開始し、図 3のステップ S1001と S1002の処理〖こより、図 15の 3306aに示すようメディア状態情報 921を更新し、図 3のステップ S1004〜S1014 の処理により、出力状態を決定し、図 15の 3306cに示すよう出力状態情報 923を更 新する。すなわち、入力チャンネル IN4に入力されているメディアストリームを出力チ ヤンネル OUT3へ出力するよう更新する。

[0100] ステップ S1015の処理で、出力状態情報 3306cに従って出力手段 51に出力状態 更新を指示すると (ステップ S 307)、出力手段 51は出力状態を変更し (ステップ S30 8)、出力チャンネル OUT3へ TV音声のメディアストリームを出力開始すると (ステツ プ S309)、出力チャンネル OUT3に接続されている内蔵スピーカー 81が TV音声を 放音する。図 3のステップ S1016では、内蔵スピーカー 81に新たに出力を開始した ので、その旨の表示を表示手段 53に指示する (ステップ S310)。

[0101] 着信があると (ステップ S311)、着信音再生手段 21が着信音の再生を開始し、着 信音 (メディア種別 =「ステレオ」）のメディアストリーム力 出力手段 51の入力チャン ネル IN2に入力される (ステップ S312、 S313)。第 2メディア状態検知手段 25は、着 信音再生が開始したことを検知し (ステップ S314)、制御部 90に対してメディア状態 検知信号 26を送信する（ステップ S315)。ステップ S316で制御部は図 3のフローチ ヤートに示す処理を開始し、図 3のステップ S1001と S1002の処理により、図 15の 3 316aに示すようメディア状態情報 921を更新し、図 3のステップ S 1004〜S1014の 処理により、出力状態を決定し、図 15の 3316cに示すよう出力状態情報 923を更新 する。すなわち、入力チャンネル IN2と IN4に入力されているメディアストリームを重 畳して出力チャンネル OUT3へ出力するよう更新する。

[0102] ステップ S1015の処理で、出力状態情報 3316cに従って出力手段 51に出力状態 更新を指示すると (ステップ S317)、出力手段 51は出力状態を変更し (ステップ S31 8)、出力チャンネル OUT3へ TV音声と着信音のメディアストリームを重畳して出力 開始すると (ステップ S319)、内蔵スピーカー 81が TV音声と着信音を重畳した状態 で放音する。

[0103] オフフック操作があると (ステップ S320)、復号手段 13が出力する通話音声 (メディ ァ種別 =「モノラル通話」）のメディアストリーム力 出力手段 51の入力チャンネル IN 1に入力される (ステップ S321)とともに、着信音の再生が停止する (ステップ S322) 。第 1メディア状態検知手段 15は、通話の開始を検知し (ステップ S324)、制御部 90 に対してメディア状態検知信号 16を送信する（ステップ S325)。ステップ S326で制 御部は図 3のフローチャートに示す処理を開始し、図 3のステップ S1001と S1002の 処理により、図 15の 3326aに示すようメディア状態情報 921を更新し、図 3のステップ S1004〜S1014の処理【こより、出力状態を決定し、図 15の 3326c【こ示すよう出力 状態情報 923を更新する。すなわち、入力チャンネル IN1と IN4に入力されているメ ディアストリームを重畳して出力チャンネル OUT3へ出力するよう更新する。

[0104] ステップ S1015の処理で、出力状態情報 3326cに従って出力手段 51に出力状態 更新を指示すると (ステップ S327)、出力手段 51は出力状態を変更し (ステップ S32 8)、出力チャンネル OUT3へ TV音声と通話音声のメディアストリームを重畳して出 力開始すると (ステップ S329)、内蔵スピーカー 81が TV音声と通話音声を重畳した 状態で放音する。

[0105] モノラルイヤホン 75がヘッドホンジャック 71に接続されると、第 2接続状態検知手段 72がそれを検知し (ステップ S330)、第 2接続状態検知手段 72は制御部 90に対し て接続状態検知通知 74を送信する (ステップ S331)。ステップ S332で制御部 90は 図 3のフローチャートに示す処理を開始し、図 3のステップ S1001と S1002の処理に より、図 15の 3332bに示すよう接続状態情報 922を更新する。すなわち、出力手段 5 1の出力チャンネル OUT2にモノラルイヤホン力 OUT3に内蔵スピーカーがそれぞ れ接続されて放音可能となっていることを示すよう更新する。

[0106] 続いて、ステップ S1004〜S1014の処理を実行する力 C=IN1の場合のステツ プ S 1007の処理において、メディア種別 M (=「モノラル通話」）の優先度が最も高い 装置 Dにモノラルイヤホンと内蔵スピーカーの 2個が該当する。なぜなら、図 4の優先 出力情報 931の「モノラル通話」の列に記されて 、るモノラルイヤホンの優先度「2」と 、内蔵スピーカーの優先度「2」とが同じ優先度を示しているからである。従って、ステ ップ S1008の条件である「Dに該当する装置が 2個以上ある」に合致するためステツ プ S1009〜S1011の処理を実行することとなる。ステップ S1009で制御部 90は出 力状態 (装置)の選択肢と入力を促すテキストから成る補助情報の表示を表示手段 5 3に指示する（ステップ S333)。 [0107] ステップ S333における表示手段 53の表示出力を図 16 (a)に示す。入力を促すテ キストの下に、出力状態の 3通りの選択肢を表示している。「イヤホン」は通話音声を モノラルイヤホン 75に出力する選択肢、「内蔵スピーカー」は内蔵スピーカー 81に出 力する選択肢、「イヤホン +内蔵スピーカー」はモノラルイヤホン 75と内蔵スピーカー 81の両方に出力する選択肢をそれぞれ示している。このとき、最後に出力手段 51に 接続された提示装置を接続状態情報 922に基づいて求め、その提示装置に出力す る選択肢の項目をフォーカスした (矩形で囲んだ)状態で表示する。本実施の形態で は、モノラルイヤホンが最後に接続されたので、項目「イヤホン」をフォーカスした状態 で表示して 、る。ユーザは十字キー 54の上端と下端を押下する操作により項目のフ オーカスを移動することができる。さらに、十字キー 54の中央部分を押下することでフ オーカス状態の項目を選択決定することができる。ここでは、ユーザが項目「イヤホン 」を選択決定したものとして以下の処理を説明する。

[0108] ユーザが選択肢を選択することで出力状態を選択する操作を行うと (ステップ S334 )、操作入力受付手段 55が操作入力を検知して操作入力情報 551を制御部 90に通 知する (ステップ S335)。通知された操作入力情報 551を図 17に示す。操作入力情 報 551は、「sel_ect=」の文字列と、選択された項目に対応する提示装置名をダブル クオ一テーシヨンで囲んだ文字列とで構成された文字列である。図 3のステップ S101 0で、制御部 90は操作入力情報 551を受け取り、ステップ S1011で、受け取った操 作入力情報 551から提示装置名「モノラルイヤホン」を抽出して変数 Dに代入する。

[0109] 以上の処理により出力状態を決定し、図 15の 3332cに示すよう出力状態情報 923 を更新する。すなわち、入力チャンネル IN1に入力されている通話音声のメディアス トリームを出力チャンネル OUT2へ、入力チャンネル IN4に入力されている TV音声 のメディアストリームを出力チャンネル OUT3へそれぞれ出力するよう更新する。

[0110] ステップ S1015の処理で、出力状態情報 3332cに従って出力手段 51に出力状態 更新を指示すると (ステップ S336)、出力手段 51は出力状態を変更し、出力チャン ネル OUT2へ通話音声のメディアストリームを (ステップ S338)、出力チャンネル OU T3へ TV音声のメディアストリームを (ステップ S339)それぞれ出力開始する。その結 果、モノラルイヤホン 75から通話音声力 内蔵スピーカー 81から TV音声がそれぞれ 放音される。モノラルイヤホンが新たに出力を開始したので、ステップ S1016でその 旨の表示を表示手段 53に指示する (ステップ S340)。このときの表示出力を図 16 (b )に示す。

[0111] 以上、本発明の実施の形態 3においては、提示装置の接続状態を変更した際、優 先度の競合する出力状態を選択肢としてユーザに提示して選択させ、ユーザの選択 に基づいて出力状態を切り替える。

[0112] 本実施の形態の情報出力装置、または情報出力制御方法、または情報出力制御 プログラムによれば、メディアストリームの状態と、提示装置と出力手段との接続状態 と、優先出力情報と、力も求められる優先的な出力状態が 2以上あるとき、出力状態 の選択肢を提示して選択操作の操作入力を受け付け、入力結果に基づ!ヽて出力状 態を決定している。これにより、優先的な出力状態の競合が生じた場合にユーザの 判断に基づいて出力状態を決定できるので、状況に応じてユーザが視聴方法を柔 軟に選択することができ、利便性が向上する。

[0113] (第 4の実施の形態）

本発明の実施の形態 4では、提示装置の優先出力情報 931を設定する処理につ いて図 18と図 19を用いて説明する。図 18は互いに異なる優先出力情報 931のバリ エーシヨンを示す図である。図 18 (a)は「音質優先モード」、図 18 (b)は「外部出力優 先モード」、図 18 (c)は「秘匿通話モード」の優先出力情報である。

[0114] 図 18 (a)の優先出力情報は、 Hi— Fiステレオに対してステレオヘッドホンの優先度 を他より極端に高く設定したもので、高音質のメディアストリームだけを他のメディアス トリームと分離してステレオヘッドホンで再生する、音質重視の優先出力情報となって いる。図 18 (b)の優先出力情報は、内蔵スピーカー以外の提示装置、すなわちメデ ィァストリームを携帯電話端末の外部へ出力する提示装置の優先度を全体的に高く 設定してあり、外部出力する提示装置が接続された場合には優先的に外部へ出力 する、外部出力優先型の優先出力情報となっている。図 18 (c)の優先出力情報は、 モノラル通話に対して外部出力する提示装置の優先度を高く設定したもので、外部 出力する提示装置が接続されている場合には内蔵スピーカ一力 通話音声を出力 せずに秘匿する優先出力情報となっている。 [0115] 図 18 (a)、（b)、 （c)の優先出力情報は設定手段 56が保持しており、表示手段 53 に表示された優先出力情報の選択肢を、ユーザが十字キー 54の操作により選択す ることで、優先出力情報 931を所望のものに設定することができる。

[0116] 図 19 (a)は、優先出力情報の選択画面である。「音質優先モード」は図 18 (a)の優 先出力情報に対応し、「外部出力優先モード」は図 18 (b)の優先出力情報に対応し 、「秘匿通話モード」は図 18 (c)の優先出力情報に対応する。ユーザは十字キー 54 の上端と下端を押下することでフォーカスを上下に移動することができ、十字キー 54 の中央部分を押下することでフォーカス状態の項目を選択決定することができる。選 択操作は設定手段 56が受け付け、選択結果に対応する優先出力情報を優先出力 情報保持手段 93に格納するとともに、設定処理が完了したことを知らせる図 19 (b) の表示を表示手段 55に指示する。

[0117] 本実施形態の情報出力装置、または情報出力制御方法、または情報出力制御プ ログラムによれば、設定手段によって優先出力情報を設定'変更することが可能にな つている。これにより、ユーザが優先出力情報を設定 '変更することができるので、ュ 一ザの好みに応じた視聴方法を選ぶことができ、利便性が向上する。

[0118] なお、本実施の形態において、出力手段の入出力となるメディアストリームとしてォ 一ディオメディアストリームを用いた力 これに限るものではなぐ MIDI等の楽音シー ケンス、パラメトリックオーディオや合成音声の生成パラメータ列等、聴覚的情報を含 むストリームであれば何でもよい。また、映像、動画像、アニメーション、字幕等、視覚 的情報を含むメディアストリームや、バイブレーターなど触感の情報を含むものであつ ても同様の効果が得られる。

[0119] なお、本実施の形態において、出力状態は、メディアストリームの出力経路で定義 されるとした力 これに限るものではなぐメディアストリームの音量、音質、チャンネル 毎の出力バランス、主音声 Z副音声のどちらを出力するか、ステレオ Zモノラルのど ちらで出力するか、等で定義されるものであってもよい。また、映像の輝度、大きさ、 フレームレートなどで定義されるものであってもよ 、。

[0120] なお、本実施の形態において、提示装置として内蔵スピーカー、ヘッドセット、ステ レオヘッドホン、モノラルイヤホンを用いた力 これに限るものではなぐ外部スピーカ 一、骨伝導モジユーノレ、ディスプレイ、プロジェクター、バイブレーションモジユーノレ等 、メディアストリームを視覚的または聴覚的または触覚的に認知可能に提示する装置 であれば何でもよい。

[0121] なお、本実施の形態において、提示装置を出力手段に接続する方法を、 Bluetoot h通信による方法と、ヘッドホンジャックによる方法とした力 これに限るものではなぐ ピンジャック、モジュラージャック、オプティカル端子、 USB端子、シリアル端子、パラ レル端子、 VGA端子、 AV出力端子、外部バスのコネクタ、 IEEE1394端子、ノラン ス出力端子、 DIN端子、 MIDI端子、導線、導電性の筐体等による有線接続や、可 視光線、赤外線、紫外線等の電磁波、超音波、磁気伝送、静電容量伝送等による無 線接続であってもよい。

[0122] なお、本実施の形態において、接続状態は、出力手段にどの提示装置が接続され ているかで定義されるとした力 これに限るものではなぐステレオとモノラル、主音声 と副音声等の提示装置における出力モードの選択状態、提示装置に付随するボリュ ーム設定の値等のノ メータ等で定義されるものであってもよい。また、色数、解像度 、表示サイズ、周波数特性など、提示性能を表したものであってもよい。

[0123] なお、本実施の形態にぉ 、て、接続状態検知手段はヘッドホンジャックへの着脱状 態が変化する時、 Bluetoothの通信状態が変化する時に接続状態を通知するとした 力 これに限るものではなぐ提示装置のスィッチのオン Zオフ、無線到達圏内 Z圏 外移動等の物理的な状態が変化する時や、機器間認証の完了等の論理的な状態 が変化する時や、スピーカーの外蓋の開閉等、提示装置の外形的な変化を伴って 提示可能 Z不可能の状態が変化する時や、ステレオ Zモノラル、主音声 Z副音声の 切替え等、提示出力のモードが変化する時や、提示装置に付随するボリュームの増 減等、提示出力のパラメータが変化する時であってもよい。

[0124] なお、本実施の形態において、提示装置を出力手段に直接に接続するものとした 力 これに限るものではなぐ出力手段と提示装置との接続状態が検知可能であれ ば、出力手段と提示装置との間にアンプ、音声合成モジュール、音源モジュール、通 信モジュール等、別の機器を介在させてもよい。

[0125] なお、本実施の形態において、メディア状態はメディアストリームが開始している Z 開始して ヽな ヽの 、ずれかの値と、メディアストリームのメディア種別との組合せによ つて定義されるとした力 これに限るものではなぐメディアの音量、バランス等で定義 されるものであってもよ ヽ。

[0126] なお、本実施の形態において、メディア種別は、 Hi— Fiステレオ、ステレオ、モノラ ル、モノラル通話のうちのいずれかであるとした力 これに限るものではなぐ通話音 声、音楽、 TV、映画、 TV電話画像、字幕、着信通知等、メディアストリームの内容を 表す種別であってもよいし、 ADPCM、 MPEG, AVI, WMV、 RAM, MOV, WA V、 MP3、 AAC、 AMR、 ATRAC, μ一 LAW、 A -LAW, AIFF等、圧縮开拭ゃ フォーマットの違 、を表す種別であってもよ 、し、 MIDI等のシーケンスオーディオ、 AMR等のパラメトリックオーディオ、 AACなどの波形データと ヽつた違 ヽを表す種別 であってもよ 、し、画像 Z音声 Z振動と 、つた表層上の違 、を表す種別であってもよ いし、周波数特性の違いを表す種別であってもよいし、ファイルサイズの違いによる 種別であってもよいし、ビットレートの違いによる種別であってもよいし、サンプリング レートの違 ヽによる種別であってもよ 、し、解像度の違!ヽによる種別であってもよ!/、。

[0127] なお、本実施の形態において、出力状態を決定する処理 (ステップ S1004〜S101 4)で、各々の入力チャンネルごとに出力状態を順次決定するようにした力 これに限 るものではなぐ出力チャンネルごと、接続されている装置ごとに決定するようにしても よい。

[0128] なお、本実施の形態において、ステップ S1009で、出力状態の選択肢をテキスト表 示するようにした力 これに限るものではなぐ映像、グラフィックス、アニメーション等 の視覚的手段で表示してもよいし、音声によって通知してもよいし、提示装置または 提示装置の接続部分近辺を光らせる、振動させる、変形させる等の方法で通知して ちょい。

[0129] なお、本実施の形態においてステップ S1008〜S1012で、装置の優先度が競合 した場合にユーザに問い合わせた後に出力状態を決定するようにした力 これに限 るものではなぐ競合する複数の装置に出力をー且開始した後に、出力を継続すベ き装置または出力を停止すべき装置をユーザに選択させるようにしてもよい。

[0130] なお、本実施の形態において、ステップ S1010で、操作入力受付手段は十字キー の操作入力を受け付けるとした力 これに限るものではなぐ十字キー以外にも、ボタ ン、キー、マウス、タブレット、ジョイスティック、タツチパネル、リモコン等の操作入力や 、視線、音声、ジャスチヤ一、ダイヤルトーン等による操作入力を受け付けるようにし てもよい。

[0131] なお、本実施の形態において、操作入力情報は図 17に示す形式のテキストデータ であるとしたが、これに限るものではなぐユーザが選択した出力状態が同定できるデ ータであればよぐ HTML, XML、 SGML等のマークアップ言語による表現であつ てもよいし、バイナリデータや電文であってもよい。

[0132] なお、本実施の形態において、優先出力情報は図 4に示す形式であるとしたが、こ れに限るものではなぐメディア状態と接続状態との組合せに対する優先的な出力状 態を規定するデータであればどのような形式であってもよい。

[0133] なお、本実施の形態において、優先出力情報のバリエーションは設定手段が保持 するとしたが、これに限るものではなぐ優先出力情報保持手段が保持していてもよ いし、着脱可能な蓄積メディア、インターネット、公衆回線網、データ放送等を介して 外部から取り込んだものを設定手段が選択 '設定するようにしてもよい。

[0134] なお、本実施の形態において、情報出力装置として携帯電話端末を例に説明した 力 これに限るものではなぐ固定電話、 PDA,電子ブック、ゲーム機、テレビ、ラジオ 、 DVDプレーヤー、ヘッドホンステレオ、半導体プレーヤー、 CDプレーヤー、ノヽード ディスク内蔵音楽プレーヤー、オーディオアンプ、 AVアンプでも良い。さらに、これら に限定されず、メディアストリームの出力機能を持つ機器であればよい。

[0135] 本発明を詳細にまた特定の実施態様を参照して説明したが、本発明の精神と範囲 を逸脱することなく様々な変更や修正を加えることができることは当業者にとって明ら かである。

[0136] 本出願は、 2004年 10月 26日出願の日本特許出願 (特願 2004— 311402)に基づくも のであり、その内容はここに参照として取り込まれる。

産業上の利用可能性

[0137] 本発明は、出力する映像や音声等のメディアストリームの組合せと、ヘッドホンやへ ッドセット等の提示装置の接続状態に応じて、どのようにメディアストリームを出力する かを自動的に決定する場合に利用可能である。

Claims

請求の範囲

[1] メディアストリームの状態を検知し第 1の検知信号を送出するメディア状態検知手段 と、

前記メディアストリームを提示する提示装置の接続状態を検知し第 2の検知信号を 送出する接続状態検知手段と、

前記メディア状態検知手段から出力された第 1の検知信号と前記接続状態検知手 段から出力された第 2の検知信号とに基づき前記メディアストリームの出力状態を決 定するメディアストリーム出力状態決定手段と、

前記メディアストリーム出力状態決定手段の指示に基づき前記メディアストリームを 前記提示装置に出力する出力手段と、

を有する情報出力装置。

[2] 請求項 1記載の情報出力装置であって、

前記メディア状態検知手段は、 1な 、しは複数のメディアストリームの状態を検知し 第 1の検知信号を送出する情報出力装置。

[3] 前記接続状態検知手段は 1な!、しは複数の提示装置の接続状態を検知し第 2の検 知信号を送出し、

前記メディアストリーム出力状態決定手段は、前記メディアストリームを前記複数の 提示装置の一つに出力することを決定する、請求項 2に記載の情報出力装置。

[4] 前記接続状態検知手段は複数の提示装置の接続状態を検知し第 2の検知信号を 送出し、

前記メディアストリーム出力状態決定手段は前記メディアストリームを前記複数の提 示装置に出力することを決定する、請求項 2または請求項 3に記載の情報出力装置

[5] 請求項 1ないしは 4いずれか一項記載の情報出力装置であって、

前記メディアストリームの出力状態を規定する優先出力情報に基づいて前記メディ ァストリームの出力状態を決定することを特徴とする情報出力装置。

[6] 請求項 5記載の情報出力装置であって、

前記優先出力情報を設定する設定手段を備える情報出力装置。

[7] 請求項 1ないし 6のいずれか一項記載の情報出力装置であって、

前記情報出力装置への操作入力を検出して操作入力情報を出力する操作入力受 付手段を備え、

当該操作入力情報に基づいて前記出力状態を決定することを特徴とする情報出力 装置。

[8] メディアストリームを出力する出力制御方法であって、

メディアストリームの状態を検知する工程と

検知した前記メディアストリームの状態を第 1の検知信号として送出する工程と、 前記メディアストリームを提示する提示装置の接続状態を検知する工程と 検知した前記提示装置の接続状態を第 2の検知信号として送出する工程と、 前記第 1の検知信号と前記第 2の検知信号とに基づき前記メディアストリ一ムの出 力状態を決定する工程と、

前記メディアストリームを前記出力状態に基づき前記提示装置に出力する工程と、 を含む情報出力制御方法。

[9] 請求項 8記載の情報出力制御方法であって、

前記メディアストリームの出力状態を規定する優先出力情報に基づいて前記メディ ァストリームの出力状態を決定する情報出力制御方法。

[10] 請求項 9項記載の情報出力制御方法であって、

前記優先出力情報を変更する工程を含む情報出力制御方法。

[11] 請求項 8ないし 10のいずれか一項記載の情報出力制御方法であって、

操作入力を検知して操作入力情報を出力する工程と、

前記操作入力情報の出力に基づいて前記出力状態を決定する情報出力制御方 法。

[12] メディアストリームを出力する情報出力制御プログラムであって、

メディアストリームの状態を検知し、

前記メディアストリームの状態を第 1の検知信号として送出するステップと、 前記メディアストリームを提示する提示装置の接続状態を検知するステップと 前記提示装置の接続状態を第 2の検知信号として送出するステップと、 前記第 1の検知信号と前記第 2の検知信号とに基づき前記メディアストリ一ムの出 力状態を決定するステップと、

前記メディアストリームを前記出力状態に基づき前記提示装置に出力するステップ と、力も成る情報出力制御プログラム。

[13] 請求項 12記載の情報出力制御プログラムであって、

前記メディアストリームの出力状態を規定する優先出力情報を有し、

前記優先出力情報に基づいて前記メディアストリームの出力状態を決定するステツ プを有する情報出力制御プログラム。

[14] 請求項 13項記載の情報出力制御プログラムであって、

前記優先出力情報を変更するステップを含む情報出力制御プログラム。

[15] 請求項 12ないし 14のいずれか一項記載の情報出力制御プログラムであって、 操作入力を検知して操作入力情報を出力するステップと、

前記操作入力情報の出力に基づいて前記出力状態を決定するステップを含む情 報出力制御プログラム。