Modality_(human%E2%80%93computer_interaction)
Mode (ユーザー インターフェイス) と混同しないで
人間とコンピューターの相互作用のコンテキストでは、モダリティは、コンピューターと人間の間の感覚入力/出力の単一の独立したチャネルの分類です。システムは、モダリティが 1 つしか実装されていない場合はユニモーダルと呼ばれ、複数のモダリティが実装されている場合はマルチモーダルと呼ばれます。いくつかのタスクまたはタスクの側面に複数のモダリティが利用できる場合、システムには重複するモダリティがあると言われます。タスクに複数のモダリティが利用できる場合、システムには冗長なモダリティがあると言われます。複数のモダリティを組み合わせて使用することで、冗長ではあるがより効果的に情報を伝達できる補完的な方法を提供できます。モダリティは一般に、人間とコンピューターのモダリティとコンピューターと人間のモダリティの 2 つの形式で定義できます。
コンテンツ
1 コンピュータ – 人間のモダリティ
2 人間とコンピューターのモダリティ
3 複数のモダリティの使用
4 こちらもご覧ください
5 参考文献
コンピュータ – 人間のモダリティ
コンピューターは、さまざまなテクノロジーを利用して、人間と情報をやり取りしたり送信したりします。
一般的なモダリティ
ビジョン– 通常は画面を介したコンピュータ グラフィックス
オーディション– さまざまなオーディオ出力
触覚- 振動またはその他の動き
珍しいモダリティ
味（味）
嗅覚（におい）
温度受容（熱）
侵害受容（痛み）
平衡受容（バランス）
人間のあらゆる感覚は、コンピュータから人間へのモダリティとして使用できます。しかし、視覚と聴覚のモダリティは、他のモダリティよりも高速で情報を伝達できるため、最も一般的に使用されています。それぞれ毎分 250 ～ 300 と 150 ～ 160 の単語です。コンピューターと人間のモダリティとしては一般的に実装されていませんが、リフレッシュ可能な点字ディスプレイを使用することで、触覚は平均 125 wpm を達成できます。その他のより一般的な触覚の形態は、スマートフォンやゲーム コントローラーの振動です。
人間とコンピューターのモダリティ
コンピュータには、人間から情報を受け取るために、さまざまな種類の入力デバイスやセンサーが装備されています。一般的な入力デバイスは、コンピュータとの通信方法が標準化されていて、ユーザーが実際に調整できる場合、多くの場合交換可能です。特定のモダリティは、コンテキストに応じてより豊富な対話を提供でき、実装のオプションがあると、より堅牢なシステムが可能になります。
シンプルなモダリティ
キーボード
ポインティング デバイス
タッチスクリーン
複雑なモダリティ
コンピュータビジョン
音声認識
モーション
オリエンテーション
スマートフォンの普及に伴い、一般大衆はより複雑なモダリティに慣れてきています。音声認識は、iPhone 4Sおよびそれに続くApple製品の主要なセールス ポイントであり、 Siriが導入されました。
複数のモダリティの使用
システムに複数のモダリティがあると、ユーザーにより多くのアフォーダンスが提供され、より堅牢なシステムに貢献できます。また、より多くの機能を使用すると、特定のモダリティをより効果的に使用するユーザーのアクセシビリティが向上します。特定の形式のコミュニケーションが不可能な場合、複数のモダリティをバックアップとして使用できます。これは、同じ情報を伝達するために 2 つ以上のモダリティが使用される冗長なモダリティの場合に特に当てはまります。モダリティの特定の組み合わせは、コンピューターと人間、または人間とコンピューターの相互作用の表現に追加できます。これは、モダリティのそれぞれが、情報の 1 つの形式または側面を他のものよりも効果的に表現できるためです。
モダリティ間の協力には 6 つのタイプがあり、モダリティの組み合わせまたは融合がどのように連携して情報をより効果的に伝達するかを定義するのに役立ちます。
同等性:情報は複数の方法で提示され、同じ情報として解釈できます。
専門化:特定の種類の情報が常に同じモダリティで処理される場合
冗長性:複数のモダリティが同じ情報を処理する
補完性:複数のモダリティが別々の情報を取得し、それをマージします
転送:モダリティは、別のモダリティが消費する情報を生成します
並行性:複数のモダリティは、マージされていない個別の情報を取り込みます
補完冗長システムは、1 つの理解またはデータセットを形成する複数のセンサーを備えたシステムであり、データを複製することなく情報をより効果的に組み合わせることができるほど、モダリティはより効果的に連携します。特にスマートフォンでは、通信に複数のモダリティを持つことが一般的であり、多くの場合、それらの実装は同じ目標に向かって連携します。たとえば、ジャイロスコープと加速度計が連携して動きを追跡します。
こちらもご覧ください
マルチモーダル インタラクション
マルチモーダル学習 – 複数の入力モダリティを使用した機械学習手法
多感覚統合 – 感覚と神経系の研究
ユーザー インターフェイス – ユーザーがマシンと対話し、制御するための手段
参考文献
^ Karray、Fakreddine; アレムザデ、ミラド。サレ、ジャミル・アブー。アラブ、Mo Nours 。「ヒューマン・コンピューター・インタラクション: 最先端の概要」 (PDF) . スマートセンシングとインテリジェントシステムに関する国際ジャーナル。1 (1)。2015 年 4 月 30 日時点でのオリジナル (PDF)からのアーカイブ。2015年4 月 21 日閲覧。
^ パランク、フィリップ。パテルノ、ファビオ （2001)。インタラクティブシステム。設計、仕様、および検証。スプリンガー サイエンス & ビジネス メディア。43ページ 。ISBN 9783540416630.
^ Ziefle、M (1998 年 12月）。「ビジュアルパフォーマンスに対するディスプレイ解像度の影響」. 人的要因。40 (4): 554–68. ドイ: 10.1518/001872098779649355 . PMID 9974229。
^ ウィリアムズ、JR (1998). 指導におけるマルチメディアの使用に関するガイドライン、Proceedings of the Human Factors and Ergonomics Society 42nd Annual Meeting、1447–1451
^ 「点字」 . ACB。アメリカ盲人評議会。2015年 4 月 21 日閲覧。
^ ベインブリッジ、ウィリアム（2004）。人間とコンピューターの相互作用に関するバークシャー百科事典。バークシャー パブリッシング グループ LLC. p。483.ISBN _ 9780974309125.
^ エプスタイン、ザック （2011 年 11 月 2 日)。「iPhone 4S の売り上げを支えているのは Siri だと言われています」. 2015年4 月 21 日閲覧。
^ グリフォニ、パトリツィア （2009)。マルチモーダル ヒューマン コンピュータ インタラクションとパーベイシブ サービス。IGIグローバル。p。37.ISBN _ 9781605663876.