1 / 16

音声ウェブブラウザ VOXplorer の評価

音声ウェブブラウザ VOXplorer の評価. 西本卓也　藤澤正樹 新美康永 京都工芸繊維大学　工芸学部　電子情報工学科. 発表内容： ・確認応答モードの違いによる操作感の違い ・音声の有無による没入感・楽しさの違い. 音声ウェブブラウザの概要. 目的：　楽しさ・快適さ タスクの達成しやすさを増す ぎこちなさの排除 処理時間の長い機能を排除 仕様の検討 直接操作：システムを実装・評価 対話的支援：模擬対話等から検討. 音声認識レベルメータ（ドキュメントトーカ OCX ）. ２種類の確認応答モデル. 確認応答あり. ユーザ発話：

quentin-reid
Download Presentation

音声ウェブブラウザ VOXplorer の評価

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. 音声ウェブブラウザ VOXplorerの評価 西本卓也　藤澤正樹 新美康永 京都工芸繊維大学　工芸学部　電子情報工学科 発表内容：・確認応答モードの違いによる操作感の違い・音声の有無による没入感・楽しさの違い

  2. 音声ウェブブラウザの概要 • 目的：　楽しさ・快適さ • タスクの達成しやすさを増す • ぎこちなさの排除 • 処理時間の長い機能を排除 • 仕様の検討 • 直接操作：システムを実装・評価 • 対話的支援：模擬対話等から検討

  3. 音声認識レベルメータ（ドキュメントトーカOCX）音声認識レベルメータ（ドキュメントトーカOCX）

  4. ２種類の確認応答モデル 確認応答あり ユーザ発話： リンク要求 システム発話： 確認 ユーザ発話： 確認 システム発話： 応答 システム発話： 受付開始 リンク名 リンク名 はい/そうです 了解 どうぞ 確認応答なし ページ更新 ユーザ発話： リンク要求 システム発話： 応答 システム発話： 受付開始 リンク名 リンク名 どうぞ

  5. ユーザの対話例 確認応答あり 確認応答なし ユーザ ： システム： 図書館 図書館？ そうです はい 了解 ＜ページ移動＞ 戻る 戻る？ そうです 了解 ＜ページ移動＞ ユーザ ： システム： もっと下 ＜下スクロール＞ 地域情報 地域情報 ＜ページ移動＞ 都道府県 都道府県 ＜ページ移動＞ 京都 京都 ＜ページ移動＞

  6. 認識発話数 認識発話数＋誤認識発話数＋棄却発話数 認識率 ＝ 確認応答の比較評価 • タスク：　Yahoo JAPANからリンクをたどり、指示されたページを発見する • 　被験者：　５名 • 　実験回数：　確認応答あり・なし　各3-4回 • 1対話の平均所要時間 • － ５～１０ 分 • 　処理速度：画面更新 • －平均 約8秒 リンク項目発話数 総ページ ページ移動発話数 ＝ リンク項目発話数 総ページ － 誤認識による移動ページ数 タスク達成発話数 ＝

  7. ページ移動発話数の比較 「確認応答なし」システムが効率的

  8. ページ移動およびタスク達成に要した発話数と認識率ページ移動およびタスク達成に要した発話数と認識率

  9. アンケート結果 • 確認応答を行うシステムは、集中しやすい、効率的、楽しい • 　誤認識で他ページに移動するリスクを負うより、頻繁に確認を行いたい？ • 　誤認識が極めて少ないユーザは、確認応答なしのシステムを好む。

  10. high 不安 フロー 挑戦 無気力 倦怠 技能 high 楽しさの評価 • 最適体験＝ flow 体験（Csikszentmihalyi） • 挑戦と技能が均衡した状態 • 没入感 • 内在的楽しさ • 時間を忘れてのめりこむ • 興味が対象に集中する • Hoffman&Novak, Chenら • ウェブは flow を起こしやすいメディアであることを指摘 • 音声は flow に貢献するか？

  11. 音声による楽しさの評価実験 • 被験者5人に音声認識を使ったゲームで遊んでもらい、孤立単語認識に慣れてもらう　（約４０分）最高認識率57%, 73%, 100%, 100%, 91% • VOXplorerを使って、特に目的を定めずにネットサーフィンをさせる。（約1時間）半分の時間はマイクをオフ（既存ブラウザとほぼ同等） • 約5分（ランダム）な周期でネットサーフィンを中断させ、その時点での被験者の体験を質問するESM : Experience Sampling Method

  12. 質問 • ４-６分間隔（ランダム） • 音声あり、なし各５回計１０回×５人

  13. フロー回数の判定 • 挑戦と技能の均衡で判断 • 挑戦と技能の差 <= 2 • 挑戦 >= 3 • 技能 >= 3の条件で、 • 音声あり：８回音声なし：６回 • フローの起きやすさ　：　音声なしと同等または増加 • 音声の使用により挑戦のレベルが上がる操作しやすくなることが、必ずしも最適体験ではない • しかし本当に、集中や楽しさをもたらしているか？

  14. 集中や興味への音声入力の貢献 被験者のアンケート回答（最高10, 平均） • 音声入力を用いることで、ユーザの意識を対象に集中させ、自分の取るべき行動をより自覚させ、対象への興味を増すことができる • 時間を忘れて没入させるためには、応答速度や対話制御など、さらに改善が必要

  15. まとめ • 音声ウェブブラウザにおける確認応答モードの評価 • 誤認識による誤ったページ移動のリスクよりも毎回確認を行うことを好む • 音声利用による没入感・楽しさの評価 • 音声入力によりネットサーフィンの楽しさが増す • 対象への興味や集中を高める • 課題 • より多くの被験者による検証 • 被験者の個人差の検討 • システムの性能・頑健性の向上 • 英語や固有名詞の読み • 複雑なプラグインやコンテンツ • 対話制御の拡張・改善

  16. 音声ウェブブラウザ VOXplorerの評価 西本卓也　藤澤正樹 新美康永 京都工芸繊維大学　工芸学部　電子情報工学科 • 音声ウェブブラウザにおける確認応答モードの評価 • 特定のページを探すタスクによる実験 • 誤認識による誤ったページ移動のリスクよりも毎回確認を行うことを好む • 音声利用による没入感・楽しさの評価 • フロー体験モデル・ ESM による実験ネットサーフィン中にランダムなタイミングでアンケートを行う • 音声入力によりネットサーフィンの楽しさが増す • 対象への興味や集中を高める • 操作しやすさにつながらない場合でも、音声が最適体験に貢献できる

More Related