ノアのモバイルユーザビリティテストへの移行

ノアは心配していました。 彼は、地域のクイックサービスレストラン（ファーストフードチェーン）の本社の「UXガイ」であり、常連客が食事をカスタマイズしたり、注文したり、報酬を獲得したりできるモバイルアプリを作成していました。

彼は、ユーザーの期待が高まっていることに気づき、モバイルエクスペリエンスの低下を容認していませんでした。 そのため、ノアは、ユーザーの期待の高まり、画面の縮小、ワイヤレスのバッテリー駆動デバイスの制約を考慮して、モバイルユーザーエクスペリエンスの使いやすさをテストすることが重要であると固く信じていました。 しかし、ノアは、長年の従来のユーザビリティテストの経験があっても、モバイルユーザビリティテストを実施したことがなかったため、心配していました。 それと、最初のテストラウンドがわずか1か月先だったという事実。

彼はすぐに、モバイルユーザビリティテストには、相違点よりも従来のデスクトップユーザビリティテストとの類似点が多いことに気づきました。 最大の違いは、実際のテスト自体にありました。 実際のテストに至るまでとテストに続くすべては同じままでした。 ユーザビリティテストを実施するために利用できる多くのオプションがありました。これには、モデレートまたは非モデレート、リモートまたは直接、およびそれらの組み合わせが含まれます。 モデレートされていないリモートテストにより、彼はより多くの参加者でより広いネットをキャストすることができましたが、コンテキストプロービングの機会は提供されませんでした。

彼が利用可能なオプションを調査したとき、NoahはUserZoomやUserTestingなどのサービスを将来のリモートテストのニーズに対する潜在的なオプションとしてブックマークしました。 彼の過去の経験から、モデレートされた対面テストは、他の方法では見落とされがちな豊富なユーザー洞察を提供することがわかりました。 それにより、彼は少数の参加者と一緒に特定の機能に集中することができ、彼らが探求していた概念を精査することができ、次のテストラウンドで彼が好むアプローチになります。

最初に予定されているユーザビリティテストの1か月前に、彼は自分が最もよく知っているパーツから始めて、テストの準備を始めました。 デスクトップのユーザビリティテストからモバイルに移行するノアをフォローしましょう。

1か月前

設計開発チームは、ノアが予定していた昼食後の会議にゆっくりと騙されました。彼が約束したブラウニーの噛みつきに誘惑された人もいました。 彼は会議を使用して、最初のユーザビリティテストセッションでテストされる予定だった機能と機能を確認しました。 彼らは現在設計段階にあるため、iOSアプリのプロトタイプを使用してユーザビリティテストを実施することになります。

チームはラフスクリーンのデザインを完了したばかりで、ユーザーがライブアプリやサイトであるかのようにタスクを完了できるインタラクティブなハイファイプロトタイプの作成を開始しました。 デザインリードは、最初のユーザビリティテストの1週間前にアプリのプロトタイプを準備することを約束したため、最後の（そして3回目の）ブラウニーバイトを手伝いました。 ノアは彼の電話でその日付のリマインダーを設定しました。

3週間前

翌週、ノアは、ユーザビリティテストの内容、理由、時期、場所、誰、および方法を文書化したユーザビリティテスト計画を作成する重要な最初のステップを開始しました。 過去の経験から、主要な利害関係者とプロジェクトチームのメンバーに計画の詳細を承認させることの重要性が彼に教えられました。 これにより、ユーザビリティテストで適切な機能をテストし、適切なデバイスで適切な代表者を対象に、適切なメトリックを収集して報告することができました。 テスト計画に加えて、彼はまた、非開示、補償領収書、リリースフォームなど、テストに必要となる他の文書を準備しました。

ノアは、1つのサイズですべてに対応できるわけではないため、ユーザビリティテストを成功させるために同様に重要なのは、適切な参加者を見つけることであることを知っていました。 過去と同様に、ノアはプロジェクトのペルソナを使用して、テストに使用する参加者のプロファイルを特定しました。 彼はいつもの市場調査会社に依頼して、意見パネルから適切な参加者を募集するためのスクリーナーを作成しました。 彼らはiOSアプリを構築していたので、スクリーナーには、参加者がiOS 7以降を実行しているiPhoneを使用していることを確認し、プラットフォームの規則とフラットなデザインに精通していることを確認するための質問も含まれていました。

彼はまだテストのためのセットアップと記録オプションを理解する助けを必要としていました。 「ミリオネアになりたい人」のファンであるノアは、Ask the Audienceライフラインに相当するものを使用して、モデレートされた対面のモバイルユーザビリティテストのセットアップオプションについて、いくつかのLinkedInUXグループからフィードバックを求めました。 知識を共有することを大いに信じている彼は、集合的な知恵をまとめてそれらのグループと共有することも約束しました。

2週間前

LinkedInとQuoraでのNoahのクエリはゆっくりと応答を受け取り始めましたが、多くの応答は他の人からも答えを探していました。 彼は新しい返信について通知を受けたので、Evernoteで有用なアプローチを切り取って収集し始めました。

ノアは、採用担当者の連絡先であるパットにステータスの更新をメールで送信し、1時間以内に返信を受け取りました。 彼らはこのラウンドの募集をほぼ完了し、7つのスロットのうち5つがペルソナのプロファイルに一致し、ノーショーがあった場合に備えて3つのフローターが埋められました。 パットのチームは、残りの2つのスロットについてパネルから確認を受け取るのを待っていました。 彼女は、週末までに参加者のプロフィールの要約を送信することを約束しました。 彼の経理部門が官僚的であることを十分に認識して、彼は参加者に彼らの時間を補償するために使用されるギフトカードの要求を提出しました。

彼は対面でのユーザビリティテストを実施する予定だったため、適切な場所を特定する必要がありました。 ノアは正式なユーザビリティラボでテストのシェアを実施していましたが、これらのテストに必要だとは感じていませんでした。 彼は、使用できる部屋を求めて本社を偵察しました。1つはテスト用、もう1つは参加者の待合室、3つ目はチームの報告室として使用しました。 彼は、建物の真ん中にユーザビリティテスト用の静かな窓のない部屋と、屋外の素晴らしい景色を望む他の2つの部屋を見つけ、すぐにテスト用に予約しました。

その週の彼の最も重要な目標は、テスト計画の利害関係者によるレビューを完了することでした。 彼は、通常の木曜日の朝の会議の2日前に、マーケティング、IT、クリエイティブデザインなどのプロジェクトの利害関係者に計画を電子メールで送信していました。 彼は、特にテストするタスクについて、フィードバックを準備するように依頼しました。 クリエイティブチームはタスクにいくつかの調整を加えましたが、ITには何も調整がありませんでしたが、マーケティングのチャドは細かい櫛でそれをやり遂げました。 彼のフィードバックには、いくつかの追加タスクの追加、およびブランディングからラベリングまでのすべてに関する詳細なフォローアップ質問が含まれていました。 ノアは、1時間のテストで現実的に4つ以下の主要なタスクを完了できると説明し、残りの朝はチャドと1対1で作業して、テスト計画のタスクを完了しました。

タスクが承認されると、ノアはユーザビリティテストセッションを記録するためのオプションに注意を向けました。 内蔵のウェブカメラと画面記録ソフトウェアのおかげで、彼は画面を記録するための多くのオプションと、コンピューターを使用したときの参加者の反応を持っていました。 ただし、モバイルユーザビリティセッションの記録は複雑でした。これは、同様の記録をキャプチャする方法のほとんどが邪魔になり、ユーザビリティテストに影響を与える可能性があるためです。 そこで彼は、 Ask theAudienceのライフラインが役立つことを望んでいました。 彼は12の応答を整理し、それらはすべてモバイルユーザビリティセッションを記録するための4つの方法に収束しました。 調査結果をまとめてグループの他のメンバーと共有するという彼の申し出を思い出し、ノアはオプションの文書化を開始しました。

LinkedInのグループで調査結果を共有したのと同じように、ノアの電話は、金曜日の夜のディナーデートを妻と1時間で思い出させるために鳴り響きました。 彼はすぐにコンピューターを休止状態にし、週末に家に帰りました。 長いですが、実り多い一週間でした。

一週間前

ノアは週末に自分のオプションについて考えていて、最後のオプションに傾倒していました。UXRecorderなどのアプリを使用して、追加の機器なしでテストを記録しました。 仕事に戻ると、プロジェクトチームは彼の選択に同意しましたが、UXディレクターは、地元のUXMeetupのユーザビリティスペシャリストにそれを検証するように依頼しました。 ノアは翌日、過去数年間モバイルユーザビリティテストを実施していたスペシャリストのダイアンと一緒に昼食をとりました。

彼は週末からの電子メールのバックログを処理しているときに、採用担当者からの完成した参加者プロファイルリストを見ました。 彼はプロファイルをスキャンし、探していた正確なペルソナプロファイルの内訳を受け取ったことを精神的に確認しました。 ただし、ある参加者のプロファイルは自分のペルソナに適合していないようで、収入などの特性がそのペルソナの期待範囲と一致していませんでした。 彼はその参加者の代わりを見つけるために代理店でパットに電子メールを送りました。

翌日、彼はレストランのある場所でダイアンに会い、 Ask AnExpertのライフラインのように感じました。 彼は、話し合いたいトピックのリストとテスト計画のプリントアウト、および記録設定オプションを用意してきました。 彼は1年以上前に地元のUXミートアップで初めてダイアンに会いました。彼女は自己任命の一人の歓迎委員会であり、70人ほどのUXerのグループですぐに彼を安心させました。

彼らが注文を出すのを待っている間、ダイアンは、補償を受け入れることを躊躇した親切な祖母を含めて、彼女がちょうど終えたばかりのユーザビリティテストについて話しました。 彼らが食事を待つ間、彼はiOSアプリのプロトタイプを使用して、対面でモデレートされたユーザビリティテストを実施することを計画していると説明し、テストを記録するための彼の選択についての彼女のガイダンスを望んでいました。 彼女は過去にこれらすべてのアプローチを使用し、テストについてさらにいくつか質問した後、彼の選択を検証しました。

食事中、彼は彼女にモバイルコンテキスト（ユーザーとインターフェース間の相互作用に影響を与える環境や使用状況など）を考慮に入れることについての提案を求めました。 彼女は、ラボの設定では、そのコンテキストをシミュレートすることが最善のオプションであると説明しました。 彼女はすぐにファーストフードの注文とそれを受け取ることに関する彼の仕事の1つを思い出し、最初に彼らの注文の受け取りの期待について調査すると言いました。 次に、彼女は、ジオフェンスを使用して注文の調理を開始することをどのように考えているかという概念を紹介し、その概念に関する参加者のフィードバックを得ようとしました。 彼女は一日の終わりの前に彼にさらにいくつかのポインターを電子メールで送ることを約束しました。 彼らがレストランを去るとき、彼はダイアンに彼女の指導に感謝した。

昼食の終わりに向かって、彼の電話は、設計チームが今日までにプロトタイプを完成させることを約束したことを彼に思い出させました。 オフィスに戻ると、彼は設計チームの部屋に向かい、プロトタイプのウォークスルーを取得しました。 デザインリーダーは、マーケティングからの土壇場での指示に基づいて、デザインの一部を再考する必要があると謝罪しました。 彼は彼らが週末までにそれをすべて完了することを目指していると言いました。 ノアは通常、テストの数日前にドライランを実施し、チームに土壇場での調整を行う時間を与えたため、これはノアの快適さのためにそれを近づけすぎていました。 彼は、ダイアンの提案に基づいてコンテキストをシミュレートするように注文と集荷のタスクを更新することで、そのことを気に留めようとしました。

彼が更新を行っているときに、彼はいくつかのポインターを含むダイアンの電子メールを受け取りました。

件名：モバイルテストポインタ

ノア、昼食時に約束したように、来週テストを設定して実施するときに覚えておくべきいくつかのポイントがあります。

ランチをありがとう、そしてすべての最高！

ダイアン

---

デバイス/プラットフォーム：参加者が自分のデバイスを使用していない場合は、使い慣れたプラットフォーム（iOS、Android、またはWindows）でテストしており、定期的に使用していることを確認してください。 独自のデバイスを使用する場合は、アプリのインストール、アクセスの設定などのロジスティクスと時間を考慮してください。

グレア：コンピューターでは、照明の問題に対応するように画面を調整できますが、ユーザーがモバイルデバイスを移動する傾向があるため、カメラを使用してモバイル画面を記録する場合（最初の2つのアプローチ）、グレアはモバイルで問題になりますより快適に使用するために、録音の一部を役に立たなくすることがあります。 書画カメラのセットアップ（最初のアプローチ）を使用する場合は、ペインターのテープを使用して、モバイルデバイスがその範囲内にとどまる必要があるゾーンをユーザーに思い出させます。

バッテリー/電源：もう1つのモバイルのみの問題は、使用されているデバイスにテストに十分な容量があり、長い充電ケーブルをすぐに利用できるようにすることです。 初めて個人用デバイスでUXRecorderをドライランに使用したとき、テストの途中で停止してスクランブルして充電ケーブルを入手する必要がありました。画面、ビデオ、オーディオの録音により、想像以上に早くバッテリーが消耗しました。

最後だが大事なことは：

通知/アラート：テストデバイスのすべてのアラートと通知をオフにします。 テストを中断するだけでなく、録音に影響を与える可能性があります。

ノアはドライラン中にこれらを再確認するようにメモしましたが、実際のテストの前日にスケジュールを変更する必要がありました。 来週は彼にとって長い週になるだろう…

ユーザビリティテストの週

月曜日の朝早く、ノアはプロトタイプを完成させるために週末の一部で働いていたデザインチームのためにボックスオジョーとドーナツを持ってきました。 彼らは次の1時間、プロトタイプをまとめて歩き、いくつかの小さな変更に気づきました。 設計チームは昼食前に更新を完了し、その日の午後のパイロットテストの前にノアに十分な時間を与えます。 彼は、ドライランに志願した同僚のエマにリマインダーメールを送信しました。 エマはアプリに関与していませんでした。従業員としてブランドマニアであることを除けば、彼らが期待できる限りのテスト参加者でした。

彼は、非開示、リリースフォーム、補償領収書など、必要な書類を印刷することで、テストの最終的な準備を開始しました。 彼はまた、UXRecorderを使用してパイロットテストを記録するためのテストクレジットを購入しました。 慎重に、彼はバックアップとしてスタンドを備えた2つのWebカメラも用意しました。 彼はアプリで記録オプションを構成し、アプリブラウザーからプロトタイプを起動し、タスクをクリックして記録しました。 ここまでは順調ですね！

セッションのメモ係として割り当てられたノアとソフィーは、テストの15分前にユーザビリティテスト用に予約された部屋に到着しましたが、エマはすでに彼らを待っていました。 ノアが立ち上がったとき、彼は彼らが次の1時間で何を成し遂げたいと望んでいたかを説明しました。 しかし、彼は録音アプリでプロトタイプを表示できませんでした。おそらく建物の真ん中にある部屋の場所が原因で、自分の電話に携帯電話や無線信号がないことにすぐに気付きました。 彼は謝罪し、待合室と報告室として予約した他の部屋を試してみました。

彼が試した最初の部屋では、プロトタイプが遅滞なく読み込まれました。彼の電話には強力な携帯電話とWi-Fi信号がありました。 彼はエマとソフィーを元の開始時間よりわずか数分遅れて新しい部屋に歩いて行きました。 彼は、アプリで録音を開始する前に、基本的なルールとプロセスについて説明しました。 4つのタスクと70分後、彼は録音を停止し、エマの助けに感謝しました。 アプリが1時間のセッションの記録をエクスポートしている間、ソフィーと彼はセッションについて話し合い、混乱を避けるために言い換える必要のあるタスクを特定し、実際のセッションから時間を短縮できる領域を探しました。 そのため、実際のテストの前に常に少なくとも1回のドライランを実施しました。これにより、モデレーターとしてのタスクに精通し、タスクが部外者に明確であることを確認し、必要に応じて時間調整を行うことができました。

ユーザビリティテストの初日は火曜日の朝に始まり、ノアはモデレーターとして快適ゾーンに戻りました。 スケジュールされた4つのテストはスムーズに進み、ノアとソフィーはテスト間の時間を使用して、ホワイトボードの壁でセッションのハイライトを報告およびキャプチャしました。 唯一の問題は、3回目のセッション中に電話が着信したことです。 彼は参加者にそれを却下してテストを続けるように頼んだ。 ダイアンが提案したように、彼はすべてのアラートと通知をオフにしましたが、電話はどういうわけかそれを通り抜けました。 その日に予定されていた4つのテストの後、セッションの記録がエクスポートされていたため、ホワイトボードの壁にあるセッションのハイライトから予備的な傾向を特定し始めました。 最初の2つは問題なくレンダリングされましたが、3番目のセッションは破損しているようで、エクスポートできませんでした。 ありがたいことに、最後のものは問題なくレンダリングされました。 彼は、この問題が翌日繰り返されることを懸念して、破損したビデオのログとともにアプリサポートチームにメールを送信しました。

水曜日に最初に予定されていた参加者はノーショーだったので、彼らはスタンバイフローターでテストを行いました。 その日の各テストの後、ノアはアプリサポートチームからの返信がなかったため、他の破損した録音を防ぐことを期待してiPhoneを再起動しました。 その日の3つの録音がグリッチなしでレンダリングされたとき、彼は安堵のため息をついた。 ソフィーと彼は午後の残りの時間を過ごして、すべてのメモと思い出を確認し、傾向分析を続けました。 テストを振り返ると、彼はまた、実際の世界ではテストできなかったとしても、シミュレートされたモバイルコンテキストに問題を抱えた参加者はいなかったと述べました。

ノアは、主要な調査結果を共有するためにプロジェクトチームとの報告会でその週を締めくくり、翌週に追加のセッションを主催することを申し出ました。

翌週

週末に、モバイルレコーディングアプリのサポートチームはノアにメールを送り、3番目のビデオが破損した理由を理解できなかったことを認めましたが、iPhoneからの生のビデオクリップを見つけて共有するための手順を説明しました。 彼はあまり希望を感じていなかったので、2Gbファイルを圧縮してアップロードし、共有しました。

彼らは最終的なユーザビリティテストレポートで順調に進んでいたため、ノアは金曜日の午後に主要なプロジェクトの利害関係者とプロジェクトチームとのレポートをスケジュールしました。 NoahとSophieは、残りの1週間をデータの分析、傾向の更新、主要な調査結果の文書化、および改善のための重大度と推奨事項に費やしました。 調査結果を報告するためのテンプレートと形式は多数ありましたが、ノアは長年にわたって調整したPowerPoint形式を使用するのが好きでした。これにより、視覚的な表示と通知が可能になりました。 彼は、テストに参加しなかったユーザーのために「A-ha」の瞬間を作り出すために特定の機能に苦労しているユーザーの短いビデオクリップ（またはモンタージュ）の力を大いに信じていました。 ソフィーは、ビデオクリップを切り抜いて、いくつかの重要な観察と推奨事項をコンテキストでサポートしました。

その週の昼食時に毎日、ノアはプロジェクトチームとのビデオレビューセッションを主導し、毎日異なる参加者のビデオ録画をレビューしました。 これは、ユーザーがアプリのプロトタイプをどのように操作し、どこでつまずいたかをチームが直接目撃するのに役立つだけでなく、ノアとソフィーが捉えていなかったいくつかの観察と洞察を明らかにしました。

金曜日の午後の最終報告会には、すべての主要な利害関係者が出席しました。 ノアはハイレベルな調査結果を提示し、ソフィーは詳細を調べました。 彼らは、運営委員会がアプリに対して当初想定していたものとは異なる観察と推奨事項について、いくつかの質問に答えました。 ノアが何度も見ていたように、サポートするビデオクリップは、利害関係者が立ち上がって注意を払い、コースの変更について会話を始めるのに十分でした。

週末に家に帰るとき、ノアは過去6週間と彼の最初のモバイルユーザビリティテストを振り返りました。最初の彼の懸念は誇張されていました。 彼は以前に従来のデスクトップユーザビリティテストの経験があったため、モバイルユーザビリティテストへの移行は比較的簡単でした。 セットアップは2つの間の最大の違いであり、彼が世話をしなければならなかったいくつかのモバイル関連のニュアンスがありましたが、それはまったく新しいスキルを学ぶようなものではありませんでした。

その後の数か月間、Noahの継続的なユーザビリティテストは、プロジェクトチームがプロトタイプから完全に機能する製品に進むにつれて、アプリを微調整するのに役立ちました。 リリースとそれに続くすべてのメジャーリリースで、アプリは4つ星と5つ星のレビューの大部分を受け取りました。

TL; DR：活動のタイムライン

1ヶ月前

• 設計チームと協力して、テスト用に構築できるものを特定し、最初のテストの数日前に準備ができていることを確認します

3週間前

• ペルソナに基づいてユーザビリティテストの参加者プロファイルを特定する
• 採用スクリーナーを作成する
• 参加者の選別と募集

2週間前

• 利害関係者と一緒にユーザビリティテスト計画を確認し、タスクを完成させます
• テストに必要な部屋を特定して予約する
• 参加者とスタンバイフローター参加者を確定してスケジュールします
• 参加者のインセンティブを手配する

一週間前

• テストするプロトタイプまたはアプリを使用してタスクをウォークスルーします
• 録音設定のテスト
• ユーザビリティテスト全体のドライランを実施する

ユーザビリティテストの週

• 必要なすべてのドキュメントを印刷します（テストプラン、スクリプト、非開示、リリースフォーム、報酬領収書）
• 電源、接続性、グレアなどを含むユーザビリティテストルームのセットアップを確認してください。
• 各セッションの終わりに内部報告を行い、1日の終わりにレビューを行います
• テストが完了した後、傾向を特定して文書化します

翌週

• ユーザビリティレポートに調査結果を文書化する
• プロジェクトチームでビデオ録画を確認する
• 重要な観察と推奨事項をサポートするために、録画からビデオクリップを特定して作成します
• 調査結果の報告

リソースとリンク

計画テンプレートと記録設定

• ユーザビリティテストの計画
• ユーザビリティテストスクリーナー-モバイルデバイステスト
• ユーザビリティテスト計画テンプレート
• シンプルで痛みのないモバイルユーザーテストのガイド

モバイルテストのチェックリスト

• 詳細なチェックリストとSteveKrugのRocketSurgery MadeEasyからのその他のダウンロード
• UserTestingモバイルユーザビリティテストチェックリスト（無料サインアップが必要）

ユーザビリティレポートテンプレート

• 長いテンプレート
• 短いテンプレート
• ユーザビリティテストレポートの例

SmashingMagの詳細：

• デバイスの優先順位付け：テストとレスポンシブWebデザイン
• 世界最高のオープンデバイスラボはどこにありますか？
• シンプルで痛みのないモバイルユーザーテストのガイド