手動テストは死んでいない、手動テスト万歳

1897年、伝説的なアメリカの風刺作家マーク・トウェインが亡くなったと報じられました。実際、彼は健康状態は良好でした。存命であったにもかかわらず、死亡記事が掲載されたことについてコメントを求められたトウェインは、「私の死に関する報道は誇張でした」と答えました。

手動テストの世界では、時折、「今回は手動テストは死んだ」という記事を目にします。少なくとも、生命維持装置につながれているという記事です。こうした記事は、常にかなりの恐怖心を込めて書かれており、臆病な手動テスターを罠にかけようとしています。

多くの企業がテスト自動化に頼っています。「これが次の大きなトレンドだ」と彼らは言います。本当にそうでしょうか？テスト自動化は20年以上前から存在しています。「100%の自動化を目指す」と。あなたはどう思いますか？私たちはそれがほぼ不可能だと知っています。しかし、もしそれが本当なら、多くの手動テスターが職を失うことになります。真実は、企業が100%の自動化を目指すのは賢明ではないし、手動テスターが自分の技術を放棄するのも賢明ではないということです。

世界の中に、 DevOpsウェブアプリやモバイルアプリのバグ探しには、テスト自動化が不可欠です。同時に、手動テストもウェブアプリやモバイルアプリのテスト戦略において依然として重要な要素です。手動テストはQAチームのメンバーがエラーをより正確に発見するのに役立ちます。そして最終的には、多くの自動テストが手動テストの取り組みから開発されることになります。

手動または自動化

QAテスターは、ユーザーがアプリを操作する方法を正確に再現したいと考えています。これは、 自動テスト 一人で。だからこそ、しっかりとしたウェブと モバイルテスト この戦略では、さまざまなテスト手法を採用しています。その結果、アプリのすべての要件が満たされます。

もう少し詳しく説明しましょう。

• テスト自動化 – 手動テストでは面倒で時間がかかりすぎる、日常的かつ反復的なシナリオのテストに適しています。
• 手動テスト – 自動テストでは人間がアプリを操作する方法を正確に再現できないシナリオに最適です。

興味深いことに、QAチームが手動でしか実行できないテスト形式がいくつかあります。さらに、自動テストプロジェクトの設定や結果の分析には、いずれにしても人間の介入が必要です。

自動テストの台頭により手動テストが時代遅れと見なされるのは、ほとんど不公平に思えます。もちろん、どちらの形式にもメリットはありますが、なぜ手動テストが今もなお生き残っているのか、より深く考えてみましょう。

一部のテストは手動で行う必要がある

優れたUXを提供する必要性は高く、だからこそ手動テストが依然として不可欠であると言えるでしょう。人間による操作は、依然として機能性をテストする最も効果的な方法です。自動化できないシナリオは様々です。技術的な制限がある場合もあれば、機能が複雑すぎる場合もあります。また、自動化にかかるコストがアプリの手動テストにかかるコストをはるかに上回る場合もあります。

スモークテストを自動化することもできますが、手動チームに任せた方が効率的です。アプリをざっと触って、次のテスト段階に本当に準備ができているかどうかを確認する方が早いでしょう。そのようなプログラムのスクリプトを書くのははるかに時間がかかり、テストスクリプトは長期的に再利用できません。

人々への力

自動テストは反復的なテストを自動化し、チームの他のメンバーが手動テストを実行できるようにします。UXとユーザビリティをテストする場合、手動テストはこれまで以上に不可欠です。UXを手動でテストするテスターは、直感と本能を駆使して、適切に動作していない機能や効率化が必要な機能を的確に把握します。不適切なユーザーパスを発見した場合、テスターは開発者とコミュニケーションを取り、変更の可能性について話し合う必要があります。

UXテストは、アプリの開発とテストに携わるチームだけでなく、それ以上の力を発揮します。最も効果的な手動ユーザビリティテストは、個々の開発に関わっていない人が担当します。そうすることで、事前の知識なしにアプリを操作できるようになります。もし問題があれば、彼らが発見してくれるでしょう。

ユーザーも同様です。できれば、発見したバグを報告してもらい、手動テスターがすぐにバグを再現できるようにし、バグレポートを提出してもらい、プロセスを継続します。

間違った場所でバグを探す

特定のユースケースをテストすると、QAチームが想定外のバグを発見することがよくあることに気づきます。これは非常に重要なことです。場合によっては、特定のビルドにおけるバグの大部分がテスターに​​よって発見されることもあります。自動テストで発見できるのは、プログラムされた通りに発見されるものだけです。

探索的テストは、ユーザビリティの問題を発見するための人間的なアプローチに基づいています。さらに、手動テスターに​​は制限がありません。自発性と主体性を持って対話し、自動テストではカバーされていない領域を探索する自由が与えられます。何かがおかしいと感じ取るには、ある程度の常識が必要です。そして、この人間的な対話こそが、手動テストやテスト全体をより効果的にするのです。

自動化の代償

自動テストプロジェクトでは、使用するツールの費用に加え、保守・管理費用も発生します。セットアップや処理時間もこれに含まれます。もちろん、大規模な製品や長期プロジェクトであれば、これらの費用は投資に見合う価値があります。これらのプロジェクトでは、自動化スクリプトは反復的なテストを可能にするため、大きなメリットとなります。

小規模なプロジェクトでは、手動テストは時間と費用の両方を節約します。自動テストの実行中は、テスターとQA担当者は他の作業に集中できます。しかし、自動テストスイートを実行する際に、テスト自体にバグがある場合、試行錯誤を重ねた手動テストによって問題が解決されることもあります。
さらに、テストサイクルの終盤、時間が極めて重要な局面では、手動テストを活用することでテストの潜在能力を最大限に発揮できます。自動テストを実行する前に、手動でアプリをスキャンし、セットアップに含まれていることを確認することを強くお勧めします。自動テストのスクリプトで見落とされていた、土壇場でのバグや欠陥を発見できるでしょう。

アクセシビリティ テスト

これまで何度かブログで議論してきたように、ユーザーがデバイスの使用やウェブサイトへのアクセスに困難を抱えている場合、そのサービスを提供する必要があります。

アクセシビリティ テスト どのような具体的な改善を行えば、障害を持つ顧客にとって Web アプリやモバイル アプリが使いやすくなるかを示します。

これを確実にする一つの方法は、プロセスにアクセシビリティテストのレイヤーを追加することです。このタイプのテストでは価値判断が必要となるため、人間同士のインタラクションが最適です。また、障害のある人々によるフォーカスグループから貴重な意見を得ることもできます。

重要な手動テストのユースケース

上で見てきたように、自動テストが実現不可能な場合でも、手動テストは依然として重要です。自動テストはより華やかで注目を集めますが、手動テストもSDLCにおいて依然として重要な意味を持ちます。

自動化されたスクリプトよりも手動が役立つユースケースの一部は、次のとおりです。

Wi-Fiへのログオフとログイン、複数のアプリの同時実行、デバイスの権限設定など。さらにいくつかのユースケースを見てみましょう。

• バグの複製 – テスターはバグレポートを読み、デバイスを手に取り、それを再現するだけです。フレームワーク、要件、シナリオを設定する必要はありません。
• デバイスの互換性 – 特定のデバイス/OS の組み合わせで問題が発生している場合は、手動でリアルタイムでテストしてください。
• UI/UXインタラクション – これらのシナリオを手動でテストすることで、実際のユーザーがアプリをどのように操作するかを理解し、より多くのバグを検出できます。
• スタンバイモード – ネットワークが切断されたり同期が失われたりした場合に、スタンバイ モードがアプリに悪影響を与えないことを確認するために、手動でテストします。
• デバイスの権限 – これらは通常、QA チームが権限があまり使用されないと判断したときに手動でテストされます。
• アプリの接続性 – 実際のネットワーク環境に対して手動でテストします。
• ジェスチャー – ナビゲーションに問題があるかどうかを確認するために、手動でテストする必要があります。
• 性能試験 – 他のアプリと対話する際のアプリの動作を手動でテストします。

手動テストは生き続ける

ウェブアプリとモバイルアプリのテストには、自動テストと手動テストの両方の手法を取り入れるべきです。自動化と手動テストの割合は、テスト対象のアプリによって異なります。バグ、欠陥、エラーの価値判断には手動テストを活用しましょう。一方、自動テストは、テスターを退屈なテスト作業から解放します。
UIインタラクション、バグの再現性、パフォーマンスのテストにおいて、手動テストは代替手段となりません。さらに、アクセシビリティとジェスチャーのテストは、他のどの方法よりも優れています。

この中で一番良い点は、 Digital.ai Continuous Testing クラウド上の数百台のデバイスに対して、このタイプの手動テストを実行できます。ウェビナーをご覧ください。 2021年にクラウドでのテストがいかに重要かを知る.