kkamegawa's weblog

Visual Studio,TFS,ALM,VSTS,DevOps関係のことについていろいろと書いていきます。Google Analyticsで解析を行っています

Visual Studio Team Services で手動テストを実行してバグ記録、修正をする(14日目)

手動テスト、バグ発行

テストを実行

f:id:kkamegawa:20161214060340p:plain

昨日作成した、テスト計画のテストケースからテストを実行します。Activeになっているテストを選択して、Run with Optionsを選択します。

Chromeで実行

f:id:kkamegawa:20161214063138p:plain

こんな選択肢が表示されます。

  • Webブラウザでテストランナーを実行かTest Manager(2015/2017)を使う
  • クライアントのデータ収集する(Test Managerのみ)
  • テスト対象のビルドを選択する

f:id:kkamegawa:20161214063137p:plain

テスト対象のビルドはこんな風にFind buildから選択できます。これによって、テスト対象のビルドの品質を計測することができます。自動化を構成していた場合、この辺は自動で行われます。

f:id:kkamegawa:20161214064435p:plain

Webランナーを実行したとき、このような小さいウィンドウが表示されます。テストケースを作ったときの手順も表示されるので、この通りに実施します。

昨日Chromeでなければならないという理由が右上の四つのボタンです。カメラ(画面キャプチャ)、ユーザー操作およびログ、動画撮影、追加情報の添付といった機能はすべて昨日紹介したChromeの拡張機能で実装されています。

拡張機能はChromeベースのWeb標準技術になることが決まっているので、遠からずEdgeやFirefoxでもサポートされるのでしょう、たぶん、きっと。

手順の横にあるレと×で期待通りの動作かどうかをチェックします。レが成功で、×が失敗です。

f:id:kkamegawa:20161214064436p:plain

失敗と判定した場合、コメントへの追記や画面キャプチャ、追加情報を添付しましょう。

Create Bugをクリックすると、VSTSへバグの登録ができます。

バグ情報

f:id:kkamegawa:20161214060338p:plain

作成したバグはすぐにVSTSで確認できます。対象のビルド、テスト、プロダクトバックログといった情報がすべてリンクされています。

f:id:kkamegawa:20161214060350p:plain

こんな風に添付された情報の確認やテスト計画を一覧で確認できます。

f:id:kkamegawa:20161214060351p:plain

概要の確認ができます。Update Statusをクリックすると、このバグの原因などが登録できます。

f:id:kkamegawa:20161214060354p:plain

今回は新しい問題なので、New Issue,Product issueといった分類を記録して、コメントに具体的に何が問題だったのかみたいな情報を記録しておくことで、みんながトラックできます。

バグ修正

f:id:kkamegawa:20161214060343p:plain

Aboutが間違えていたので、変更してコミットします。

f:id:kkamegawa:20161214060339p:plain

新しくビルドができたので、このビルドでテストを実施します。

f:id:kkamegawa:20161214060352p:plain

コミット時に関連付けておいたので、バグのDevelopmentに変更コードのリンクが作成されています。

f:id:kkamegawa:20161214060353p:plain

Developmentをリンクをクリックすると、変更点が差分で表示されます。

Test Managerでの実行

f:id:kkamegawa:20161214060346p:plain

Test Managerでテスト実行する場合、ブラウザでは選択できなかった、Data Collectionが指定できます。これを指定した場合、OSを一度再起動が要求されるので、再起動してください。

f:id:kkamegawa:20161214060347p:plain

同じテストステップを見るので、同じ内容が表示されています。

f:id:kkamegawa:20161214060349p:plain

同様に、失敗した場合のチェックもつけられます。