カバレッジ測定ツール AxoCover をVisual Studio 2019で利用する方法

1.前書き

Visual StudioアドインAxoCoverはVisual Studio 2012 ～ 2017で利用可能な【カバレッジ測定ツール】です。Visual Studio Enterpriseにもカバレッジ測定機能が組み込まれていますがとても高価ですので、
Community版で利用可能な無償ツールはとてもありがたいです。

• サンプルソース

ツールの特徴

• ユニットテストを自動で検出します。
• ユニットテストを実行すると、クラス、メソッド毎にカバレッジ率を表示することができる。
• カバレッジ測定自体はコマンドラインツールのopencoverを利用しているようです。アドオンとして統合されているAxoCoverを使えば、細かい設定を意識せずに測定ができます。

---

ただし、困ったことにVS2019にはインストールできません

---

なぜならAxoCoverはここ数年、開発が止まっているからです。

それでもgithubのissue上でVS2019対応について議論がなされており、pre-releaseとしてVS2019に対応したmaster-1.1.400が公開されています。

VS2019で非推奨となったAPIを利用しているため起動時に警告が表示されますが、動作自体に問題はないようです。

(起動時に同期ロードAPIを利用しているため、VisualStudio起動時のパフォーマンスに影響があるようです)

2.AxoCoverインストール方法

Visual Studio 2019の「拡張機能の管理」からはインストールができないため、拡張機能(.vsix)をgithubからダウンロードします。

• 1.AxoCover.vsixのダウンロード

AxoCover.vsixを、githubからダウンロードします。

• 2.インストール

ダウンロードしたファイルを右クリックして、インストール(開く)を行います。

• インストール対象のバージョンを選択して「Install」をクリック

• Visual Studioが起動していると、インストールを妨げているプロセスを終了してよいか確認する画面が表示されます

Visual Studioを手動で終了すると次へ進みます(もしくはEnd Tasksで強制終了して次へ進みます)

• インストール中

• インストール完了画面

---

インストール自体はこれで完了ですが、VisualStudio起動時にアドイン読み込みエラーが表示されます。

• Visual Studio 2019を起動後の警告表示

ここでは「同期自動読み込みを許可」をクリックして、アドオンの読み込みを継続します。

• AxoCoverの表示

「ツール」メニューから選択して表示します

• 初回起動時の確認画面

エラー時にtelemetryを送るかどうか選択して「OK」をクリックします。

• AxoCoverアドオン画面(UnitTestが存在しない場合)

ソリューション内にUnitTestがない場合、テストコードが見つかりませんよ？という確認の画面が表示されます。

• AxoCoverアドオン画面(UnitTestが存在する場合)

UnitTestがある場合は自動的に検出されて、テストがツリー表示されます。

3.簡単な動作確認手順

動作確認のため、ごく単純なテスト対象プロジェクト(CalcLogic.cs)と、UnitTestプロジェクトを作成します。

サンプルソース(github)

3-1. テスト対象プロジェクトの作成

• .NET Frameworkで適当にプロジェクト(exeでもdllでもどちらも可)を作成してテスト対象ソースき下記コードを記載します。

分岐が1つだけの簡単なロジックです。

    public class CalcLogic
    {
        public static decimal Add(decimal a, decimal b)
        {
            return a + b;
        }

        public static decimal Sub(decimal a, decimal b)
        {
            return a - b;
        }

        public static decimal Mul(decimal a, decimal b)
        {
            return a * b;
        }

        public static decimal Div(decimal a, decimal b)
        {
            if (b == 0)
            {
                return 0;
            }

            return a / b;
        }
    }

3-2. ユニットテストの作成

• ソリューションを右クリックして「単体テストプロジェクト」を追加します

• 適当にプロジェクト名を決めて(UnitTestProject)作成します。（作成後、テスト対象のプロジェクトを参照に追加してください）

UnitTestコードは下記のようになります。

    [TestClass]
    public class TestCalcLogic
    {
        [TestMethod]
        public void TestAdd()
        {
            Assert.AreEqual(CalcLogic.Add(1, 2), 3);
        }

        [TestMethod]
        public void TestSub()
        {
            Assert.AreEqual(CalcLogic.Sub(1, 2), -1);
        }

        [TestMethod]
        public void TestMul()
        {
            Assert.AreEqual(CalcLogic.Mul(1, 2), 2);
        }

        [TestMethod]
        public void TestDiv()
        {
            Assert.AreEqual(CalcLogic.Div(1, 2), 0.5M);
            //Assert.AreEqual(CalcLogic.Div(1, 0), 0M); // 分岐を100%にしないためにコメントアウト
        }
    }

3-3. AxoCoverでカバレッジ測定

AxoCoverを表示すると、UnitTestがツリー状に表示されます。赤枠で囲った「Cover」をクリックすると、選択されている部分のUnitTestが行われてから、カバレッジ測定の結果が表示されます。

• 測定前

• 測定後（UnitTest実行結果）

全てのテストが正常に終了。

• 測定後（Reportタブ）

テスト対象のうち「Div()」メソッドの分岐カバレッジが100%になっていません。

右下の「Source」をクリックすることで、該当ソースを開いてカバレッジの詳細を確認することができます。

b == 0の場合の分岐が通っていないことが一目瞭然です。

3-4. UnitTestを修正して再確認

• TestDiv()メソッドのコメントを外して、再度UnitTestを実行します

    [TestClass]
    public class TestCalcLogic
    {

        [TestMethod]
        public void TestDiv()
        {
            Assert.AreEqual(CalcLogic.Div(1, 2), 0.5M);
            Assert.AreEqual(CalcLogic.Div(1, 0), 0M); // 分岐を網羅するためコメントアウトを削除
        }
    }

• 無事、分岐網羅率が100%になりました(C1網羅)

4.手動操作(テスト)時にカバレッジ測定を行う方法について

AxoCoverは、ユニットテストを自動的に検出して実行するのと同時にカバレッジ測定を行います。
これでは、個別にプログラムを起動して手動で動作確認を行うことができません。

実は、ユニットテストコードからテスト対象フォームを起動し、手動でテストを行うことでカバレッジを測定することが可能です。

• テスト対象フォーム起動ユニットテストコード

namespace ManualTest
{
    [TestClass]
    public class UnitTest1
    {
        [TestMethod]
        public void ManualTest()
        {
            // Show form, and test manualy
            TestTargetExeForm.Program.Main();

        }
    }
}

• フォーム起動用ユニットテストを選んでテストを実行します。

• テスト対象フォームが起動します。手入力で「1 - 2」を入力して「計算ボタン」を押下します。

• プログラムを「×」ボタンで閉じるjとカバレッジ測定結果が表示されます。引き算のみ実行されたことがわかります。

その他調査

確認内容	結果	補足
テスト対象が.NET2.0、UnitTestが.NET4.8の場合でもカバレッジ測定は可能か？	可能
UnitTestプロジェクトのフレームワークを.NET4.0にしても測定は可能か？	不可	MSTest.TestFrameworkが.NET4.5以降を要求するため
プロジェクト参照、通常のdll参照どちらでもカバレッジ測定はできるか？	可能