Отчет "Производительность команды тестирования" в формате Excel

Статья
04/10/2013

Команды, ответственные за тестирование программного обеспечения, могут использовать отчет "Производительность команды тестирования" для отслеживания общей активности команды и отдельных ее членов при тестировании продуктов и поиске и представлении сведений об ошибках.Отчет "Производительность команды тестирования" содержит четыре отчета, отражающих активность по тестированию и устранению ошибок.

Отчет Действия тестирования позволяет команде отслеживать объем тестов, выполненных за последние четыре недели.
Отчет Действия тестирования по пользователям дает возможность отслеживать объемы тестов, выполненных отдельным участником команды за последние восемь недель.Эти сведения могут использоваться для распределения нагрузок между участниками команды.
Отчет Сведения об ошибках, созданные пользователем позволяет отслеживать количество ошибок, выявленных каждым участником команды.

Отчет Эффективность устранения ошибок помогает команде оценивать эффективность выявления важных ошибок и способствует созданию высококачественного продукта.

Примечание
Отчет "Производительность команды тестирования" находится в папке Управление командой тестирования, расположенной в папке Отчеты Excel командного проекта Team Explorer.Доступ к данной папке возможен только в том случае, если портал командного проекта работает и может использовать приложение Продукты SharePoint.Дополнительные сведения см. в разделе Доступ к порталу командного проекта и руководству по процессу.

Отчет "Производительность команды тестирования" находится в папке Управление командой тестирования, расположенной в папке Отчеты Excel командного проекта Team Explorer.Доступ к данной папке возможен только в том случае, если портал командного проекта работает и может использовать приложение Продукты SharePoint.Дополнительные сведения см. в разделе Доступ к порталу командного проекта и руководству по процессу.

В этом разделе

Данные в отчетах
Действия, необходимые для отслеживания выполнения тестов и исправления ошибок
Обновление и настройка отчетов

Связанные разделы

Необходимые разрешения

Для просмотра отчета необходимо быть членом группы, имеющей разрешение Чтение в Продукты SharePoint для командного проекта.

Для изменения или настройки отчета необходимо быть членом роли безопасности TfsWarehouseDataReaders служб аналитики SQL Server.Кроме того, необходимо иметь разрешение или быть членом группы, имеющей разрешение Члены в Продукты SharePoint для командного проекта.Дополнительные сведения см. в разделах Предоставление доступа к базам данных хранилища данных для Visual Studio ALM и Управление разрешениями.

Данные в отчетах

Отчеты о тестах доступны только в том случае, если команда создает планы тестирования и начинает выполнение тестов с использованием Microsoft Test Manager.Сведения об определении наборов тестов и планов тестирования см. в разделе Группировка тестовых случаев в наборы тестов.

Отчеты об исправлении ошибок доступны только в том случае, если команды создает записи об ошибках и начинает их разрешать.

Эти отчеты основаны на отчетах сводных таблиц, в которых отображаются действия, зарегистрированные по конкретным командным проектам, и данные, хранящиеся в хранилище данных.

Отчеты о действиях тестирования и действиях тестирования по пользователям

Отчет "Действия тестирования" содержит линейчатую диаграмму, отражающую количества отдельных тестов, выполняемых каждый день.Если в течение одного дня какой-либо тестовый случай был выполнен трижды, количество будет равно трем.

Отчет "Действия тестирования" в формате Excel

Отчет "Действия тестирования по пользователям" содержит линейчатую диаграмму и дает возможность отслеживать объемы тестов, выполненных каждым участником команды за каждую неделю.

Отчет "Действия тестирования по пользователям" в формате Excel

В следующей таблице описаны фильтры отчетов и поля, используемые в сводных таблицах для создания отчетов о действиях тестирования.

Фильтры	Поля
Командный проект - Иерархия командных проектов: включает данные, собранные для выбранного командного проекта. Результат тестирования - Иерархия областей: включает результаты теста, выполненного из тестовых случаев, назначенных выбранным областям продукта. Результат тестирования - Иерархия итераций: включает результаты теста, выполненного из тестовых случаев, назначенных выбранным итерациям. План тестирования - Имя плана тестирования: включает результаты тестов, выполненных из тестовых случаев, относящихся к выбранным планам тестирования. Фильтр, присущий отчету "Действия тестирования": Результат тестирования - Выходной результат: включает результаты тестов с исходом "Пройден", "Не пройден" и "Никогда не запускавшийся". Примечание Поле Исход в фильтре отчета не числится.Однако оно задано в Списке полей сводной таблицы. Фильтр, присущий отчету "Действия тестирования по пользователям": Тестовый запуск - Автоматический: включает только результаты теста ручных тестовых случаев.(Автоматический=False)	(Мера) Тест - Число результатов: содержит количество всех результатов каждого отдельного тестового запуска. Дата - Наборы - Последние 4 или 8 недель: определяет интервал времени, результаты за который необходимо включить в отчет. Поле, присущее отчету "Действия тестирования по пользователям": Тест - Результаты теста, выполненного пользователем: группирует количества результатов тестов по пользователям, выполнившим тесты.

Командный проект - Иерархия командных проектов: включает данные, собранные для выбранного командного проекта.
Результат тестирования - Иерархия областей: включает результаты теста, выполненного из тестовых случаев, назначенных выбранным областям продукта.
Результат тестирования - Иерархия итераций: включает результаты теста, выполненного из тестовых случаев, назначенных выбранным итерациям.
План тестирования - Имя плана тестирования: включает результаты тестов, выполненных из тестовых случаев, относящихся к выбранным планам тестирования.

Фильтр, присущий отчету "Действия тестирования":

Результат тестирования - Выходной результат: включает результаты тестов с исходом "Пройден", "Не пройден" и "Никогда не запускавшийся".

Примечание

Поле Исход в фильтре отчета не числится.Однако оно задано в Списке полей сводной таблицы.

Фильтр, присущий отчету "Действия тестирования по пользователям":

Тестовый запуск - Автоматический: включает только результаты теста ручных тестовых случаев.(Автоматический=False)

(Мера) Тест - Число результатов: содержит количество всех результатов каждого отдельного тестового запуска.
Дата - Наборы - Последние 4 или 8 недель: определяет интервал времени, результаты за который необходимо включить в отчет.

Поле, присущее отчету "Действия тестирования по пользователям":

Тест - Результаты теста, выполненного пользователем: группирует количества результатов тестов по пользователям, выполнившим тесты.

Сведения об ошибках по пользователям и отчеты об эффективности устранения ошибок

Отчет "Сведения об ошибках, созданные пользователем" содержит линейчатую диаграмму и дает возможность отслеживать количества ошибок, обработанных каждым участником команды за каждую неделю.

Отчет "Ошибки по пользователям" в формате Excel

Отчет "Эффективность устранения ошибок" содержит линейчатую диаграмму, помогающую команде оценивать количество выявленных каждым участником команды ошибок, сгруппированных по разрешениям.

Отчет "Эффективность ошибки" в формате Excel

В следующей таблице описаны фильтры отчетов и поля, используемые в сводных таблицах для создания отчетов о действиях по устранению ошибок.

Фильтры	Поля
Командный проект - Иерархия командных проектов: включает рабочие элементы, определенные для выбранного командного проекта. Рабочий элемент - Иерархия Work Item.Iteration: включает рабочие элементы, присвоенные выбранным путям итерации. Рабочий элемент - Иерархия Work Item.Area: включает рабочие элементы, присвоенные выбранным областям продукта. Рабочий элемент - Тип Work Item.Work Item: включает только выбранные рабочие элементы.Для этих отчетов необходимо выбрать ошибку. Фильтр, присущий отчету "Сведения об ошибках, созданные пользователем": Рабочий элемент - Вер.=1: выбирает для включения в отчет данные, содержащиеся в первой версии рабочего элемента. Фильтры, присущие отчету "Эффективность устранения ошибок": Рабочий элемент - Состояние: включает рабочие элементы с выбранным состоянием.Для данного отчета включаются ошибки в состоянием Разрешено. Рабочий элемент - Рабочий элемент.Предыдущее состояние: включает рабочие элементы, предыдущее состояние которых совпадает с одним из выбранных состояний.Для данного отчета включаются ошибки, у которых предыдущее состоянии было Активная. Дата - Год, месяц, день=Все: включает рабочие элементы, содержащие дату, отвечающую предыдущим фильтрам в списке в выбранных периодах времени.В этот отчет включаются все периоды времени.	Поля, присущие отчету "Сведения об ошибках, созданные пользователем": Рабочий элемент - Автор: упорядочивает отчет об ошибках на основании данных о участниках команды, создавших сведения об ошибке. (Мера) Рабочий элемент - Число исправлений: количество изменений, внесенных в рабочий элемент.Поскольку отчет фильтруется только с учетом данных, содержащихся в первой версии каждой записи об ошибке, данные о числе изменений представляют суммарное число записей о новых ошибках, созданных участником команды. Дата - Наборы - Последние 8 недель: продолжительность действия, включаемая в отчет. Поля, присущие отчету "Эффективность устранения ошибок": Рабочий элемент - Причина: причина изменения состояния рабочего элемента.В отчете об эффективности устранения ошибок данные группируются по полям Как разработано, Невозможно воспроизвести, Дубликат и Исправлено. (Мера) Рабочий элемент - Число изменений состояния: указывает, сколько раз член команды изменял состояние рабочего элемента.В отчете "Эффективность устранения ошибок" это поле указывает на то, как часто ошибка активировалась повторно. Рабочий элемент - Автор: упорядочивает отчет об ошибках на основании данных о участниках команды, создавших сведения об ошибке.

Командный проект - Иерархия командных проектов: включает рабочие элементы, определенные для выбранного командного проекта.
Рабочий элемент - Иерархия Work Item.Iteration: включает рабочие элементы, присвоенные выбранным путям итерации.
Рабочий элемент - Иерархия Work Item.Area: включает рабочие элементы, присвоенные выбранным областям продукта.
Рабочий элемент - Тип Work Item.Work Item: включает только выбранные рабочие элементы.Для этих отчетов необходимо выбрать ошибку.

Фильтр, присущий отчету "Сведения об ошибках, созданные пользователем":

Рабочий элемент - Вер.=1: выбирает для включения в отчет данные, содержащиеся в первой версии рабочего элемента.

Фильтры, присущие отчету "Эффективность устранения ошибок":

Рабочий элемент - Состояние: включает рабочие элементы с выбранным состоянием.Для данного отчета включаются ошибки в состоянием Разрешено.
Рабочий элемент - Рабочий элемент.Предыдущее состояние: включает рабочие элементы, предыдущее состояние которых совпадает с одним из выбранных состояний.Для данного отчета включаются ошибки, у которых предыдущее состоянии было Активная.
Дата - Год, месяц, день=Все: включает рабочие элементы, содержащие дату, отвечающую предыдущим фильтрам в списке в выбранных периодах времени.В этот отчет включаются все периоды времени.

Поля, присущие отчету "Сведения об ошибках, созданные пользователем":

Рабочий элемент - Автор: упорядочивает отчет об ошибках на основании данных о участниках команды, создавших сведения об ошибке.
(Мера) Рабочий элемент - Число исправлений: количество изменений, внесенных в рабочий элемент.Поскольку отчет фильтруется только с учетом данных, содержащихся в первой версии каждой записи об ошибке, данные о числе изменений представляют суммарное число записей о новых ошибках, созданных участником команды.
Дата - Наборы - Последние 8 недель: продолжительность действия, включаемая в отчет.

Поля, присущие отчету "Эффективность устранения ошибок":

Рабочий элемент - Причина: причина изменения состояния рабочего элемента.В отчете об эффективности устранения ошибок данные группируются по полям Как разработано, Невозможно воспроизвести, Дубликат и Исправлено.
(Мера) Рабочий элемент - Число изменений состояния: указывает, сколько раз член команды изменял состояние рабочего элемента.В отчете "Эффективность устранения ошибок" это поле указывает на то, как часто ошибка активировалась повторно.
Рабочий элемент - Автор: упорядочивает отчет об ошибках на основании данных о участниках команды, создавших сведения об ошибке.

Действия, необходимые для отслеживания выполнения тестов и исправления ошибок

Для обеспечения точности и актуальности отчета "Действия тестирования" команда должна выполнить следующие действия.

Определение тестовых случаев и планов тестирования и назначение тестовых случаев соответствующим планам тестирования.Дополнительные сведения см. в разделе Определение плана тестирования.
Выполнение тестов.Дополнительные сведения см. в разделе Запуск тестов в Microsoft Test Manager.

(Необязательно) Чтобы отфильтровать отчеты по областям продукта или итерациям, укажите пути области и итерации каждого тестового случая.

Примечание
Администратор каждого командного проекта определяет области и пути итерации для данного проекта, чтобы команда могла контролировать ход достижения поставленных целей.Дополнительные сведения см. в разделе Создание и изменение областей и итераций.

Администратор каждого командного проекта определяет области и пути итерации для данного проекта, чтобы команда могла контролировать ход достижения поставленных целей.Дополнительные сведения см. в разделе Создание и изменение областей и итераций.

Для обеспечения точности и актуальности отчета "Действия по устранению ошибок" команда должна выполнить следующие действия.

Создайте запись об ошибке для каждого дефекта кода, обнаруженного при тестировании.
Обновляйте состояние каждой ошибки по мере того, как команда исправляет, проверяет, закрывает или повторно активирует ее, и заполняйте поле Причина при каждом изменении состояния ошибки.
(Необязательно) Чтобы отфильтровать отчеты по областям продукта или итерациям, укажите пути области и итерации каждой ошибки.

Обновление и настройка отчетов

Вы можете обновить отчет "Производительность команды тестирования", открыв его в Office Excel и изменив параметры фильтра отчета сводной таблицы для одного из листов.Для поддержки других представлений можно настроить каждый отчет в соответствии со следующей таблицей.

Просмотр	Действие
Действия тестирования или устранения ошибок для области продукта	Измените фильтр для Area (по умолчанию — "Все")
Действия тестирования или устранения ошибок для итерации	Измените фильтр для Iteration (по умолчанию — "Все")
Действия тестирования для конкретного плана тестирования или набора планов тестирования	Измените фильтр для Test Plan (по умолчанию — "Все")
Действия тестирования или устранения ошибок за последние шесть, восемь и более недель	В списке полей сводной таблицы замените значение @@Last 4 weeks@@ или @@Last 8 weeks@@ другим Set.
Эффективность устранения ошибок за конкретный период времени	Измените фильтр для Year Month Date (по умолчанию — "Все")

Дополнительные сведения о работе с отчетами сводных таблиц и сводных диаграмм, а также о настройке этих отчетов содержатся на следующих страницах веб-сайта Майкрософт: