Практическое руководство. Создание параметра тестирования для распределенного нагрузочного теста

Параметры тестирования можно настроить для нагрузочных тестов, чтобы включить тесты распределения нагрузки между несколькими компьютерами с помощью контроллеров агентов тестирования и тестирования.Параметры тестирования можно также настроить для использования адаптеров диагностических данных, которые определяют различные типы собираемых данных или способы влияния на тестовые компьютеры при выполнении нагрузочных тестов из Visual Studio Ultimate.Например, можно использовать адаптер диагностических данных профилировщика ASP.NET для формирования декомпозиции собранных данных о производительности кода.Кроме того, адаптеры диагностических данных можно использовать для имитации потенциальных узких мест на тестовом компьютере или для уменьшения доступной системной памяти.

Параметры тестирования для Visual Studio хранятся в файле.Параметры тестирования определяют следующие сведения о каждой роли:

• набор ролей, необходимых для работы тестируемого приложения;

• роль, используемая при тестировании;

• адаптеры диагностических данных, используемые для каждой роли.

При выполнении тестов выбираются параметры тестирования, которые будут использоваться как активные, в зависимости от того, что требуется для данного тестового запуска.Файл параметров тестирования хранится в решении.Имя файла имеет расширение .testsettings.

При добавлении в решение проект веб-сайта и производительность нагрузочного теста, файл Default.testsettings создан.Файл автоматически добавляется в решение в папке Элементы решения.Этот файл выполняет тесты локально без всех адаптеров диагностических данных.Можно добавить другой файл .testsettings или изменяет файл .testsettings для определения адаптеры диагностических данных и контроллеры тестирования.

Совет
Для данных о параметрах тестирования совместимости между Visual Studio 2012 и Visual Studio 2010 см. в разделе Совместимость параметров тестирования с Visual Studio 2010.

Контроллер тестирования будет содержать агенты, которые могут быть использованы для каждой роли в параметрах тестирования.Дополнительные сведения о контроллерах тестирования и агентах тестирования см. в разделах Настройка тестовых компьютеров для выполнения тестов или сбора данных и Управление контроллерами и агентами тестирования с помощью Visual Studio.

Для создания и удаления параметров тестирования в решении для нагрузочных тестов, которые планируется выполнять из Visual Studio Ultimate, используются следующие процедуры.

Требования

• Visual Studio Ultimate

Создание параметра тестирования для распределенного нагрузочного теста

Добавление параметров тестирования для распределенного нагрузочного теста

1. В обозревателе решений щелкните правой кнопкой мыши Элементы решения, выберите Добавить, а затем выберите Создать элемент.

   Открывается диалоговое окно Добавление нового элемента.

2. В области Установленные шаблоны выберите Параметры тестирования.

3. (Необязательно.) В поле Имя измените имя файла параметров тестирования.

4. Выберите Добавить.

   В обозревателе решений появится новый файл параметров тестирования, расположенный в папке Элементы решения.

   Примечание

   Список параметров тестирования, Visual Studio Premium отображает извлекается из списка файлов параметров тестирования в папке Элементы решения.Например, файлы параметров тестирования в папке "Элементы решения" отображаются, если используется параметр Выбрать активные параметры тестирования в меню Тест.Это означает, что, если переместить файл параметров тестирования в другое расположение внутри иерархии решения, его нельзя будет использовать в качестве параметров тестирования в интегрированной среде разработки Visual Studio.

5. Откроется диалоговое окно Параметры тестирования.Выбирается страница Общее.

   Теперь вы можете редактировать и сохранять значения параметров тестирования.

   Примечание
   Каждые создаваемые параметры тестирования отображаются в списках Выбрать активные параметры тестирования и Изменить параметры тестирования меню Тест.

6. Введите имя для параметров тестирования в поле Имя.

7. (Необязательно) В поле Описание введите описание параметров тестирования, чтобы другие члены команды знали, для чего эти параметры.

8. (Необязательно.) Чтобы выбрать схему именования по умолчанию для тестовых запусков, выберите параметр Схема именования по умолчанию.Чтобы определить собственную схему именования, выберите параметр Пользовательская схема и введите необходимый текст в поле Текст префикса.Чтобы добавить отметку даты и времени к имени тестового запуска, выберите параметр Добавить отметку даты и времени.

9. Выберите Роли.

   Откроется страница Роли.

   

10. Для удаленного выполнения тестов и, при необходимости, удаленного сбора данных в раскрывающемся списке Способ выполнения теста выберите значение Удаленное выполнение.

11. В раскрывающемся списке Контроллер выберите контроллер тестирования для агентов тестирования, который будет использоваться для выполнения тестов или сбора данных.

    Примечание

    Если контроллер добавляется в первый раз, в раскрывающемся списке не будут перечислены контроллеры.Этот список заполняется ранее добавленными контроллерами, которые указаны в других параметрах тестирования.Необходимо ввести имя контроллера в поле (например, TestControllerMachine1). Дополнительные сведения см. в разделах Настройка контроллеров и агентов тестирования для нагрузочного тестирования и Использование контроллеров и агентов тестирования в нагрузочных тестах.

12. Чтобы добавить роли, которые необходимо использовать для выполнения тестов и сбора данных, в области Роли, выберите команду Добавить.

13. Введите имя роли в столбце Имя.Например, роль может называться "Веб-сервер".

14. Повторите шаги 12 и 13, чтобы добавить все необходимые роли.

    Каждая роль использует агент тестирования, управляемый контроллером тестирования.

15. Выделите роль, которую требуется для выполнения тестов и выберите пункт Задать в качестве роли для запуска тестов.

    Важно
    Остальные создаваемые и определяемые роли не будут запускать тесты; они будут использоваться лишь для сбора данных в соответствии с указанными на странице Данные и диагностика адаптерами данных и диагностическими адаптерами для ролей.

16. Чтобы ограничить агенты, которые можно использовать для роли, выберите роль, а затем выберите команду Добавить на панели инструментов области Атрибуты агента для выбранного rol e.

    Откроется диалоговое окно Правило выбора агента.

    Введите имя в поле Имя атрибута и значение в поле Значение атрибута, а затем выберите ОК.Добавьте необходимые атрибуты.

    Например, можно добавить атрибут с именем "ОЗУ > 16 ГБ" со значением True или False, чтобы отфильтровать компьютеры агентов тестирования с объемом ОЗУ больше 16 ГБ.Чтобы применить один атрибут к одному или нескольким агентам тестирования, воспользуйтесь диалоговым окном "Управление контроллером тестирования".Дополнительные сведения см. в разделе Управление контроллерами и агентами тестирования с помощью Visual Studio.

17. Выберите Данные и диагностика.

    Откроется страница Данные и диагностика.

    

18. На странице Данные и диагностика определяются функции ролей; для этого необходимо выбрать адаптеры диагностических данных, которые будут использоваться ролью для сбора данных.Поэтому, если для роли включены один или несколько адаптеров данных или диагностических адаптеров, контроллер тестирования выберет доступный компьютер агента тестирования для сбора данных для указанных адаптеров на основании определенных для роли атрибутов.Чтобы выбрать адаптеры обработки данных и адаптеры диагностических данных, которые будут использоваться каждой из ролей, выберите роль.Для каждой из ролей выберите адаптеры диагностических данных, соответствующие требованиям тестов в плане.Чтобы настроить адаптер диагностических данных для каждой из ролей, нажмите кнопку Настроить.

    Пример ролей и адаптеров диагностических данных.

    Например, можно создать роль клиента с именем "Настольный клиент" и атрибутом "Использует SQL", которому присвоено значение True, и роль сервера с именем "SQL Server" и атрибутом "ОЗУ > 16 ГБ".Если определяется, что "клиент рабочего" выполняющая тесты, выбрав Задать в качестве роли для запуска тестов на странице Роли, контроллер выделяет компьютеры, имеющие агенты тестирования, включите атрибут "использует SQL" значение "true", что для выполнения тестов.Контроллер тестирования также будет выбирать компьютеры с SQL Server, на которых установлены агенты тестирования с атрибутом "ОЗУ > 16 ГБ", для записи данных, определенных включенными в роль адаптерами обработки данных и адаптерами диагностических данных.Агенты тестирования, включенные в роль "Настольный клиент", также могут собирать данные для компьютеров, на которых они запущены, если для этой роли выбраны адаптеры обработки данных и адаптеры диагностических данных.

    Подробные сведения о всех адаптерах диагностических данных и их настройке см. в соответствующих разделах, перечисленных в следующей таблице.

    Дополнительные сведения об адаптерах диагностических данных см. в разделе Настройка компьютеров и сбор диагностических данных с помощью параметров тестирования.

    Адаптеры диагностических данных для нагрузочных тестов

    Адаптер диагностических данных	Использование нагрузочных тестов	Раздел
    Прокси-сервер клиента ASP.NET для IntelliTrace и влияния на тесты. Этот прокси-сервер позволяет собирать данные об HTTP-обращениях из клиента к веб-серверу для адаптеров диагностических данных IntelliTrace и влияния на тесты.	Этот адаптер следует включать только при наличии конкретной необходимости в сборе системных данных для компьютеров агентов тестирования. Внимание Не рекомендуется использовать адаптер IntelliTrace в нагрузочных тестах из-за проблем, которые возникают вследствие сбора большого объема данных. Данные влияния на тесты не собираются в ходе нагрузочных тестов.
    IntelliTrace. Можно настроить определенные сведения диагностической трассировки, которые сохраняются в файле журнала.Расширение файла журнала — TDLOG.Если при выполнении теста шаг теста завершается ошибкой, можно создать сообщение об ошибке.Файл журнала, содержащий диагностическую трассировку, автоматически присоединяется к этой ошибке.Данные, собираемые в файл журнала, увеличивают производительность отладки, уменьшая время повторения и диагностики ошибки в коде.Используя этот файл журнала, можно заново создать локальный сеанс на другом компьютере.Это снижает вероятность того, что ошибку нельзя будет воспроизвести. Дополнительные сведения см. в разделе Отладка приложения путем записи выполнения кода с помощью IntelliTrace.	Не рекомендуется использовать адаптер IntelliTrace в нагрузочных тестах из-за проблем, которые возникают вследствие сбора и сохранения в журнале большого объема данных.Адаптер IntelliTrace следует использовать только в непродолжительных нагрузочных тестах, в которых задействовано небольшое число агентов.	Практическое руководство. Сбор данных IntelliTrace для отладки сложных проблем
    Профилировщик ASP.NET. Можно создать параметр тестирования, включающий профилировщик ASP.NET, который собирает данные о производительности веб-приложений ASP.NET.	Профилирования адаптера диагностических данных профилировщика ASP.NET процесс (IIS) служб IIS, поэтому он не будут работать с веб-сервера разработки.Для профилирования веб-сайта в нагрузочном тесте необходимо установить агент тестирования на компьютере, на котором выполняется сервер IIS.Агент тестирования будет использоваться не для создания нагрузки, а только для сбора данных.Дополнительные сведения см. в разделе Установка и настройка контроллеров и агентов тестирования.	Практическое руководство. Настройка профилировщика ASP.NET для нагрузочного тестирования с помощью параметров тестирования в Visual Studio Практическое руководство. Выполнение нагрузочного теста, содержащего веб-тесты производительности и собирающего данные профилировщика ASP.NET
    Объем протестированного кода (Visual Studio 2010). можно создать параметр тестирования, который содержит данные о покрытии кода, используемые, чтобы выяснить, какое из кода описано тестами.	Адаптер покрытия кода можно использовать в нагрузочных тестах, однако он будет собирать данные о покрытии кода только для ролей выполнения тестов, а не для ролей сервера, указанных в параметре тестирования.	Больше не рекомендуется настраивать покрытие кода с использованием параметров тестирования Примечание Этот адаптер для совместимости Visual Studio 2010.
    Журнал событий. Можно настроить параметр тестирования для записи журнала событий, который включается в результаты теста.		Практическое руководство. Настройка коллекции записей журнала событий с помощью параметров тестирования
    Эмуляция сети. С помощью параметра тестирования можно указать, что требуется моделировать сетевую нагрузку при тестировании.Эмуляция сети влияет на обмен входящими и исходящими данными с компьютером, имитируя определенную скорость сетевого подключения, например коммутируемое подключение. Примечание Эмуляцию сети нельзя использовать для увеличения скорости сетевого подключения.	Адаптер эмуляции сети не учитывается в нагрузочных тестах.Вместо него в нагрузочных тестах используются параметры, указанные в смешанном сетевом профиле сценария тестовой нагрузки. Дополнительные сведения см. в разделе Определение типов виртуальной сети в сценарии тестовой нагрузки.
    Сведения о системе. Можно настроить параметр тестирования для включения сведений о системе компьютеров, на которых выполняется сборщик диагностических данных о системе.Сведения о системе указываются в результатах теста с помощью параметра тестирования.	Сведения о системе можно собирать как с агентов нагрузки, так и из тестируемой системы.	Для сбора этих сведений не требуется выполнять настройку.
    Тест влияния. Можно собирать сведения о том, какие методы кода приложений использовались при выполнении тестового случая.Эти данные можно использовать вместе с данными об изменениях кода приложения, внесенных разработчиками, чтобы определить, на какие тесты влияют эти изменения.	Данные влияния на тесты не собираются в ходе нагрузочных тестов.
    Запись видео. При выполнении автоматического теста можно записывать сеанс рабочего стола на видео.Это может быть полезно для просмотра действий пользователя в закодированного тесте пользовательского интерфейса.Видео может помочь другим членам команды определить проблемы с приложением, которые трудно воспроизвести. Примечание При удаленном запуске тестов функция записи видео не будет работать, если агент не работает в режиме интерактивного процесса.	Внимание Не рекомендуется использовать адаптер записи видео для нагрузочных тестов.	Практическое руководство. Включение записей экрана и голоса во время тестирования с помощью параметров тестов

19. Выберите Развертывание.

    Откроется страница Развертывание.

20. Чтобы создавать отдельный каталог для развертывания при каждом выполнении тестов, выберите команду Включить развертывание.

    Примечание
    Если выбрана эта команда, при выполнении тестов можно продолжать построение приложения.

21. Чтобы добавить файл в каталог используется для выполнения тестов выберите Добавить файл, а затем выделите файл, который требуется добавить.

    Примечание
    При выполнении нагрузочных тестов осуществляется автоматическое развертывание сборок подключаемых модулей, файлов данных и отправленных файлов.

22. Чтобы добавить каталог на каталог, используемый для выполнения тестов выберите Добавить каталог и затем выделите каталог, который необходимо добавить.

    Примечание
    Дополнительные сведения о развертывании файлов и каталогов для отдельных тестов с помощью свойств и атрибута DeploymentItem см. в разделе Практическое руководство. Развертывание файлов для тестов.

23. Чтобы выполнять скрипты до и после тестов, выберите Скрипты установки и очистки.

    Откроется страница Скрипты установки и очистки.

    1. Введите расположение файла сценария в Скрипт настройки или нажмите кнопку с многоточием (…), чтобы найти скрипт установки.

    2. Введите расположение файла сценария в Скрипт очистки или нажмите кнопку с многоточием (…), чтобы найти скрипт очистки.

24. Для выполнения тестов с использованием другого узла выберите Узлы.

    1. Убедитесь, что в списке Тип узла выбрано значение По умолчанию.

       Примечание
       Тип ASP.NET, указанный в списке Тип узла, не поддерживается в нагрузочных тестах.

    2. Чтобы выбрать выполнение веб-тестов производительности и модульных тестов, включенных в нагрузочный тест, в качестве 32-разрядных или 64-разрядных процессов, воспользуйтесь раскрывающимся списком "Выполнять тесты в 32-разрядном или 64-разрядном процессе".

       Примечание
       Для максимальной гибкости необходимо компилировать проекты веб-сайта и производительность нагрузочного теста с помощью конфигурации Любой ЦП.Тогда выполнение возможно как на 32-разрядных, так и на 64-разрядных агентах.Компилировать проекты веб-сайта и производительность нагрузочного теста с помощью конфигурации 64 бита не имеет смысла.

25. (Необязательно) чтобы ограничения времени выполнения для каждого тестового запуска и отдельных тестов выберите Ожидания теста.

    1. Для прекращения выполнения тестов при превышении предела времени щелкните Прервать тестовый запуск, если общее время превышает и введите значение предела.

    2. Для завершения определенного теста с ошибкой при превышении предела времени щелкните Пометить тест как непройденный, если превышено время его выполнения и введите значение предела.

26. Пропустите раздел Модульный тест.Эти параметры не используются в нагрузочных тестах.

27. Пропустите раздел Веб-тест.Эти параметры не используются в нагрузочных тестах.

28. Для сохранения параметров тестирования нажмите кнопку Сохранить как.Введите в поле Имя объекта желаемое имя файла.

    Примечание
    Если необходимо изменить параметры тестирования, выберите Тест, а затем выберите команду Изменить настройки тестирования и укажите параметры тестирования, которые были созданы.Дополнительные сведения см. в разделе Практическое руководство. Изменение существующих параметров тестирования для плана тестирования.

Удаление параметров тестирования из решения

• В узле " элементы решения " обозревателя решений щелкните правой кнопкой мыши параметры тестирования, которые необходимо удалить, и выберите пункт Удалить.

  Файл параметров тестирования удаляется из решения.Это изменение отражается в списках Выбрать активные параметры тестирования и Изменить параметры тестирования меню Тест.

См. также

Задачи

Пошаговое руководство. Использование контроллера тестирования и агентов тестирования в нагрузочном тесте

Практическое руководство. Выполнение нагрузочного теста с помощью контроллеров тестирования и агентов тестирования, заданных в параметрах тестирования

Основные понятия

Настройка компьютеров и сбор диагностических данных с помощью параметров тестирования

Другие ресурсы

Указание параметров тестирования для тестов Visual Studio

Распределение запусков нагрузочных тестов между несколькими тестовыми компьютерами с помощью контроллеров и агентов тестирования