План тестирования НФТ для эл библиотеки

*из требований – исходя из ТЗ/рисеча/сравнения с конкурентами и т.п.

Тестирование производительности и нагрузки

Провести тестирование нагрузки (например, с помощью JMeter):

• для одного пользователя
• для штатного режима работы – максимального требуемого числа пользователей (из требований)
• для пиковой нагрузки – с кратковременным превышением максимального требуемого числа пользователей
• для равномерного увеличения нагрузки (с шагом, например, 5 пользователей/сек) вплоть до точки отказа

Проверить, что:

• найденная нагрузка для точки отказа соответствует требованиям
• показатели нагрузки (время доступа к данным, загрузка процессора, загрузка памяти, загрузка сети и пр.) соответствуют требованиям
• процент ошибок соответствует требованиям

Для штатной нагрузки проверить, что:

• метрики загрузки основных страниц сайта (например, индекс скорости загрузки, время окончания работы ЦП и пр.) соответствует требованиям
• метрики загрузки страниц с большой выгрузкой из баз данных (каталог журналов -> все журналы, каталог авторов -> все авторы и пр.) соответствуют требованиям
• метрики исполнения большого запроса в базах данных (время и пр.) соответствуют требованиям
• скорость загрузки файла (например, при скачивании статей) соответствует требованиям
• сообщение о таймауте появляется через адекватное время (например, до 200 секунд) при отсутствии отклика от сервера
• при длительной работе приложения (лимит времени – исходя из требований) отсутствуют падения сервера, утечки памяти и других ресурсов, переполнения базы, потери данных и пр.

Тестирование юзабилити и GUI

Проверить, что:

• сайт не содержит языковых ошибок
• на сайте есть логотип компании и контактная информация
• фавикон есть и корректно отображается
• шрифты соответствуют требованиям
• кнопки единообразны (размер, форма и т.п.)
• у радиокнопок есть предустановленное значение (например, в настройках навигатора)
• у каждой страницы есть заголовок
• все тексты и поля выровнены

• курсор мыши превращается в текстовый курсор при наведении на текстовое поле и в курсор-руку при наведении на ссылку
• в состоянии занятости приложения показывается спиннер загрузки
• в выпадающих списках можно выбрать ровно одну опцию (например, списки городов и регионов в форме поиска по организациям)
• можно отменить любые примененные изменения

• операции обновления или удаления сопровождаются запросом на подтверждение
• значения в выпадающем списке расположены в логичном порядке (например, по алфавиту) (например, в списках городов и регионов в форме поиска по организациям)
• в случае возможности выбора нескольких элементов можно выбирать и отменять выбор (например, в настройках навигатора)
• обязательные для заполнения поля как-либо отмечены (например, в форме для регистрации или формах поиска)
• на сайте есть инструкции для основных пользовательских сценариев, они полные и понятные
• можно одним кликом вернуться на главную страницу с любой другой
• есть возможность навигации между разными уровнями сайта и постранично
• основной функционал доступен с главной страницы
• появляется полоса прокрутки на страницах и выпадающих списках, когда она необходима
• появляется кнопка «Вверх» при прокручивании страницы вниз
• всплывающие подсказки появляются при наведении курсора на отмеченные слова/символы, их содержание соответствует тому, что они должны объяснять (например, в форме регистрации)
• страницы ошибок (например, 404) содержат ссылки на другие страницы сайта
• сообщения об ошибках информативны
• все ссылки на сайте выделены, подсвечиваются при наведении курсора и имеют адекватное название
• нет битых ссылок
• все части сайта имеют перекрестные ссылки друг на друга

Дополнительные проверки:

• тестирование эффективности (проверка количества шагов для совершения действий на сайте: поиска по статьям/журналам/авторам/организациям/прочему, скачивания текста статьи, загрузки статьи на сайт, получения информации о статистике/публикационной активности/научных рейтингах)
• отслеживание пользовательского опыта (формы связи, сбор статистики взаимодействия с приложением, юзабилити-тестирование)

Тестирование безопасности

Проверить, что:

• при создании простого пароля выводится предупреждение
• пароль вводится в зашифрованном виде
• пароль не хранится в cookie
• cookie хранятся в зашифрованном виде
• при изменении пароля пользователь не может зайти в систему под старым паролем
• если пользователь вышел из системы, он не может пользоваться частями сайта с ограниченным доступом (например, подпиской на журналы)
• доступ к закрытым частям сайта (например, к полным текстам статей в ограниченном доступе) возможен только при соответствующей авторизации
• права пользователей соответствуют их роли
• сообщения об ошибках не содержат информации о приложении, сервере или базах данных
• используется HTTPS протокол, сертификат действителен и выдан elibrary.ru
• есть защита от code injections (SQL, PHP, ASP и т.д.)
• есть защита от XSS атак
• есть защита от CSRF атак
• есть защита от SSI injection
• есть защита от authorization bypass
• сайт достаточно устойчив к DDOS атакам
• безопасность API (защита от атак и пр.)

Тестирование окружения

Проверить для:

• различных устройств (компьютер, телефон, планшет)
• различных разрешений экрана (1920x1080, 1366x768, 1280x1024, 1024x768, 640x480 и пр.)
• различных браузеров и их версий (IE, Firefox, Chrome, Safari, Opera и пр.)
• различных операционных систем (Windows, Linux, MacOS, Android, iOS Apple и пр.)

Проверить, что:

• сайт корректно работает (основные функциональные тесты – формы поиска, регистрация, скачивание статей, корректно работают кнопки, ссылки и пр.)
• сайт отображается одинаково
• отсутствуют ошибки в верстке
• отсутствуют ошибки в верстке при сообщениях об ошибке
• используемая версия HTML совместима с соответствующими версиями браузеров
• картинки отображаются корректно
• шрифты отображаются корректно
• кнопки, формы, текстовые поля, чекбоксы, фон и пр. выглядят одинаково
• скролл работает корректно
• при изменении масштаба страницы остальные элементы также меняют размер
• JavaScript код работает в разных браузерах
• сайт работает с разными профилями безопасности браузера
• при печати правильно отображаются шрифты, графические изображения страниц, выравнивание страниц