Тестирование инвариантов
Мероприятие
Moscow QA #29
О докладе
Новый уровень надёжности: помимо бизнес-функциональности тестируем глобальные правила системы. Разберём, почему классическое функциональное тестирование может пропускать скрытые ошибки и как их находить. Поговорим о смене парадигмы мышления: от классического вопроса «Как должна работать функция?» к стратегическому «Что в моей системе не должно произойти ни при каких условиях?».
Докладчик
Другие доклады на Moscow QA #29
Всё уже придумано за нас: аналитика автотестов без лишней боли
Покажу, на простых и наглядных примерах, как с помощью возможностей Allure TestOps доступных из коробки, собирать и использовать метрики для анализа, оценки и рефакторинга автотестов, при этом не используя сложные инструменты сбора метрик.
Дрейф конфигураций на исследовательских стендах: как не превратить «источник правды» в свалку
Исследовательские тестовые стенды — это вечный поиск баланса между свободой эксперимента и порядком, который часто превращается в «Backrooms» из хаоса конфигураций. Когда Source of Truth (SoT) устаревает быстрее, чем вы успеваете обновлять документацию, а поиск актуальных настроек приносит лишь боль и разочарование, наступает время пересмотреть подход. Мы проанализировали рынок Open Source инструментов в поисках «серебряной пули», но обнаружили, что готового лекарства нет. В этом докладе я покажу, как мы создали собственную архитектурную «архитектурную связку», превратив дрейф конфигураций из приговора в управляемый процесс, где каждое изменение фиксируется, а мониторинг состояния стенда доступен за всё время его жизни. Я представлю практический кейс построения системы управления дрейфом, которая позволяет достичь «контроля в один клик» без потери гибкости для исследователей. Вы узнаете, как изолировать версии инструментов через venv, настроить автоматический аллертинг и внедрить подтверждение изменений через diff-отчеты. Мы разберем, как начать аудит своих стендов и внедрять изменения итерационно — от одного типа железа до полноценного автоматизированного контроля. Доклад поможет вам понять, окупят ли трудозатраты ваши боли, и даст готовый план, как перестать изобретать велосипед и начать наконец кайфовать от стабильной работы динамических систем.