ВСЕ СТАТЬИ
•
habr.com•технологии
От вайб-проверок к регрессии: зачем LLM-фичам нужны quality gates в CI. На демо всё выглядит нормально. Промпт аккуратный, ответы связные, JSON парсится, никто не задаёт вопросов. Несколько прогонов спустя — всё ещё работает. Релизим. Через неделю тот же самый запрос три раза подряд возвращает некорректный ответ. Не так, чтобы всё упало. Просто достаточно, чтобы сломать downstream парсер и разбудить кого-то в два часа ночи. Ничего драматичного. Просто отказ, который повторяется достаточно часто, чтобы начать мешать. Этот сценарий возникает снова и снова не потому, ч...