EM>Согласен. Наш единственный ручной тестер в команде из ~10 пишущих человек примерно этим и занимается. И его вполне хватает. Потому что решена проблема того, что состояние системы определено только во время между окончанием тестирования и внесением первого фикса в билд. Состояние зафиксировано тестами. ОК, пусть на 80-90 % а не на 100, "все равно хорошо" (С).
Я думаю, что 100% охват тестами каждого публичного билда — утопия. Тестировать там ИМХО надо только то, на что могло повлиять последнее изменение, и что изменение правильно работает, и что не сломано ранее работавшее.
Собственно, микрософт именно так тестирует _хотфиксы_ на WU. Вот сервис-паки и релизы ОС тестируются уже намного более тщательно, с фазами binary freeze.