Raw

6. Контрольні запитання

Ці запитання допомагають перевірити готовність до роботи й самоконтроль після неї. Відповіді спираються на методичні вказівки та Лекцію 8.

Теорема Байєса та ймовірнісна класифікація

  1. Чим ймовірнісний класифікатор відрізняється від дерева рішень? Яку додаткову інформацію він дає, крім ярлика класу?
  2. Запишіть теорему Байєса для класу CC та вектора ознак xx. Назвіть усі чотири множники (апріорна, правдоподібність, апостеріорна, свідчення).
  3. Чому при виборі класу знаменник P(x)P(x) можна відкинути? Коли він усе ж потрібен?

Наївне припущення та апостеріорна ймовірність

  1. Сформулюйте наївне припущення про умовну незалежність ознак. Запишіть, у що воно перетворює правдоподібність P(xC)P(x \mid C).
  2. Яку проблему розв’язує наївне припущення (чому не можна оцінити P(x1,,xmC)P(x_1, \dots, x_m \mid C) напряму)? Що таке «прокляття розмірності»?
  3. Запишіть робочу формулу P(Cx)P(C)jP(xjC)P(C \mid x) \propto P(C)\prod_j P(x_j \mid C) і поясніть, як від оцінки класу перейти до самої ймовірності (нормування).
  4. Чому наївний Байєс часто працює добре навіть тоді, коли ознаки насправді залежні?

Оцінювання ймовірностей

  1. Як оцінити апріорну ймовірність класу P(C)P(C) та умовну ймовірність ознаки P(xj=vC)P(x_j = v \mid C) за навчальною вибіркою?
  2. Обчисліть «руками» P(Дохід=СереднійТак)P(\text{Дохід} = \text{Середній} \mid \text{Так}) для вибірки «Спортивний канал» і поясніть, які об’єкти ви рахували.

Нульові ймовірності та згладжування

  1. Що таке проблема нульової ймовірності (переповнення) і чому єдиний нуль занулює весь добуток? Наведіть приклад із вибірки «Спортивний канал».
  2. Запишіть формулу згладжування Лапласа. Навіщо в знаменнику додають саме mjm_j (число значень ознаки)? Що станеться з нормуванням, якщо цього не зробити?
  3. Що таке обчислювальне переповнення (underflow) при перемноженні багатьох малих імовірностей і як його уникають (сума логарифмів)? Чому для логарифмів обов’язкове згладжування?
  4. Як наївний Байєс опрацьовує об’єкт із відсутнім значенням ознаки?

Порівняння з ID3 та застосування

  1. Порівняйте наївний Байєс і дерево ID3: що спільного (та сама задача) і чим різняться вихід та спосіб побудови? Що таке матриця невідповідності двох класифікаторів?
  2. На вибірці «Спортивний канал» обидва методи дали 100%100\,\% точності й повний збіг прогнозів. Чи завжди так буває? Від чого це залежить?
  3. Опишіть баєсів спам-фільтр: що таке спамовість слова p(w)p(w), як приймають рішення за усередненою вагою й порогом, які є покращення базової схеми.

Laboratory/Laboratory8/6questions.md · 4.4 KB · updated 2026-08-04 23:17