Пропуски Middle Признаки и интерпретация обновлено
Посчитайте TF-IDF
Вопрос
Коллекция из 4 документов. Слово «кредит» встречается в 1 документе, слово «банк» во всех 4. IDF = ln(N / df). IDF(«банк») = (1), IDF(«кредит») ≈ (2) (два знака). В документе из 10 слов «кредит» встречается 2 раза: TF = (3).
Попробуйте сами
Заполните пропуски по номерам.
1
2
3
Показать ответ и разбор
Коротко
IDF(банк) = ln(4/4) = 0: слово есть везде и ничего не различает. IDF(кредит) = ln 4 ≈ 1.39.
Что в пропусках
1
0
2
1.39 или 1,39
3
0.2 или 0,2 или .2 или ,2
Разбор
IDF(банк) = ln(4/4) = 0: слово есть везде и ничего не различает. IDF(кредит) = ln 4 ≈ 1.39. TF = 2/10 = 0.2, TF-IDF = 0.2·1.39 ≈ 0.28. В sklearn формула IDF сглажена (ln((1 + N)/(1 + df)) + 1), поэтому числа там другие.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.