К содержанию

Энтропия мерит не ту неоднозначность

Величина есть, называется «неоднозначность», выглядит готовой к употреблению — и не годится.

· разбор: §22.53 в отчёте о реализации

Замер«Ягуар» — 1.441. «Купить ягуар» — 1.463. «Что такое ягуар» — 1.390. Самый неоднозначный по предмету запрос получает самую низкую энтропию.

Мы хотели уточнять у человека, что он имел в виду, когда запрос неоднозначен. Под рукой была энтропия распределения по классам запроса — готовая мера неоднозначности.

Замер показал обратное ожидаемому. Короткому запросу правило длины добавляет навигационности, и энтропия падает — а именно короткий запрос и неоднозначен.

Правило «энтропия выше порога — спрашиваем» спрашивало бы на «купить ягуар» и молчало на «ягуар».

Величина мерила неоднозначность НАМЕРЕНИЯ, а уточнять можно только неоднозначность ПРЕДМЕТА. Одно слово, две разные вещи.

Все материалы · Лента