Почему нейросети до сих пор пишут «ПИЩЕТ»? Разбираем забавные ошибки ИИ в текстах
Нейросети пишут «пищет» вместо «пишет» из-за особенностей байтовой токенизации (Byte-Pair Encoding), статистической разреженности редких пар русских букв в обучающих датасетах и феномена субсловного галлюцинирования,…