👓 Ботанские новости
технологии, открытия, исследования и разработки
🤖 Квебекский детектор грамматики: нейросети провалили экзамен по французскому
Квебекский детектор грамматики: нейросети провалили экзамен по французскому
Канадские исследователи создали QFrBLiMP - бенчмарк из 1761 минимальных пар на квебекском французском для проверки грамматических способностей языковых моделей. Оказалось, что ИИ успешно справляется только с простыми правилами, а там, где требуется глубокое семантическое понимание, показывает результаты хуже человека. Причем чем больше модель - тем лучше её грамматическая компетенция, но до человеческого уровня всё равно далеко.
#ИИ #лингвистика #наука