25 апр , 02:00
3
Швейцарские учёные нашли способ сделать ChatGPT умнее и точнее. Крупные языковые модели, несмотря на все свои достижения, продолжают совершать ошибки, при этом выдавая неверные ответы с поразительной уверенностью. Корень проблемы кроется в неопределённости, с которой работают такие системы. Однако исследователи из Швейцарии разработали инновационный метод, позволяющий значительно повысить точность искусственного интеллекта за счёт "подпитки" его дополнительными релевантными данными.
Как передает TUT.AZ, препринт работы опубликован на портале arxiv.
Разработанный алгоритм под названием SIFT избирательно подбирает информацию, которая наилучшим образом дополняет заданный вопрос, а не просто дублирует уже имеющиеся сведения. Технология основана на анализе векторов смысловой связи между словами в многомерном пространстве. Система определяет корреляцию между векторами по их направлению — чем ближе направления, тем выше связь. В отличие от традиционного метода "ближайшего соседа", SIFT целенаправленно выбирает разнообразные, но взаимодополняющие данные.
Пример: при ответе на вопрос "Сколько лет Роджеру Федереру и сколько у него детей?" традиционный ИИ может "застрять" на дате рождения, игнорируя информацию о детях. А SIFT находит и возраст, и семейную информацию, дополняя один аспект другим.
Новая технология не только повышает качество ответов, но и оптимизирует вычислительные ресурсы: меньше избыточной информации означает снижение нагрузки на систему. SIFT позволяет гибко адаптировать объём вычислений в зависимости от сложности вопроса, что открывает возможность создавать более надёжные модели с меньшими ресурсами. В ходе испытаний исследователи добились производительности, превосходящей показатели лучших ИИ-систем, при этом их модель оказалась в 40 раз компактнее.
Исследователи подчеркивают: SIFT может быть полезен и для анализа данных, например, чтобы определить, какие лабораторные показатели важны для диагностики, а какие - второстепенны. Это открывает путь к новым приложениям в медицине, науке и бизнесе.