Можете да спечелите 25 000 долара, ако използвате Gemini 1.5 на Google до краен предел
Gemini1.5 Pro на Google: Голям езиков модел с подобрени възможности за превод
Google наскоро пусна предварителна версия на Gemini 1.5 Pro – голям езиков модел, предназначен да демонстрира подобрени възможности за превод, особено за езици с ниски ресурси. Въпреки усъвършенстваните си функции моделът се сблъска с неочакван неуспех по време на задача за езиков превод, включваща грузински език.
Първоначален експеримент и неуспех
В експеримент за проверка на възможностите на Gemini авторът се опита да спрегне грузинския глагол „ყოფნა“, който се превежда като „да бъда“. Въпреки твърденията в техническия доклад за отлични резултати от тестовете на езици с нисък ресурс, Gemini не успя да ги постигне.
Отговорът започна, след което спря, показвайки предупреждение за „опасно съдържание“ и „съдържание, което не е разрешено“. Дори и след деактивиране на всички настройки за безопасност, грешката продължаваше.
Допълнително проучване и сравнение
За да продължи да изследва проблема, авторът преформулира задачата като въпрос за примерен текст, написан на грузински език, като използва първия параграф от статията в Wikipedia за Тбилиси, грузинската столица.
Gemini отново не успя да спрегне глагола така, както той се появява в абзаца, и получи същото съобщение за грешка. За разлика от него ChatGPT, добре познат езиков модел, успешно отговори на същата заявка за спрягане, като предостави табличен формат на формите на глагола.
Специфичност на проблема
Проблемът изглеждаше специфичен за грузинския език, тъй като Gemini нямаше проблеми с прости преводи на грузински или други езици като френски.
Например задачата „Как да кажа „аз съм“ на грузински?“ предизвика правилен отговор.
Проблемът обаче не се ограничаваше само до въвеждането на самата грузинска дума. Когато авторът попитал за сегашно време на грузинския глагол „Да бъда“, без да въвежда думата, той все пак получил същото съобщение за грешка.
Импликации и възможни причини
Тези примери подсказват, че може да има грешка в кода на Gemini или по-фундаментален проблем с начина, по който са структурирани защитите на езиковия модел за съдържанието.
Бъдещи развития
Gemini 1.5 Pro на Google е част от конкурентен пейзаж, в който се разработват и тестват и други модели с изкуствен интелект.
Например Apple наскоро пусна DCLM-Baseline-7B – езиков модел със 7 милиарда параметри, който е сравним с популярни модели като Llama 2 и Gemma.
Подходът на Apple за предоставяне на отворени ресурси за своите модели позволява на други изследователи и разработчици да ги използват, като по този начин допълнително развиват областта на ИИ.
Възможност за награда за творческо използване на Gemini 1.5
Можете да спечелите 25 000 долара за това, че сте използвали Gemini 1.5 на Google до краен предел. Тази възможност е част от състезание на Kaggle, което насърчава творческото използване на модела за изкуствен интелект Gemini.
Предизвикателството има за цел да провери границите на модела и да проучи потенциалните му приложения.
В статията се подчертава потенциалът на Gemini 1.5 Pro на Google в задачите за превод, особено за езици с ниски ресурси, но също така се подчертава необходимостта от по-нататъшно тестване и усъвършенстване, за да се решат специфични проблеми като този, който се среща с грузинския език.
Наградата от 25 000 долара за творческо използване на Gemini 1.5 подчертава интереса и инвестициите в разширяване на границите на технологията на ИИ и проучване на потенциалните ѝ приложения.