Ключевые выводы

  • Модель искусственного интеллекта Google Gemini имеет три варианта: Ultra, Pro и Nano, ориентированные на разные задачи и уровни сложности.
  • Gemini Ultra показывает многообещающие результаты по ключевым тестам искусственного интеллекта, но по состоянию на декабрь 2023 года он недоступен для публичного использования. Google заявляет, что он должен быть доступен в январе 2024 года.
  • Доступен Gemini Pro, и, хотя он работает довольно хорошо, в настоящее время ему не удается свергнуть GPT-4.

Google постоянно обещает, что ее модель Gemini AI будет лучше, чем GPT-4 от OpenAI, модель, лежащая в основе ChatGPT Plus. Теперь, когда Google Gemini запущен, мы наконец можем протестировать его и посмотреть, насколько Gemini сравнивается с GPT-4.

Когда Google запустил Bard в марте 2023 года, было много причин для волнения. Наконец, монополия OpenAI на ChatGPT будет нарушена, и мы получим достойную конкуренцию.

Но Бард никогда не был тем титаном искусственного интеллекта, на которого надеялись люди, и GPT-4 остается доминирующей платформой чат-ботов с генеративным искусственным интеллектом. Теперь Gemini от Google уже здесь — но является ли долгожданная модель искусственного интеллекта лучше, чем ChatGPT?

Что такое модель искусственного интеллекта Gemini от Google?

Gemini — это самая мощная генеративная модель искусственного интеллекта Google, способная понимать и работать с различными форматами данных, включая текст, аудио, изображения и видео. Это попытка Google создать унифицированную модель искусственного интеллекта, используя возможности своих наиболее эффективных технологий искусственного интеллекта. Gemini будет доступен в трех вариантах:

  • Gemini Ultra: Самый большой и мощный вариант, предназначенный для решения очень сложных задач.
  • Gemini Pro: лучшая модель для масштабирования и обеспечения высокой производительности при выполнении широкого спектра задач, но менее производительная, чем Ultra.
  • Gemini Nano: наиболее эффективная модель, предназначенная для развертывания задач на устройстве. Например, разработчики могут использовать Gemini Nano для создания мобильных приложений или интегрированных систем, привнося мощный искусственный интеллект в мобильное пространство.
  • В своем официальном блоге Ключевое словоGoogle заявляет, что Gemini Ultra превосходит современные устройства в нескольких тестах. Google утверждает, что Gemini Ultra превосходит ведущего в отрасли GPT-4 в нескольких ключевых тестах.

    Google заявляет, что Gemini Ultra является первой моделью, превзошедшей результаты человеческого уровня в этом многогранном тесте, охватывающем 57 испытуемых, с беспрецедентным результатом в 90,0% по строгому тесту MMLU.

    Google

    Gemini Ultra также может понимать, объяснять и генерировать высококачественный код на некоторых самых популярных в мире языках программирования, включая Go, JavaScript, Python, Java и C++. На бумаге все это отличные результаты. Но это все тесты, а тесты не всегда отражают всю картину. Итак, насколько хорошо Gemini справляется с реальными задачами?

    Как использовать Google Gemini AI

    Из трех вариантов модели Gemini AI вы можете начать использовать Gemini Pro прямо сейчас. Gemini Pro в настоящее время доступен в чат-боте Google Bard. Чтобы использовать Gemini Pro с Bard, перейдите по ссылке bard.google.com и войдите в свою учетную запись Google.

    Google сообщает, что Gemini Ultra выйдет в январе 2024 года, поэтому на данный момент нам пришлось довольствоваться тестированием Gemini Pro с ChatGPT.

    Чем Gemini отличается от GPT-3.5 и GPT-4

    Когда запускается любая новая модель ИИ, она тестируется на моделях ИИ OpenAI GPT, которые обычно считаются самой современной моделью, с которой следует сравнивать другие модели. Итак, используя Bard и ChatGPT, мы проверили способности Gemini к математике, творческому письму, генерации кода и точной обработке входных изображений.

    Начав с самого простого математического вопроса, который мы могли придумать, мы попросили обоих чат-ботов решить: -1 x -1 x -1.

    Бард пошел первым. Мы повторили вопрос дважды, и все вернулись с неправильными ответами. Ответ мы получили с третьей попытки, но это не в счет.

    Мы попробовали ChatGPT работать на GPT-3.5. Первое испытание дало результат.

    Чтобы проверить способности Gemini к интерпретации изображений, мы поручили ему интерпретировать некоторые популярные мемы. Компания отказалась, заявив, что не может интерпретировать изображения с людьми. ChatGPT, использующий GPT-4V, хотел и мог сделать это безупречно.

    Мы предприняли еще одну попытку заставить его интерпретировать изображение, одновременно проверяя его способность решать проблемы и кодировать. Мы предоставили Bard, работающему под управлением Gemini Pro, снимок экрана и попросили его интерпретировать и написать код HTML и CSS для воспроизведения этого снимка экрана.

    Вот исходный скриншот.

    Ниже представлена ​​попытка Gemini Pro интерпретировать и воспроизвести снимок экрана с использованием HTML и CSS.

    А вот попытка GPT-4 воспроизвести снимок экрана. Результат неудивителен, учитывая, что GPT-4 исторически был силен в кодировании. Ранее мы демонстрировали использование GPT-4 для создания веб-приложения с нуля.

    Мы попросили Gemini Pro написать стихотворение о Tesla (марке электромобилей). Он показал незначительные улучшения по сравнению с предыдущими тестами, которые мы проводили в прошлом. Вот результат:

    На этом этапе мы подумали, что сравнение результатов с GPT-3.5, а не с GPT-4 с наддувом, было бы более уместным. Итак, мы попросили ChatGPT с GPT-3.5 создать похожее стихотворение.

    Возможно, это личный выбор, но Gemini Pro подходит к этому вопросу лучше. Но мы позволим вам быть судьей.

    Gemini лучше ChatGPT?

    До того, как Google запустил Bard, мы думали, что это будет соревнование ChatGPT, которого мы ждали, но это не так. Теперь Gemini здесь, и пока Gemini Pro не кажется той моделью, которая сможет дать ChatGPT нокаутирующий удар.

    Google утверждает, что Gemini Ultra будет намного лучше. Мы искренне надеемся, что это так, и что он соответствует или превосходит требования, заявленные в анонсе Gemini Ultra. Но пока мы не увидим и не протестируем лучшую версию инструмента генеративного ИИ от Google, мы не узнаем, сможет ли он превзойти других конкурентов моделей ИИ. В нынешнем виде GPT-4 остается бесспорным чемпионом модели искусственного интеллекта.