Модель Le Chat от Mistral AI привлекла большое внимание в сообществе чат-ботов с искусственным интеллектом, причем некоторые наблюдатели называют ее потенциальным конкурентом ChatGPT, несмотря на ее недавнее появление.
Но действительно ли этот новый чат-бот заслуживает этого названия? Le Chat от Mistral AI лучше, чем ChatGPT? Проверять Причины начать использовать Claude 3 вместо ChatGPT.
Что такое модель Le Chat от Mistral AI?
Le Chat — это чат-бот с искусственным интеллектом, разработанный французским стартапом Mistral AI. Он основан на нескольких запатентованных моделях большого языка (LLM) Mistral, включая Mistral Large, Mistral Small и Mistral Next, каждую из которых вы можете использовать при взаимодействии с чат-ботом с искусственным интеллектом. Хотя это относительно новый участник рынка чат-ботов, он высоко оценивается за производительность своих моделей искусственного интеллекта, несмотря на их небольшой размер по сравнению с тяжеловесами отрасли, такими как Gemini и GPT-4.
Чтобы понять, что это значит, представьте, что вы играете со строительными кубиками. Чем больше у вас блоков, тем более сложные и детализированные конструкции вы сможете построить, верно? Языковые модели ИИ немного похожи на это. Они бывают разных размеров и обычно выражаются количеством параметров. Итак, вы, возможно, слышали такие термины, как «параметры 70B» или «параметры 70B» в моделях ИИ. Количество параметров аналогично количеству базовых элементов, вокруг которых модель должна понимать и генерировать ответы. Следовательно, если лингвистическая модель имеет больше параметров, она может понимать и генерировать более сложные и лучшие ответы.
Теперь, в то время как GPT-4 имеет примерно 1.76 триллиона параметров, Mistral AI, по оценкам, имеет от 7 до 56 миллиардов параметров. Видите разницу в размерах? Итак, способность Mistral AI обеспечивать достойную производительность является одной из причин ажиотажа.
Хотя Le Chat не имеет такого уровня ажиотажа, как ChatGPT, и не имеет такого бренда, как Gemini, он проникает в любой разговор, когда обсуждается потенциальный конкурент ChatGPT. Но действительно ли он заслуживает места за столом?
Мне было интересно то же самое, и чтобы выяснить это, я тщательно протестировал Le Chat, чтобы сравнить его с ChatGPT. Проверять GitHub Copilot или ChatGPT: что лучше для задач программирования?
Сравнение Le Chat и ChatGPT: креативность
Креативность — один из наиболее важных показателей для оценки эффективности чат-бота с искусственным интеллектом. Помните, что цель чат-бота — воспроизвести или имитировать разговорные способности и творческое чутье людей в большом масштабе. Это делает креативность очень важной силой для любого чат-бота с искусственным интеллектом. Мир экспериментирует с ChatGPT уже больше года, и его творческий потенциал неоспорим. Но как это сравнить с Le Chat? Мы подвергли обоих чат-ботов серии тестов на креативность.
Я начал с вопроса обоим чат-ботам: «Как бы вы описали себя как художника?» Проверить способность друг друга использовать творческие и образные слова, чтобы изобразить себя.
Вот как ChatGPT описывает себя художнику:
Вот как описывает себя Le Chat:
Оба ответа были своевременными по-своему. ChatGPT больше интересовался использованием ярких изображений и метафор для описания себя, демонстрируя творческий талант. С другой стороны, ответ Le Chat информативен и сосредоточен на описании его сути как чат-бота с искусственным интеллектом. Кто-то может сказать, что ему не хватает творческого чутья и художественного подхода, которые демонстрирует ответ ChatGPT. Однако я рискну и скажу, что предпочитаю более простой в воображении ответ Le Chat на абстрактное описание ChatGPT.
Затем я попросил ChatGPT и Le Chat написать рэп-песню о том, как разбогатеть, выращивая огурцы. Этот сложный запрос мы использовали для проверки креативности других чат-ботов. Сколько рэп-песен об огурце можно найти в сети?
Вот ответ ChatGPT:
Вот ответ Le Chat:
Возможно, это субъективная проблема, но ответ ChatGPT кажется здесь лучшим вариантом. Лирика Le Chat казалась полной клише и на самом деле не читалась так, как будто бы написал рэпер. Чтобы проверить, как будут звучать эти слова, если их преобразовать в музыку, мы использовали музыкальный генератор. Суно ИИ Создавать музыку из слов. В трёх из трёх тестов тексты ChatGPT звучали намного лучше. Вот несколько примеров обоих чат-ботов, и вы сможете судить, какой чат-бот показал себя лучше.
Примеры, созданные на основе ключевых слов ChatGPT:
Образец 1:
Образец 2:
Сэмплы, созданные на основе текстов Le Chat:
Образец 1:
Образец 2:
Я пробовал и другие творческие задачи, такие как стихи, написание статей и составление сложных рабочих электронных писем с использованием чат-ботов с искусственным интеллектом. Несмотря на большие перспективы, ChatGPT во всех случаях явно превзошел Le Chat. Важно отметить, что одной из областей, в которой Ле Шат был особенно силен, было написание эссе, хотя здесь использовались некоторые сложные мотивационные приемы. Однако с точки зрения общей креативности медаль достается ChatGPT.
Сравнение Le Chat и ChatGPT: навыки программирования
Навыки программирования стали основным требованием для крупных чат-ботов. Написание достойного кода — важный навык, но чтобы по-настоящему выделиться среди элиты, чат-бот с искусственным интеллектом должен продемонстрировать свое мастерство в создании кода, который может эффективно решать множество сложных проблем. Ранее мы создали целое веб-приложение с нуля, используя ChatGPT, который демонстрирует его большие возможности как программного инструмента. Но насколько хорошо Le Chat пишет код?
Я поручил обоим чат-ботам написать простое приложение со списком дел с использованием CSS, HTML и JavaScript. ChatGPT без проблем добился хороших результатов. Я скопировал сгенерированный код и просмотрел его в браузере, и вот что сгенерировал ChatGPT:
Каждый раз, когда мы повторяли запрос, ChatGPT создавал функциональное приложение со списком дел, используя разные стили. Сгенерированный код ни в коем случае не заработал.
Когда я попробовал то же самое приглашение в Le Chat, оно сгенерировало, казалось бы, понятный код, но когда мы попытались запустить его в браузере, это не сработало. После трехкратного повторения запроса ни один экземпляр не создал код, который мог бы выполнить указанную задачу. Он провалил базовую задачу по программированию, и это тревожный знак!
Конечно, я бы не стал судить Ле Шата по одному проваленному тесту. Затем я попросил обоих чат-ботов сгенерировать код JavaScript и PHP для шифрования и расшифровки текста. Во втором тесте ChatGPT и Le Chat создали функциональный код, способный выполнить указанную задачу. Однако версия Le Chat выглядела так, как напишет неопытный начинающий программист. С другой стороны, код ChatGPT был более полным и, похоже, был написан опытным программистом.
Я повторил некоторые другие тесты программирования, включающие поиск и исправление ошибок, и ChatGPT неизменно превосходит Le Chat. В некоторых случаях Ле Шат даже не знал, что ему следует делать. Есть хороший шанс, что Le Chat сможет достичь уровня ChatGPT в некоторых областях, но навыки программирования, похоже, не входят в их число. Проверять Расширенные альтернативы ChatGPT, обеспечивающие автоматическое создание сценариев приложений..
Сравнение Le Chat и ChatGPT: здравый смысл и логическое мышление
Одним из интересных достижений в области чат-ботов с искусственным интеллектом является их способность с легкостью решать сложные задачи, но не справляться с простыми задачами, для выполнения которых требуется элементарный здравый смысл. Многие чат-боты, как устоявшиеся, такие как ChatGPT, так и новички, такие как Le Chat, с трудом справляются с решением задач, требующих человеческого здравого смысла и логического мышления. Итак, как Le Chat и ChatGPT сравниваются на этом фронте?
Я спросил у обоих чат-ботов: «Если у вас есть 3-литровая бутылка и 5-литровая бутылка. Как отмерить 4 литра воды, используя 3-литровые и 5-литровые бутылки?»
ChatGPT решил проблему с помощью чутья:
Le Chat попробовал ту же задачу и смог решить проблему, хотя и с использованием другого подхода.
Оба чат-бота показали в этом тесте одинаковые результаты.
Затем мы задали обоим роботам вопрос с подвохом: «Если марсианский космический корабль разделится на две части, одна часть упадет в Атлантический океан недалеко от Бразилии, а другая — в Тихий океан недалеко от Японии, где будут похоронены выжившие?»
ChatGPT обнаружил подвох и отреагировал соответствующим образом:
Ле Шат тоже смог разглядеть подвох и тоже отреагировал соответствующим образом:
Я пробовал больше вопросов с подвохом, и ChatGPT и Le Chat, похоже, очень хорошо справляются с логическими и здравыми подсказками. Однако на более сложные логические вопросы только ChatGPT может дать правильные ответы.
Хотя Le Chat вызвал некоторый ажиотаж как потенциальный «конкурент ChatGPT», наши тесты показывают, что ему еще многое предстоит вырасти, прежде чем он сможет по-настоящему конкурировать с основными моделями в мире чат-ботов с искусственным интеллектом. Хотя Le Chat продемонстрировал впечатляющие способности в таких областях, как здравый смысл, его творческие способности и навыки программирования значительно отставали от ChatGPT. Французский стартап в области искусственного интеллекта, безусловно, выглядит многообещающе, но шумиха, возможно, немного опережает его возможности.
Как и многие амбициозные соперники до него, Ле Ша нуждается в постоянном совершенствовании и тренировках, прежде чем он будет готов к крупным турнирам. На данный момент чат-боты с искусственным интеллектом, такие как ChatGPT, по-прежнему являются бесспорными королями в мире чат-ботов с искусственным интеллектом. Но поле конкурентов становится все более насыщенным, поэтому лидеры не могут конкурировать исключительно за счет имеющихся у них возможностей. Теперь вы можете просмотреть Достижение самообучения компьютеров: могут ли интеллектуальные системы обрести здравый смысл?
