Что лучше для повседневного использования?

Ключевые выводы

• ChatGPT и Claude — ведущие компании в области искусственного интеллекта, предлагающие впечатляющие веб-приложения.
• ChatGPT улучшился с обновлением 4.0, а Haiku Клода успешно конкурирует в проектах по кодированию.
• Мобильное приложение Клода превосходит ChatGPT, предлагая быстрые ответы и более удобное использование.

Anthropic и ChatGPT — два крупнейших имени в области ИИ, которые может использовать общественность. Поскольку обе эти компании выпускают мобильные приложения, большой вопрос заключается в том, какое из их приложений лучше подходит для использования в повседневной жизни. Давайте посмотрим, что может предложить каждая из них.

GPT против Клода в Интернете

В гонке ИИ соревнуются несколько компаний, но две из них постоянно попадают в заголовки и сопровождаются передовыми энтузиастами: OpenAI и Anthropic. Обе компании достигли значительного прогресса в создании впечатляющего веб-приложения, которое пользователи могут использовать бесплатно, с некоторыми ограничениями.

Я уже использовал ChatGPT для кодирования игры и для помощи в написании романа, но я использовал Клода гораздо меньше. Anthropic часто всплывал в обсуждениях, но мало кто тестировал двух гигантов ИИ лицом к лицу.

Обновление GPT 4o сделало его намного лучше в том, в чем он был слаб раньше. Такие элементы, как кодирование, производство контента и даже общие ответы, значительно улучшились. OpenAI даже включил мини-версию этой модели, которую можно использовать на бесплатном уровне.

Anthropic также совершенствует свою модель. Новейшая версия Claude, Haiku, может выполнять подвиги обработки, подобные ChatGPT. Однако Claude имеет гораздо большее контекстное окно и лучше подходит для некоторых проектов кодирования, которые могут потребовать от движка изучения большой кодовой базы. Claude гораздо лучше справляется с такими задачами, как реферирование книг или обработка сложных запросов с учетом набора данных.

У каждой из этих двух моделей ИИ есть свои сильные и слабые стороны. Но как насчет использования их для типичных повседневных задач на вашем телефоне? Ну, с выходом мобильных приложений это животрепещущий вопрос, на который я хочу ответить.

Вход и начало работы

Дибакар Гхош / How-To Geek / Midjourney

Если у вас уже есть учетная запись для этих LLM, войти в систему и начать работу легко. Оба они также легко связаны с учетными записями Google, так что вам даже не нужно создавать совершенно новую учетную запись, чтобы использовать любое из этих приложений. Однако у них есть те же ограничения, что и у их аналогов в веб-приложениях.

У Claude и ChatGPT разные ограничения на бесплатное использование. ChatGPT использует систему на основе токенов, и когда ваши токены закончатся, вам придется ждать, пока они не сбросятся, чтобы вы могли снова использовать систему. Пока они не сбросятся, вы можете использовать выключенную версию LLM (или модель mini-4o), чтобы получить ответы на свои вопросы.

У Claude похожая система токенизации, но количество сообщений, которые вам разрешено отправлять, кажется гораздо более ограниченным на бесплатном уровне. После того, как эти сообщения закончатся, вы не сможете снова использовать модель, пока она не сбросится. Как человек, который некоторое время пользовался профессиональным аккаунтом, я заметил, что лимиты доступа несколько увеличились, но я все равно обнаружил, что у меня закончились кредиты, прежде чем я смог что-либо сделать. Для ChatGPT и Claude есть более высокооплачиваемый уровень, но я не тестировал ни один из них.

Могу сказать, что если вы используете веб-приложение и переходите на мобильное приложение, ваши лимиты использования не сбрасываются. Вам все равно придется ждать, пока время не перейдет, чтобы снова использовать модель на полную мощность. Однако между веб-приложением и мобильным приложением существует бесшовная интеграция, и вы можете легко продолжить разговор, начатый на вашем настольном компьютере.

Какое приложение работает лучше?

Тестирование приложений лицом к лицу — лучший вариант для выяснения того, как они работают. Для этого я открыл оба приложения и использовал один и тот же запрос. Я попросил GPT и Клода дать мне сюжет для короткого рассказа на 3000 слов с конкретными запросами по темам. Ответы были, мягко говоря, неожиданными. Оба LLM дали мне то, что я мог использовать для составления плана и плана короткого рассказа, но были значительные различия в качестве и времени ответа.

Время ответа Клода составило всего восемь секунд от запроса до завершения. Клод решил дать мне синопсис, чтобы он послужил творческой основой, на которой я мог бы закончить историю. Он не провел меня ни по каким деталям и не уделил много времени погружению в развитие персонажей. План Клода просто нарисовал историю в максимально широкой дуге и оставил мне, как писателю, дополнять детали. В целом, это очень полезный быстрый ответ.

Ответ ChatGPT был гораздо более подробным. Он использовал трехактную структуру, обстановку и план, который проводил писателя через каждый акт истории, дополненный подсказками о том, как работать над этой конкретной короткометражкой. Он даже предлагал план развязки, приятный штрих. Однако завершение плана заняло у ChatGPT 43 секунды с момента ввода подсказки.

Итак, для этого эксперимента лицом к лицу ChatGPT предложил более всесторонний ответ, но потребовалось почти в пять раз больше времени, чтобы дать его мне. Я бы сказал, что ответ Клода, хотя и не такой подробный, как у ChatGPT, был быстрее, и я отдаю победу Клоду за то, что он не тратил мое время зря.

Хорошо, они оба хорошо пишут слова; давайте посмотрим, как они справляются с кодированием. Я попросил оба приложения предоставить фрагмент кода, чтобы проверить способность мобильного приложения писать код, который может не работать, но выглядит правильно. Клод дал мне скорострельный 2D-контроллер персонажа, доставив весь код примерно за 5 секунд. Приложение ChatGPT столкнулось с проблемами соединения, когда я трижды его тестировал, поэтому я ничего не получил от него.

Джейсон Дукеран/How-to-Geek

Хотя проблемы с подключением к приложению ChatGPT кажутся случайными, они случаются гораздо чаще, чем с Клодом, что говорит о том, что приложению, возможно, требуется некоторая доработка. Поскольку ChatGPT не дал мне никаких ответов, я должен отдать победу Клоду и в этом случае, что пока делает счет 2–0 в пользу Клода.

Я прогнал оба приложения через базовые тесты по алгебре, истории США, географии и естествознанию. Вопросы, которые я задавал, были достаточно простыми, чтобы их знал десятиклассник, и оба движка ответили правильно. Единственное отличие здесь — время ответа Клода, которое постоянно было в четыре-пять раз быстрее, чем у ChatGPT. Клод снова занимает поул-позицию, обеспечивая ему неоспоримое преимущество 3–0.

Чтобы убедиться, что время отклика не вызвано задержкой, я также провел эти тесты на мобильном соединении моего телефона. Результаты были похожими: ChatGPT реагировал в четыре-пять раз дольше, чем Клод. Казалось, что ChatGPT имел лучшую связь в мобильной сети, чем в беспроводном соединении, поскольку я не столкнулся ни с какими задержками или отсутствием ответа при использовании мобильного интернета.

Галлюцинации все еще случаются на мобильных устройствах

Галлюцинации типичны для LLM, поскольку они ценят удовольствие пользователя больше, чем предоставление точной фактической информации. Поскольку мобильные приложения — это просто другой метод доступа к бэкэнду LLM, у вас все равно, скорее всего, будут галлюцинации, когда вы зададите ему вопросы. Как и все LLM в своих отказах от ответственности, представленная информация может не соответствовать действительности. Вам решать, проверять ли.

Какое мобильное приложение лучше?

Как я уже говорил, мои тесты проводились по нескольким показателям, но они далеки от исчерпывающих. Я узнал, что у приложения ChatGPT были некоторые проблемы с подключением в сети Wi-Fi, в то время как приложение Клода работало без сбоев и выдавало пригодные для использования результаты с низким временем отклика. Клод установил рекорд для этой итерации моделей, убедительно победив ChatGPT со счетом 3–0. И модели, и приложения постоянно находятся в разработке, поэтому обнаруженные мной проблемы, вероятно, изменятся. Однако, учитывая текущую итерацию этих двух приложений, Клод, похоже, является явным победителем.