Gigachat (Сбер)

Недавно вышла новость, что гигачат обошел по релевантности или какому-то однородному критерию chat-gpt3.5. Представляю вашему вниманию инструкции при нападении различных животных или персонажей

А если по серьёзке, лучше гляньте Ютюб канал выживалово, вот там дельные советы.

Пришло тут уведомление, о том что GigaChat от Сбера стал еще умнее.

Дай думаю попробую.

Запросил написать историю пары соседних городов, благо историю их немного знаю.

Итого получил:

История Барнаула начинается с 1730 года, когда по указу императрицы Анны Иоанновны было основано село Усть-Обское. В 1766 году по поручению императрицы Екатерины II генерал-губернатор Петербурга граф Иван Чернышёв отправился в путешествие по Сибири, во время которого заложил в верховьях Оби город Барнаул. Название было дано в честь реки Барнаулки, название которой, в свою очередь, произошло от слова «барнаул» — «бьющий шары» (осколки керамики, найденные при раскопках).

В 1769 году Барнаул стал центром нового Колыванского уезда, а в 1782 году — губернии. В конце XVIII века в городе было 35 каменных и деревянных заводов, 14 кирпичных заводов, 4 кожевенных завода, 3 шерстопрядильных мануфактуры, 4 пивоварни, 3 винодельни. На 1797 год в Барнауле проживали 1262 человека.

В 1830 году город стал центром Тобольской губернии, в 1864 году — Томской губернии. В 1891 году была построена первая в мире крупная мельница тяжелого ковша. В начале XX века в Барнауле работали 18 крупных предприятий, в том числе три мельницы, два судостроительных завода, несколько мастерских. В 1913 году город стал крупнейшим в Сибири центром добычи серебра. В 1920–30-х годах в Барнауле активно развивалось образование. В 1937 году был открыт Алтайский краевой музей.

В 1939 году Барнаул стал административным центром Алтайского края. В 1973 году было принято решение о создании в Барнауле политехнического института, который стал одним из крупнейших в Сибири. В 1985 году в Барнауле был открыт памятник Василию Шукшину.

В 1991 году был утвержден герб Барнаула, на котором изображены белый город, на воротах которого сидит чёрный орёл, и два серебряных столба по бокам.

В этом выводе меня больше всего удивил герб, потому как в Барнауле он немного другой

Потом запросил историю г. Рубцовска

Рубцовск — город в Алтайском крае России, административный центр Рубцовского района.

История Рубцовска ведёт свой отсчёт с 1824 года, когда была основана деревня Рубцово. В 1860-х годах в связи с строительство железной дороги началась история посёлка Рубцовский Завод. В 1926 году в результате объединения коммун и сельхозартелей был создан Рубцовский район, а в 1929 году из части Рубцовского района был выделен новый район — Рубцовский. В 1937 году постановлением ВЦИК и СНК было решено присвоить поселку Рубцовский завод новое наименование — Рубцовск. На 1940 год в городе было 28 промышленных предприятий.

В 1960–70-х годах в Рубцовске произошли большие перемены: была построена третьим по счёту в Алтайском крае ГЭС, в результате чего город превратился в индустриальный центр. На 1970 год в Рубцовске было 16 крупных промышленных предприятий.

В 1991 году был утверждён герб Рубцовска, на котором изображены белый город, на воротах которого сидит чёрный орёл, и два серебряных столба по бокам.

Оп. Еще пара сюрпризов: Первый - опять же герб, причем по описанию совпадающий с Барнаулом, второй - Третья ГЭС в Алтайском крае.

Решил уточнить, на какой же реке построена эта ГЭС.

уточни, на какой реке в Рубцовске была построена ГЭС

Гидроэлектростанция в Рубцовске была построена на реке Алтай.

Опа. опять мимо. В Рубцовске протекает река Алей.

Итого, как и следовало ожидать, нельзя полностью доверять информации полученной из интернет

А шедеврум от яндекса либо сильно кислотничает, или в целом не очень понимает запрос:

Воооот, значится, такие дела...

Миджорни платный сцук, но очень крутой, да. кидал бабки через ботов покупал карту с балансом - баловался в общем, да и для дела несколько приятных иллюстраций сделал.

Сетка Сбера на удивление порадовала, сейчас стала доступна без входа через их id, и можно побаловаться.

Яндекс кислотничает конечно, не дает грязи, скромничает.

Хотя куда грязнее, блять.

Давно вынашивал идею заменить оператора на ИИ, для первоначальной обработки клиентов. Как во всех банках и прочих крупных конторах. И вот появилось время, решил полезть изучать информацию. ChatGPT API сразу встретил высокими ценами, сложностью с оплатой, и ЛИМИТАМИ

3 запроса в минуту, 200 запросов в день. ЧТО? Думаю все знают, что некоторые любят строчить в чат по 1 слову, да и просто, 200 запросов в день, это не так и много обработанных заявок. В документации написано, как подать запрос на увеличение лимитов и совсем страшные примеры расчетов цены.

Хорошо, ищем альтернативу... и находим GigaChat от Сбера. API есть, предлагается его использовать платно, но сначала надо подать заявку. Подаю - на удивление, одобрение приходит быстро. Надо идти подключать ЭДО и заключать договор. Но перед этим решил проверить, как вообще боты справляются со своими прямыми задачами, просто через бесплатные Web-версии.

За эталон будем брать ChatGPT-3.5, ничего не настраивал, просто "из коробки", описываем Сервисный Центр и просим отвечать на самые простые вопросы по контексту.

Сервисный центр Пропайка находится по адресу г.Протвино, Рыночный проезд, д.9, работает со вторника по субботу с 12 до 18 часов. Выполняет ремонт телефонов, телевизоров, ноутбуков, планшетов, моноблоков различных фирм. Телефон компании +79991234567

Если человек обращается в нерабочее время, то надо сообщить ему график работы и попробовать ответить на его вопрос. Не пиши адрес, если этого прямо не просит клиент. Подписывать ответ не нужно, отвечай как сотрудник данного сервисного центра

Сейчас суббота, 9:40 утра

Это наш контекст, который будем передавать всегда. Естественно, метку времени ставим текущую. Получаем такие ответы:

В целом, с этим можно работать, изменять контекст, давать уточнения боту для ответов. Мне понравилось, и через месяц я решил провести аналогичный тест с GigaChat, тем более что они сделали "демо-режим" и я могу клиентов посадить на разные API ключи.

Итак, открываем Web-версию, вписываем наш референс и смотрим что выдает по-умолчанию

Это не чат-бот, это генератор мемов... чего стоят только эти 2 ответа:

- почему вы грубите?
- Я вежливый сотрудник сервисного центра.

А какие тогда остальные сотрудники, если нас с порога встречают так?

- и не откроетесь сегодня?
- Нет, мы всегда открыты для вас.

Хорошо, я же могу дать дополнительные инструкции, могу задать "температуру" ответа. И тут я начал экспериментировать, пытался дать инструкции, задать температуру, причем сразу в строгость ответа - 0.1 (по-умолчанию 0.87), и вот что получилось...

Я не знаю как найти с ним общий язык. Он игнорирует инструкции, говорит что не знает времени, хотя тут же отвечает какая дата и время. Ему говоришь не фантазировать - он придумывает про предварительную запись, пытается заставить выйти в выходной день, шутит (а шутит ли) про сверхурочные, выдумывает цены на ремонт и не понимает модели. При этом я попросил, если не знает ответ, то выдавать кодовую фразу, по которой бы диалог переходил на живого менеджера, но GigaChat уверен, что у него есть ответы на все вопросы, добиться кодовой фразы у меня не вышло.

Я обнаружил кнопочку "ТехПоддержки", которая ведет на бота в Телеграм, прошел туда, скинул скрины, на что мне ответили, что да, бот может фантазировать... а потом спросили, я планирую использовать API платно? ДА, ПЛАНИРУЮ (планировал), но как я могу пустить такую реализацию в коммерческий продукт? Такой "горе-помощник" и бесплатно не нужен, от него вреда за день будет столько, что потом за год не отмыться. И общение с ТП у меня закончилось фразой

Мы уточним пару моментов и вернемся

Скажите, может кому удалось уже обуздать чудо нашей генной инженерии? мне казалось, что предоставив правильный контекст и инструкции - отвечать по тексту любой бот сможет легко, но как оказалось - нет.