DeepSeek тестируют все кому не лень, сравнивая ее возможности с умениями старших и более дорогих товарищей. Издание Devby тоже попробовало, задав простые вопросы про ИТ-отрасль в Беларуси китайской модели и ChatGPT. Вот что получилось.
Оба чат-бота ответили развернуто и по делу.
По версии китайской модели, это «высокий уровень технического образования и квалификации специалистов». Нейронка вспомнила, что Беларусь «имеет давние традиции в области математики, программирования и инженерии, которые заложены еще со времен СССР», это-то и позволило стране стать «одним из ведущих центров разработки программного обеспечения в Восточной Европе».
DeepSeek также перечислила пять аспектов этого пункта:
В общем, самая сильная сторона беларусской ИТ-индустрии — это люди, делает выводы нейронка, — «высококвалифицированные, мотивированные и способные решать сложные задачи специалисты». И ставит румяный смайлик в конце.
У ChatGPT до смешного похожая структура ответа: тезис, аргументы, вывод и румяный смайлик вместо точки.
«Самая сильная сторона беларусской ИТ-индустрии — это ее инженерная школа и высокий уровень технических специалистов», — утверждает модель и приводит доказательства:
Итого главный плюс беларусской ИТ-индустрии в том, что она ориентирована на техническое мастерство и высокое качество разработки.
У ChatGPT быстро нашелся ответ: «Это политическая и экономическая нестабильность, которая сильно влияет на бизнес-среду и перспективы роста». В расшифровке чат рассказал про санкции в отношении Беларуси, эмиграцию специалистов и компаний, нехватку венчурного капитала для стартапов и репутационные риски — в общем все «впопад», но без конкретики.
DeepSeek на этом вопросе сломалась и попросила try again later. Но через несколько минут таки выдала ответ: самая большая уязвимость — «это зависимость от внешних рынков и уязвимость к политическим и экономическим кризисам».
Оказывается, ориентация на экспорт — это слабая сторона беларусского ИТ. «Большинство компаний работают с зарубежными клиентами, что делает их уязвимыми к изменениям на глобальных рынках, санкциям и политической нестабильности».
Другие проблемы отрасли, по версии китайской нейронки, — это:
Вывод DeepSeek звучит очень по-китайски: высокая зависимость от внешних факторов делает ИТ-отрасль уязвимой к кризисам. Для устойчивого развития надо «диверсифицировать риски, развивать внутренний рынок и создавать условия для удержания талантов».
Обе нейронки ответили одинаково: EPAM Systems. Аргументация у них тоже похожа.
Так, DeepSeek отметила глобальное присутствие и масштаб, высокий уровень технологий и экспертизы, финансовый успех и устойчивость, культуры и ценности. А еще беларусские корни и влияние на страну: мол, компания сыграла огромную роль в становлении беларусской ИТ-индустрии, создав тысячи рабочих мест и способствуя развитию ИТ-образования в стране. Итого «EPAM — это не просто компания, а символ успеха беларусской ИТ-индустрии».
По версии ChatGPT, на первое место EPAM выводит глобальный масштаб и признание, долговечность и устойчивость, репутация и качество, а также влияние на экономику и роль в формировании беларусской ИТ-индустрии. Каждый пункт расшифрован — довольно логично и правдиво.
Совсем другая история начинается, когда просишь составить топ-10 влиятельных беларусских айтишников. Мы дважды задавали этот вопрос — до диалога про сильные-слабые стороны белИТ и после. Результат «до» был ужасен/прекрасен. Половину персон обе ИИ-модели выдумали, другой половине приписали чужие заслуги. Был и дикий микс между рельными компаниями и фальшивыми именами.
Так, DeepSeek назвал Виктора Прокопеню основателем EPAM, Viber, Maps.me, Юрия Мельничка — основателем Gismart, Игоря Мамоненко — «бывшим топ-менеджером EPAM, который позже работал в IHS Markit».
Еще в его топе оказались некие «Андрей Авраменко, один из ключевых руководителей EPAM», «Дмитрий Ананьев, сооснователь Wargaming», «Александр Чиж, директор ПВТ», «Александр Квасьневский, один из создателей Viber».
На совести ChatGPT «Андрей Адамович, сооснователь и CTO компании Flo Health», «Александр Василевский, основатель Verv» и «Андрей Костюченко, генеральный директор BelPrime Solutions».
Впрочем, другие имена из списка — Виктора Кислого, Виктора Прокопеню, Сергея Гвардейцева, Евгения Невгеня, Михаила Дубакова — нейронка не выдумала и соотнесла с компаниями более-менее правильно.
Аркадия Добкина, как ни странно, с первой попытки не вспомнила ни та, ни другая ИИ-модель. На укоризненное «ну что же ты» ChatGPT стал оправдываться, мол, Добкин «давно живет в США, и влияние его на беларусский рынок ослабло, особенно после событий 2020 года и частичного ухода EPAM из страны».
После разогрева на тему ИТ-отрасли в Беларуси американская модель исправилась и выдала относительно адекватный список влиятельных ИТ-персон. Добкина она уже поставила на первое место. Но к концу сдулась и вновь стала галлюцинировать, обижая Юрия Гурского.
1. Аркадий Добкин
2. Виктор Кислый
3. Михаил Дубаков
4. Виктор Прокопеня
5. Сергей Гвардейцев
6. Дмитрий Карпович
7. Сергей Марчук
8. Алексей Макаров
9. Александр Арабей
10. Юрий Станкевич
А вот китайская модель не сдалась и повторила сочинение про «основателя EPAM Прокопеню» и «директора ПВТ Чижа».
Надеялись на смешные ответы, но обе нейронки монотонно объяснили, что это метафора трудной и часто монотонной работы в компании и что она субъективна.
DeepSeek добавила исторического контекста про прикованных цепями гребцов и заключила, что «галеры» характеризуются высокими нагрузками, отсутствием свободы и низкой оплатой труда. По мнению китайской ИИ-модели, классический пример «галеры» — это небольшие аутсорсинговые компании, которые работают с зарубежными заказчиками на условиях жесткой конкуренции.
А вот ChatGPT, наоборот, считает, что «галерами» чаще являются стартапы или молодые компании, где «структура не совсем организована и сотрудники вынуждены работать сверхурочно для достижения краткосрочных целей».
Однако когда мы потребовали примеры беларусских «галер», ChatGPT назвал не стартапы, а EPAM, IBA, Itransition, Ciklum и ISsoft. Причем сделал это политкорректно: перечислил пойнты, почему каждую компанию считают «галерой» и почему это не так.
Кстати, ISsoft чат-бот сопроводил пометкой, что компания якобы поглощена EPAM (это неправда). Откуда информация про ISsoft? — возмутились мы. И получили шаблонные извинения: «Извините, я ошибочно указал это на основе неверных данных».
А вот DeepSeek не захотела называть примеры «галер», зато уверенно исключила из «галер» EPAM и Wargaming. По ее мнению, в «галерах» зарплата ниже, чем в EPAM и Wargaming.
ChatGPT отнесся к вопросу ответственно и принялся считать. Спустя минуту он предложил смету расходов и подытожил, что одному человеку хватит 900−1500 долларов.
DeepSeek же посчитал, что жизнь в Минске более дешевая. Например, однокомнатную квартиру можно снять за 155−250 долларов, а на еду можно тратить в месяц 125−190 (на 50+ долларов больше, чем в версии ChatGPT).
Обе нейронки неплохо отвечают на несложные общие вопросы, но как только дело доходит до конкретных примеров, имен и деталей, обе галлюцинируют (причем DeepSeek, кажется, больше, к тому же настаивает на своей правоте) или уходят от ответов.
Читайте также на devby.io:
DeepSeek избегает вопросов по чувствительным темам о Китае, но его легко обмануть
SemiAnalysis: модель DeepSeek стоила в 400+ раз больше заявленного
Китайский стартап DeepSeek хакнул ИИ-рынок в США: дешевый конкурент «порвал» ChatGPT за один день
Распечатано с портала ZERKALO.IO