ИИ

Самый мощный ИИ в мире вскоре может появиться внутри приложения для социальных сетей

ByteDance обучает массивную модель ИИ с 10 триллионами параметров, чтобы конкурировать с Anthropic, что сигнализирует о серьезном сдвиге в глобальном балансе сил в сфере ИИ.
Самый мощный ИИ в мире вскоре может появиться внутри приложения для социальных сетей

Распространенное в технологическом мире мнение гласит, что ведущие лаборатории искусственного интеллекта в США обладают непреодолимым преимуществом перед остальным миром. В то время как такие компании, как Anthropic и OpenAI, доминируют в заголовках со своими сериями Mythos и GPT, в центрах обработки данных компании, стоящей за TikTok, происходят тихие перемены. В настоящее время ByteDance обучает массивную модель ИИ с 10 триллионами параметров. Для сравнения, эта система в три раза больше крупнейшей из существующих китайских моделей и, возможно, больше самых передовых систем, доступных в настоящее время на Западе.

Если смотреть на картину в целом, этот шаг является декларацией технической независимости. В течение многих лет многие развивающиеся компании в сфере ИИ полагались на обходной путь, называемый дистилляцией. Этот процесс включает в себя использование высокопроизводительной модели конкурента и обучение ее уменьшенной версии для имитации ее поведения. Это цифровой эквивалент того, как студент копирует домашнее задание у отличника, чтобы получить проходной балл. Основатель ByteDance Чжан Иминг отверг этот путь. Недавно он заявил своим исследователям, что компания должна стремиться к лидирующим в мире возможностям через оригинальные разработки. По сути, ByteDance строит свой цифровой мозг с нуля, чтобы в конечном итоге превзойти учителей, у которых она когда-то училась.

Понимание веса десяти триллионов параметров

За жаргоном параметров скрывается простая концепция цифровой памяти и емкости. Представьте модель ИИ как неутомимого стажера. Параметры — это количество отдельных соединений или цифровых синапсов, которые стажер использует для хранения информации и распознавания образов. Модель с 1 миллиардом параметров подобна обычному калькулятору. Модель со 100 миллиардами параметров — это компетентный исследователь. Модель с 10 триллионами параметров — это библиотека, которая умеет думать.

По оценкам отрасли, самая передовая модель Anthropic, Mythos 5, насчитывает примерно 8 триллионов параметров. Fable 5, модель, которую сегодня используют многие профессиональные разработчики, имеет около 5 триллионов. ByteDance нацелена на 10 триллионов. Хотя чистый размер — не единственный фактор того, насколько умным станет ИИ, он устанавливает фундаментальный предел того, чему может научиться машина. Более крупная модель имеет более высокий потолок для рассуждений, сложного программирования и понимания нюансов человеческого языка в разных культурах.

Такой масштаб требует огромного количества физической инфраструктуры. ByteDance потратила три года на агрессивное выстраивание своей сети центров обработки данных. Компания управляет облачным подразделением под названием Volcano Engine, которое выступает невидимым стержнем этих амбиций в области ИИ. Это подразделение делает больше, чем просто размещает модель; оно предоставляет специализированные вычислительные мощности, необходимые для обработки гор данных, требуемых системой с 10 триллионами параметров. Обучение модели такого размера обычно занимает от трех до шести месяцев непрерывных вычислений, прежде чем начнется процесс тонкой настройки.

Почему оригинальные исследования — рискованная, но необходимая ставка

Исторически сложилось так, что самым быстрым способом выхода на рынок было совершенствование того, что уже работало. Решив отказаться от дистилляции, ByteDance согласилась на более медленный цикл разработки. Это решение проистекает из убеждения, что скопированная модель никогда не сможет быть лучше оригинала. Если вы обучаете свой ИИ имитировать результаты конкурента, вы также наследуете все ошибки и предвзятости этого конкурента.

«Под капотом» команду ByteDance возглавляет У Юнхуэй, бывший ученый из Google DeepMind. Его команда из 2000 человек включает инженеров инфраструктуры и специалистов по разметке данных, разбросанных по всему миру. Создавая собственную архитектуру, они создают систему, специализированную для конкретных типов данных, которыми владеет ByteDance. Сюда входит огромный объем видеоконтента из TikTok и большой объем разговорных данных из Doubao, флагманского ИИ-помощника компании в Китае.

С точки зрения потребителя результаты этих исследований уже проявляются. Модель SeeDance от ByteDance в настоящее время является одним из самых передовых инструментов для генерации реалистичного видео. В то время как конкуренты из США ограничены запретами по безопасности или ограниченным доступом к своим топовым моделям, ByteDance продвигает свою технологию напрямую в руки сотен миллионов пользователей. У Doubao уже 324 миллиона активных пользователей в месяц, которые ежедневно взаимодействуют с ИИ. Более крупная и функциональная модель сделает эти взаимодействия менее похожими на разговор с ботом и более похожими на сотрудничество с экспертом-человеком.

Аппаратный движок и гонка собственных чипов

Высококлассные модели ИИ хороши лишь настолько, насколько хорош кремний, на котором они работают. Сейчас мировые поставки чипов для ИИ нестабильны и жестко регулируются. ByteDance ответила на это попыткой разработать собственные специализированные чипы для ИИ. Эта стратегия отражает то, что Apple и Google сделали со своим собственным оборудованием. Разрабатывая чип и модель ИИ одновременно, компания может заставить систему работать намного быстрее, потребляя при этом меньше электроэнергии.

Именно здесь макроэкономическая реальность затрагивает обычного пользователя. Работа ИИ обходится невероятно дорого. Затраты на электроэнергию только для модели с 10 триллионами параметров астрономические. Если компания сможет снизить эти затраты с помощью специализированного оборудования, она сможет предлагать свои услуги ИИ по более низкой цене или даже бесплатно. ByteDance позиционирует себя как лидера в области низких затрат и высокой производительности. Они не просто создают умную модель; они строят масштабируемую фабрику интеллекта.

И наоборот, зависимость от массивных аппаратных кластеров создает системную уязвимость. Если поставки передовых чипов будут ограничены еще сильнее, даже лучшая исследовательская группа в мире столкнется с трудностями при завершении процесса обучения. Это создает гонку со временем. Окно обучения этой новой модели продолжительностью от трех до шести месяцев — это период высоких ставок, когда все должно пройти идеально. Единственный сбой оборудования или сдвиг в международной торговой политике может отбросить проект на месяцы назад.

Практические последствия для обычного пользователя

Это означает, что инструменты ИИ, которые вы используете для редактирования видео, написания текстов или поиска в Интернете, станут значительно мощнее без необходимости покупки нового телефона или компьютера. Основная работа происходит в облаке. По мере того как ByteDance интегрирует эти возможности 10-триллионной модели в свои приложения, барьер между контентом профессионального уровня и любительским творчеством исчезнет. Подросток со смартфоном получит доступ к той же творческой силе, которой обладала голливудская студия десять лет назад.

Со стороны рынка эта конкуренция заставляет лаборатории США внедрять инновации быстрее. Когда конкурент показывает, что может создать более крупную и независимую модель, это разрушает монополию на высококлассный ИИ. Для пользователя эта конкуренция является чистым плюсом. Она ведет к улучшению функций, более прозрачному контролю конфиденциальности и более доступным подпискам, поскольку компании борются за ваше внимание.

В конечном счете, размер модели — это просто цифра, пока она не дает ощутимых результатов. Настоящим испытанием для ByteDance станет то, сможет ли этот титан с 10 триллионами параметров решать задачи, которые не под силу моделям поменьше. Будь то прогнозирование рыночных тенденций или создание бесшовного перевода прямого эфира, полезность ИИ — единственный показатель, который действительно важен для человека, держащего телефон.

Если взглянуть шире, глобальный ландшафт ИИ больше не является гонкой одной лошади. Переход к независимым, масштабным разработкам в Китае знаменует собой новую главу в истории технологий. Пользователям следует подготовиться к цифровой среде, где приложения, которые они используют для развлечения, также являются самыми сложными инструментами в их профессиональном арсенале. Наблюдайте за своими цифровыми привычками в ближайшие несколько месяцев. Вы можете заметить, что ваше любимое видеоприложение стало на удивление лучше понимать, чего именно вы хотите, еще до того, как вы закончите вводить свой запрос. Эра цифровых титанов настала.

Источники:

  • Latepost Tech Analysis Report on ByteDance Internal Strategy
  • The Information: ByteDance Project Seed Development Briefing
  • Volcano Engine Enterprise Solutions Product Roadmap
  • Moonshot AI Research Benchmarks for Kimi K3
  • Industry Estimates for Anthropic Mythos and Fable Parameter Counts
bg
bg
bg

До встречи на другой стороне.

Наше решение для электронной почты и облачного хранения данных со сквозным шифрованием обеспечивает наиболее мощные средства безопасного обмена данными, гарантируя их сохранность и конфиденциальность.

/ Создать бесплатный аккаунт