Дарио Амодеи и регулирование ИИ — All-In Podcast на русском

Dario Defends Himself, Datacenter Panic, AI Doomer Trap, Senate Toss-Up

1:30:53 Читать по-английски

Коротко

Джейсон, Чамат, Дэвид Сакс и Дэвид Фридберг разбирают эссе Дарио Амодеи, в котором тот защищается от обвинений в пропаганде страха вокруг ИИ. Ведущие спорят о моделях саморегулирования отрасли — от FINRA до аналога MPAA — и о том, ведёт ли регуляторный захват к победе Китая. Обсуждают запрет открытых моделей, механику регуляторного захвата и насколько реальна идея рекурсивного самосовершенствования (RSI). В конце эпизода переходят к расследованию Минюста США в отношении Anduril и Анджело Харвица по разделу 8 Акта Клейтона.

Главы

  1. 0:00 ИИ и технологии

    Дарио защищается и месседжинг вокруг ИИ

    Ведущие разбирают эссе Дарио Амодеи, в котором глава Anthropic отвечает на критику за «думерскую» риторику. Дарио отрицает, что целенаправленно пугал общественность, но Сакс напоминает о его прогнозах про 50% сокращения рабочих мест и об исследованиях, которые «инженерили» под нужные заголовки. Затрагивают публикации Амодеи о рисках биологического оружия, кибератак и влияния на общество, а также его ответ Гэвину Бейкеру — сооснователь Anthropic утверждает, что не получал от Бейкера конкретных вопросов. Спорят о том, почему именно Амодеи стал главным «думером» отрасли и сколько ответственности лежит на нём за текущий политический климат.

  2. 10:24 ИИ и технологии

    Прозрачность thinking tokens и открытые модели

    Чамат предлагает стилман-защиту позиции Амодеи: если разработчики действительно боятся, что модели можно использовать для создания биооружия, им стоит раскрыть «мышление» моделей (thinking tokens) независимым аудиторам. Но, как отмечает Чамат, ни одна закрытая лаборатория этого не делает — значит, мы вынуждены верить их интерпретации. Сакс отвечает, что открытые модели позволяют видеть процесс мышления в реальном времени, и именно поэтому нужен независимый контроль. Возникает вопрос: готовы ли лаборатории поделиться внутренними процессами с третьей стороной, или речь идёт только о дешёвой риторике.

  3. 15:41 Политика и регулирование

    Модели саморегулирования: FINRA, FAA, FDA

    Сакс объясняет, почему идея Демиса Хассабиса о «FINRA для ИИ» вызывает у него возражения: FINRA защищает интересы крупных игроков и подавляет стартапы. Он противопоставляет ей модель MPAA, которая создала индустриальные стандарты под угрозой государственного регулирования. Чамат отмечает, что Хассабис писал о SRO (саморегулируемой организации) в общем смысле и готов обсуждать разные структуры. Ведущие сходятся на том, что отрасль должна самоорганизоваться, но не через новый государственный орган. Дарио Амодеи, по словам Сакса, всегда хотел аналог FDA или FAA, что убьёт скорость внедрения инноваций.

  4. 20:19 Политика и регулирование

    Регуляторный захват и судьба открытых моделей

    Сакс предсказывает механику регуляторного захвата: сначала создаётся «саморегулируемая» организация, затем её стандарты закрепляют законодательно, а потом «для справедливости» распространяют на открытые модели, которые не могут соответствовать требованиям, потому что их невозможно централизованно контролировать. Если открытый код запретят, американские компании переместят инвестиции за границу — именно это произошло с китайскими технокомпаниями после действий Си Цзиньпина. Чамат добавляет, что прямые иностранные инвестиции в США рухнут, а капитал уйдёт в другие юрисдикции. Джейсон настаивает на том, что простые американцы не заботятся об ИИ-безопасности — их волнует стоимость жизни и зарплаты.

  5. 26:00 ИИ и технологии

    Сценарий победы Китая

    Фридберг задаёт вопрос: что реально произойдёт, если США зарегулируют отрасль, а Китай продолжит развивать модели? Сакс отвечает, что это будет означать потерю американского экономического и военного превосходства: ИИ — это и дроны, и вооружения, и экономический рост. Джейсон возражает, что Китай не «выиграет» целиком — прогресс будет инкрементальным. Фридберг приводит пример открытых моделей с «гарнессом» (обвязкой), которые при использовании с другими открытыми инструментами становятся эффективнее закрытых. Сакс делает вывод: если США не введут драконовских мер против открытого кода, потребитель и бизнес выиграют, потому что смогут использовать самые дешёвые и лучшие решения.

  6. 31:44 Политика и регулирование

    Реакция на дата-центры и страх рабочих мест

    Обсуждают неожиданные заявления губернаторов Техаса и Пенсильвании против строительства дата-центров. Джейсон объясняет это политическим давлением избирателей, которые не видят выгоды от ИИ-бума. Сакс напоминает, что технологические гиганты уже сталкиваются с миллиардными исками за вред от их продуктов, и ответственность за безопасность будет расти. Джейсон прогнозирует, что роботакси будут запрещены в крупных городах или жёстко ограничены лицензиями. Он призывает объяснять американцам, как ИИ создаст рабочие места, а не отберёт их: именно доверие к спикерам и простые обещания выгод определят политический исход.

  7. 38:27 ИИ и технологии

    Риторика ИИ-лидеров и рабочие места

    Сакс отмечает, что Марк Цукерберг оказался лучшим спикером за ИИ: он обещает бесплатные инструменты и создаёт программы обучения для новых рабочих мест, в то время как Дарио Амодеи продолжает говорить о потерях рабочих мест. Джейсон вспоминает, что Сэм Альтман признал свою чрезмерную негативность, но Амодеи не пересмотрел прогнозы. Фридберг критикует культуру Кремниевой долины, которая превратилась в «машину по зарабатыванию денег» и потеряла идеализм. Сакс защищает мотивы Амодеи — он не гонится за деньгами, но его видение «машин любви и грации», которые обеспечат всех, пугает людей больше, чем обещает. Ведущие сходятся: Амодеи должен публично объяснять своё будущее, а не уклоняться от дискуссии.

  8. 45:15 Наука

    Рекурсивное самосовершенствование (RSI)

    Фридберг объясняет концепцию рекурсивного самосовершенствования: модель запускает агентов, которые улучшают следующую версию модели, и процесс становится полностью автоматическим. По его словам, открытые модели с «гарнессами» уже показывают, что комбинации инструментов эффективнее одиночных монолитов. Если RSI реально, человеческое вмешательство в цикл разработки станет ненужным, и новые регуляторы не смогут его остановить. Сакс возражает: даже если RSI возможен, это чёрный лебедь, и предсказывать его сроки бессмысленно. Чамат подчёркивает, что прогресс ИИ нелинеен, а темпы изменений непредсказуемы.

  9. 52:30 ИИ и технологии

    Выбор между AGI и конкуренция лабораторий

    Сакс возвращается к аргументу Дарио о «дата-центрах, полных гениев»: если ИИ-агенты станут научными сотрудниками уровня нобелевских лауреатов, то США должны владеть этими мощностями, а не отдавать их Китаю. Фридберг настаивает на важности выбора: лучше иметь несколько разных подходов к выравниванию ИИ (Илон Маск делает ставку на максимальную правдивость, Anthropic — на конституцию из либеральных ценностей), чем один-единственный. Он предупреждает, что регуляция в духе FINRA приведёт к концентрации власти и подавлению конкуренции. Сакс добавляет: если США будут слишком сильно тормозить, ключи от RSI достанутся другой стране — и это будет настоящая катастрофа.

  10. 56:57 Сделки и компании

    Расследование Anduril и раздел 8 Акта Клейтона

    Ведущие переходят к новости Bloomberg о том, что Министерство юстиции расследует Anduril и Анджело Харвица по разделу 8 Акта Клейтона — закону 1914 года, запрещающему «переплетающиеся советы директоров». Речь идёт о том, что одни и те же люди могут заседать в советах директоров конкурирующих компаний, что ведёт к координации и ослаблению конкуренции. Сакс связывает эту историю с общей темой эпизода: регуляторное давление на технологический сектор растёт со всех сторон — и от государства, и от общественного недовольства. Оставшаяся часть эпизода включает обсуждение последствий для оборонных стартапов и общей динамики сделок в отрасли.

Ключевые тезисы

  • Дарио Амодеи написал двухчастное эссе в ответ на критику, но ведущие считают, что он так и не признал своё влияние на «думерскую» риторику.
  • Дэвид Сакс называет идею «FINRA для ИИ» попыткой протащить новый регуляторный орган под видом саморегулирования, который только замедлит США.
  • По мнению Сакса, запрет открытых моделей неизбежен: стандарты сначала предъявят закрытым моделям, а затем «для справедливости» распространят на открытые.
  • Чамат Палихапития утверждает, что при запрете открытого кода американские корпорации будут инвестировать за границу, и приток прямых иностранных инвестиций в США рухнет.
  • Джейсон Калаканис связывает протесты против дата-центров с разочарованием обычных американцев, не видящих выгоды от ИИ-бума для своих зарплат.
  • Дэвид Фридберг считает, что рекурсивное самосовершенствование (RSI) может стать реальностью, и тогда новые регуляторы просто не смогут его остановить.
  • Самым эффективным спикером за ИИ ведущие называют Марка Цукерберга, который обещает «бесплатные инструменты», а не страх потери рабочих мест.

Цитаты

У меня для тебя плохие новости, Чамат. Грядёт запрет открытого кода.

Дэвид Сакс 0:29:39

Они могут проголосовать за социалистов и могут остановить дата-центры.

Джейсон Калаканис 0:24:29

Нам просто нужно применить те же стандарты к открытым моделям, что и к закрытым.

Дэвид Сакс 0:30:41

Упомянутые компании и люди

Компании

  • Anthropic
  • OpenAI
  • Nvidia
  • Meta
  • Google
  • Tesla
  • Anduril
  • Waymo
  • Zipline
  • Uber

Люди

  • Дарио Амодеи
  • Демис Хассабис
  • Илон Маск
  • Сэм Альтман
  • Марк Цукерберг
  • Гэвин Бейкер
  • Грег Эббот
  • Джош Шапиро
  • Анджело Харвиц

Тикеры

  • NVDA
  • TSLA

Темы

  • регулирование искусственного интеллекта
  • открытые модели и запрет открытого кода
  • рекурсивное самосовершенствование (RSI)
  • дата-центры и протесты губернаторов
  • саморегулируемые организации (SRO)
  • экспортный контроль и конкуренция с Китаем
  • думерская риторика ИИ-лидеров
  • рабочие места и автоматизация
  • прозрачность thinking tokens

Прогнозы

  • Запрет открытого кода неизбежен — его введут через «равное применение стандартов» к открытым и закрытым моделям.

    Дэвид Сакс в ближайшие годы

  • Роботакси будут запрещены в Нью-Йорке, Бостоне и Вашингтоне или ограничены лицензиями.

    Джейсон Калаканис в ближайшие несколько лет

Смотреть оригинал на YouTube