paint-brush
Этика местных LLM: ответ на «Манифест искусственного интеллекта с открытым исходным кодом» Цукербергак@techshinobi
285 чтения

Этика местных LLM: ответ на «Манифест искусственного интеллекта с открытым исходным кодом» Цукерберга

к Tech Shinobi8m2024/08/04
Read on Terminal Reader

Слишком долго; Читать

Этот пост объясняет причину, по которой Цукерберг интегрировал Fediverse и LLaMA с открытым исходным кодом, и это не его добродетель. И почему FOSS — это способ вылечить болезнь капитализма и спасти окружающую среду?
featured image - Этика местных LLM: ответ на «Манифест искусственного интеллекта с открытым исходным кодом» Цукерберга
Tech Shinobi HackerNoon profile picture

«Манифест искусственного интеллекта с открытым исходным кодом»

Марка Цукерберга ненавидел Ричард Столлман на протяжении десятилетий, и он единственный человек, который появляется на обложках видеоэссе: «Как Интернет был украден» и «Как ИИ был украден тогда и сейчас».


Однако недавно ситуация изменилась после того, как он принял Fediverse и постоянно открывал исходный код Llama .


В последнем «Манифесте искусственного интеллекта с открытым исходным кодом» Цукерберга он заявил о пяти потребностях открытого исходного кода:


  • Нам необходимо обучать, настраивать и совершенствовать наши собственные модели.
  • Нам нужно самим управлять своей судьбой и не замыкаться на закрытом вендоре.
  • Нам необходимо защитить наши данные.
  • Нам нужна модель, которая будет эффективной и доступной в эксплуатации.
  • Мы хотим инвестировать в экосистему, которая станет стандартом в долгосрочной перспективе.


Это точно описывает потребности технических специалистов и малого бизнеса.


Причина, по которой я называю это «Манифестом», заключается в том, что впечатление от прочтения этой статьи тесно связано с Манифестом GNU .


Благодаря проекту GNU, который сделал нас свободными операционными системами; Спасибо команде разработчиков LLaMA, которая сделала нас по-настоящему открытым ИИ.

Диалектика эгоизма-альтруизма

В «Теории моральных чувств» Адам Смит писал:


Каким бы эгоистичным ни казался человек, очевидно, что в его природе есть некоторые принципы, которые интересуют его в судьбе других и делают их счастье необходимым для него, хотя он не получает от этого ничего, кроме удовольствия видеть это.


Эта идея эгоистичного альтруизма или этического эгоизма была продолжена многими австрийскими школами и поведенческими экономистами и в конечном итоге стала ключевым принципом идеологии неолиберализма .


Однако в случае с Цукербергом и его Метой все сложнее.


В своем заявлении Цукерберг четко осознает, в чем заключаются преимущества использования открытого исходного кода — выгодные, но моральные.


Как мы все знаем, в Кремниевой долине никто на самом деле не заботится о «высшем благе» и не хочет «сделать мир лучше». Они просто несут ответственность перед своими заинтересованными сторонами.


А как насчет беспроигрышной ситуации?


Это именно то, что они продают публике, чтобы она поверила (почувствовала).


Диалектическая структура остается той же, что и диалектика эгоизма-альтруизма: корыстный бизнесмен, преследующий прибыль, но притворяющийся моральным.


Важно следующее: приведет ли это к беспроигрышной ситуации для общественного блага?


Ответ таков: это зависит, и, скорее всего, нет. Эти «слишком большие, чтобы обанкротиться» компании реакционны по своей сути.


Достичь высшего блага сложно, и наивно полагать, что оно является побочным продуктом эгоизма [большого] Другого. Если только мы, 99% , не будем вовлечены в это диалектическое движение в качестве активного агента. В противном случае наше общество будет разрушено климатическим кризисом , прежде чем у него появится шанс столкнуться с «постчеловеческой антиутопией».

Нет снижения роста, нет ускорения

Как я упоминал ранее в своем выступлении, об опасностях технологий , крупные технологические компании никогда не будут сокращать свои центры обработки данных в целях обеспечения устойчивости, не изменив лежащий в их основе политико-экономический порядок, если только следующий экономический цикл/депрессия не наступит снова.


Наша оценка затрат OpenAI на логические выводы в 4 миллиарда долларов исходит от человека, знакомого с кластером серверов, которые OpenAI арендует у Microsoft. По словам этого человека, этот кластер содержит эквивалент 350 000 чипов Nvidia A100. По словам этого человека, около 290 000 из этих чипов, или более 80% кластера, использовались в ChartGPT.


Амир Эфрати и Аарон Холмс


Отмечая крупную инвестицию в будущее искусственного интеллекта Meta, мы анонсируем два кластера графических процессоров 24 тыс. Мы используем эту структуру кластера для обучения Llama 3. Это объявление является одним из шагов в нашей амбициозной дорожной карте развития инфраструктуры. К концу 2024 года мы планируем продолжить наращивание нашей инфраструктуры, которая будет включать 350 000 графических процессоров NVIDIA H100 в рамках портфеля, который будет иметь вычислительную мощность, эквивалентную почти 600 000 H100.


Создание инфраструктуры GenAI компании Meta.


Цукерберг продолжит расширять свои кластеры искусственного интеллекта, чтобы соответствовать OpenAI/MS, Google и так далее. В конце концов, открытый исходный код — это не что иное, как конкурентная стратегия для Meta.


Сторонники замедления роста Ноама Хомского и Кохея Сайто очень привлекательны, но нам никогда не следует рассчитывать только на это. Точно так же, как виртуальная машина не может превзойти ограничения базовой физической машины. Зеленая политика не может даже поддерживать себя, когда она опережает неолиберальную экономику.


Теперь ситуация ясна, но что делать? Очевидно, что ни дерост, ни акселерационизм не помогут в эпоху антропоцена. А как насчет «Умеренного консерватизма» Славоя Жижека?

SaaSS или облачные феодальные владения?

В Интернете несвободное программное обеспечение — не единственный способ потерять свободу. Сервис как замена программного обеспечения, или SaaSS, — это еще один способ предоставить кому-то другому власть над вашими компьютерами. SaaSS означает использование сервиса, реализованного кем-то другим, вместо запуска вашей копии программы. Термин наш; статьи и реклама не будут использовать его, и они не сообщат вам, является ли услуга SaaSS. Вместо этого они, вероятно, будут использовать расплывчатый и отвлекающий термин «облако», который объединяет SaaSS с различными другими практиками, как оскорбительными, так и приемлемыми.


Одним из многих значений термина «облачные вычисления» является хранение ваших данных в онлайн-сервисах. В большинстве случаев это глупо, поскольку подвергает вас слежке. Другое значение (перекрывающееся, но не одно и то же) — «Служба как замена программного обеспечения», которое лишает вас контроля над вашими компьютерами. Никогда не следует использовать SaaSS.


— Ричард Столлман, Кому на самом деле обслуживает этот сервер?


RMS написал это эссе уже давно, но недавно Янис Варуфакис продвинул идею потери свободы на шаг дальше в сегодняшнем контексте.


Для чего потребовались ошеломляющие научные прорывы, фантастически звучащие нейронные сети и невероятные программы искусственного интеллекта? Превратить работников, трудящихся на складах, водящих такси и доставляющих еду, в облачных профессий. Создать мир, в котором рынки все чаще заменяются облачными владениями. Заставить бизнес стать вассалами. И превратить всех нас в облачных рабов, приклеенных к нашим смартфонам и планшетам и усердно производящих облачный капитал, который удерживает наших новых повелителей на девятом облаке.


- Янис Варуфакис, Технофеодализм – что убило капитализм


В эпоху облачного капитала нашу свободу отбирают облачные специалисты, владеющие онлайн-сервисом/SaaSS/облаком, чтобы взимать с нас плату за подписку, или так называемую «облачную аренду». Конечно, они хотят контролировать наши устройства (компьютеры), наше внимание (кошелек) и нашу жизнь (труд).


Итак, как нам вернуть нашу свободу и демократию?


Я утверждаю, что мы должны освободить [как свободные] и демократизировать [как децентрализовать] нашу цифровую жизнь в первую очередь, приняв альтернативы с открытым исходным кодом и самостоятельный хостинг, если это вообще возможно. Это моя версия «облачного восстания» с целью свержения технофеодализма, и это тот же самый камень, который Джейкоб Аппельбаум забросил в надзор [капитализм] .


Труднее всего бороться с тем, как функционирует система. Результатом станет откат более серьезного экономического кризиса, повторение зеленого капитализма и ответный удар альтернативных правых.


Чтобы преодолеть этот системный тупик, нам необходимо обойти петли обратной связи, определить и изменить точки воздействия, как указывает Донелла Медоуз.


Так что же и где именно являются рычагами воздействия в капиталистической системе? Я думаю, что это все «Созидательное разрушение», предложенное Йозефом Шумпетером. Например, бум искусственного интеллекта, который мы сейчас переживаем, а Лама и Стабильная диффузия являются сильнейшими созидательно-деструктивными силами.


Нам также нужно «Прямое действие» Дэвида Гребера, но в рамках нашей цифровой жизни.

Лечение шизофрении и депрессии

Существует множество ресурсов, таких как gofoss и Руководства по конфиденциальности , с которых легко начать. Но сейчас мы сосредоточимся на местных LLM. Такие инструменты, как ollama , Jan , GPT4All и llamafile, отлично подходят для самостоятельного размещения LLM как на локальном хосте, так и в локальных сетях.


Это первый шаг к восстановлению нашей свободы от олигархии путем использования творчески-разрушительной силы искусственного интеллекта с открытым исходным кодом. Цель состоит в том, чтобы побудить технически подкованных людей использовать больше самостоятельного хостинга, а тех, кто не разбирается в технологиях, использовать больше децентрализованных сервисов/экземпляров, поддерживаемых сообществом с открытым исходным кодом, таким как Fediverse.


Да, Цукерберг действительно интегрировал Fediverse и LLaMA с открытым исходным кодом, и это не из-за его добродетели. То же самое относится и к Alibaba и ее Qwen. Это потому, что, с точки зрения Жиля Делёза, капитализм шизофреничен, что означает, что он самодетерриторизован по своей природе. Проще говоря, это еще один вариант знаменитого утверждения Карла Маркса: капитализм саморазрушителен.


Если мы действительно хотим спасти нашу окружающую среду путем сокращения ее роста, это должно идти снизу вверх, а не наоборот. Увеличение числа самостоятельных децентрализованных LLM приведет к снижению рыночного спроса на массивные кластеры ИИ [по крайней мере, для умозаключений], поэтому предложение центров обработки данных начнет спонтанно падать.


Регулирование имеет свое значение, но никогда не решит проблему эффективно на конкурентном рынке, а человеческие потребности и желания нельзя просто отодвинуть. Чрезмерное законодательное вмешательство может привести к безработице, что приведет к возрождению консерваторов, но в худшем состоянии - ультраконсерватизма.


Это то, что Зигмунд Фрейд называл «настойчивым возвращением вытесненного». Лекарство состоит в том, чтобы стать более самодостаточными – удовлетворять наши потребности собственными руками, а не уставать от избыточного наслаждения потребительством со стороны [большого] Другого.


История доказала, что коммунизм не может положить конец капитализму, который мы уже видели, но это определенно не конец истории Фукуямы.


Любой тупик (цикл) капитализма можно изменить с помощью предпринимательства. Не в смысле «каждый — предприниматель», но у каждого есть [не очень] равная возможность действовать [по-своему] — участвовать, вовлекаться и быть шкурой в игре технологической революции. и его последующая социальная трансформация.


В лакановском психоанализе при лечении психоза аналитик должен объединиться с пациентом, взяв на себя роль секретаря (предпринимателя) и играть по правилам пациента (свободный рынок). Затем найдите фиксацию (возможность) и предложите пациенту переместить свою психическую структуру (круговой поток) во что-то более стабильное и устойчивое. В случае капитализма фиксацией [или точкой привязки] является свободное программное обеспечение с открытым исходным кодом (FOSS).


Децентрализованное самостоятельное размещение местных LLM похоже на ризому Делёза. Это может снизить спрос на частном рынке и в конечном итоге разрушить монолиты ИИ. Эта свободная, продуктивная трансформация FOSS – это способ вылечить болезнь капитализма и спасти нашу окружающую среду.


Мы не знаем, что будет после капитализма, как предположил Марк Фишер, об этом невозможно даже представить. Но нам все еще нужно выйти за рамки бесконечного финала позднего капитализма, сбежать из тюрьмы депрессивного капиталистического реализма и воссоздать будущее, в котором все возможно (у каждого есть свобода).


Вот список книг, которые составили контекст этого поста:

  • Людвиг фон Мизес - Человеческая деятельность: трактат по экономике
  • Йозеф Шумпетер - Капитализм, социализм и демократия
  • Мюррей Ротбард - Человек, экономика и государство
  • Адам Смит - Теория моральных чувств
  • Кохей Сайто - Маркс в антропоцене: к идее замедления роста коммунизма
  • Ноам Хомский - Оптимизм вместо отчаяния
  • Донелла Медоуз - Системное мышление
  • Дэвид Гребер - Фрагменты анархической антропологии
  • Янис Варуфакис - Технофеодализм: что убило капитализм
  • Ричард Столлман - Свободное программное обеспечение, свободное общество
  • Жан Бодрийяр - Общество потребителей
  • Жиль Делёз - Капитализм и шизофрения
  • Фрэнсис Фукуяма - Конец истории и последний человек
  • Славой Жижек - Меньше, чем ничего: Гегель и тень диалектического материализма
  • Славой Жижек - Возвышенный объект идеологии
  • Брюс Финк - Основы психоаналитической техники. Лакановский подход для практикующих врачей.
  • Дэни Нобус - Ключевые концепции лакановского психоанализа
  • Зигмунт Бауман - Труд, потребительство и новые бедные
  • Дэвид Харви - Краткая история неолиберализма
  • Мюррей Букчин - Экология свободы
  • Марк Фишер - Капиталистический реализм