paint-brush
La ética de los LLM locales: respondiendo al "Manifiesto de IA de código abierto" de Zuckerbergpor@techshinobi
258 lecturas

La ética de los LLM locales: respondiendo al "Manifiesto de IA de código abierto" de Zuckerberg

por Tech Shinobi8m2024/08/04
Read on Terminal Reader

Demasiado Largo; Para Leer

Esta publicación explica la razón por la cual Zuckerberg integró Fediverse y LLaMA de código abierto, y no es por su virtud. ¿Y por qué el software libre es la forma de curar la enfermedad del capitalismo y salvar nuestro medio ambiente?
featured image - La ética de los LLM locales: respondiendo al "Manifiesto de IA de código abierto" de Zuckerberg
Tech Shinobi HackerNoon profile picture

El "Manifiesto de la IA de código abierto"

Mark Zuckerberg ha sido odiado por Richard Stallman durante décadas, y es la única persona que aparece en las dos imágenes de portada de los ensayos en vídeo: Cómo se robó Internet y Cómo se robó la IA en aquel entonces y ahora.


Sin embargo, las cosas han cambiado recientemente después de su adopción de Fediverse y el código abierto continuo de Llama .


En el último "Manifiesto de IA de código abierto" de Zuckerberg , afirmó cinco necesidades del código abierto:


  • Necesitamos entrenar, perfeccionar y destilar nuestros propios modelos.
  • Necesitamos controlar nuestro propio destino y no quedar atrapados en un proveedor cerrado.
  • Necesitamos proteger nuestros datos.
  • Necesitamos un modelo que sea eficiente y asequible de ejecutar.
  • Queremos invertir en el ecosistema que será el estándar a largo plazo.


Eso describe con precisión las necesidades de las personas tecnológicas y las pequeñas empresas.


La razón por la que lo llamo "Manifiesto" es porque la impresión de leer este artículo se conecta fuertemente con el Manifiesto GNU .


Gracias al proyecto GNU que nos convirtió en sistemas operativos libres; gracias al equipo de desarrollo de LLaMA que nos convirtió en verdaderas IA abiertas.

Dialéctica egoísmo-altruismo

En La teoría de los sentimientos morales , Adam Smith escribió:


Por muy egoísta que se suponga al hombre, es evidente que hay algunos principios en su naturaleza que le interesan por la fortuna de los demás y le hacen necesaria la felicidad de los demás, aunque no obtenga nada de ello excepto el placer de verla.


Esta idea de altruismo egoísta o egoísmo ético ha sido continuada por muchas escuelas y economistas conductuales austriacos y eventualmente se convirtió en un principio clave de la ideología del neoliberalismo .


Sin embargo, es más complejo en el caso de Zuckerberg y su Meta.


En su declaración, Zuckerberg es claramente consciente de los beneficios de adoptar el código abierto: rentable pero moral.


Como todos sabemos, en Silicon Valley a nadie realmente le importa "el bien común" ni realmente quiere "hacer del mundo un lugar mejor". Simplemente son responsables ante sus partes interesadas.


Pero ¿qué pasa con una situación en la que todos ganan?


Eso es exactamente lo que le están vendiendo al público para que crea (sienta).


La estructura dialéctica sigue siendo la misma que la dialéctica egoísmo-altruismo: un hombre de negocios interesado en sí mismo que busca ganancias pero pretende ser moral.


Lo importante es: ¿Resultará esto en una situación beneficiosa para el bien público?


La respuesta es que depende, y lo más probable es que no. Estas empresas demasiado grandes para quebrar son reaccionarias en el fondo.


Lograr el bien mayor es difícil y es ingenuo creer que es el subproducto del egoísmo del [gran] Otro. A menos que nosotros, el 99% , estemos involucrados en este movimiento dialéctico como agente proactivo. De lo contrario, nuestra sociedad será destruida por la crisis climática antes de tener la oportunidad de toparse con la "distopía poshumana".

Sin decrecimiento no hay aceleración

Como mencioné antes en mi discurso, los peligros de la tecnología , las grandes tecnológicas nunca reducirán sus centros de datos para lograr sostenibilidad sin cambiar el orden político-económico subyacente, a menos que vuelva el próximo ciclo económico/depresión.


Nuestra estimación de los 4 mil millones de dólares en costos de inferencia de OpenAI proviene de una persona con conocimiento del grupo de servidores que OpenAI alquila a Microsoft. Ese grupo tiene el equivalente a 350.000 chips Nvidia A100, dijo esta persona. Alrededor de 290.000 de esos chips, o más del 80% del grupo, impulsaban ChartGPT, dijo esta persona.


- Amir Efrati y Aaron Holmes


Marcando una inversión importante en el futuro de la IA de Meta, anunciamos dos clústeres de GPU de 24k. Usamos este diseño de grupo para el entrenamiento de Llama 3. Este anuncio es un paso en nuestra ambiciosa hoja de ruta de infraestructura. Para finales de 2024, nuestro objetivo es seguir ampliando nuestra infraestructura, que incluirá 350 000 GPU NVIDIA H100 como parte de una cartera que contará con una potencia informática equivalente a casi 600 000 H100.


Construcción de la infraestructura GenAI de Meta


Zuckerberg seguirá ampliando sus grupos de IA para que coincidan con OpenAI/MS, Google, etc. Después de todo, el código abierto no es más que una estrategia competitiva para Meta.


Los defensores del decrecimiento de Noam Chomsky y Kohei Saito son muy atractivos, pero nunca debemos contar únicamente con eso. Al igual que una máquina virtual no puede superar las limitaciones de su máquina física subyacente. La política verde ni siquiera puede sostenerse por sí misma cuando está por encima de la economía neoliberal.


Ahora bien, la condición es clara, pero ¿qué hacer? Es evidente que ni el decrecimiento ni el aceleracionismo son útiles en la era del Antropoceno. Pero ¿qué pasa con el "conservadurismo moderado" de Slavoj Žižek?

¿SaaSS o feudos en la nube?

En Internet, el software propietario no es la única forma de perder la libertad. El servicio como sustituto de software, o SaaSS, es otra forma de permitir que otra persona tenga poder sobre su informática. SaaSS significa utilizar un servicio implementado por otra persona como sustituto de ejecutar su copia de un programa. El término es nuestro; los artículos y anuncios no lo usarán y no le dirán si un servicio es SaaSS. En lugar de ello, probablemente utilizarán el término vago y que distrae la atención de “nube”, que agrupa SaaSS junto con varias otras prácticas, algunas abusivas y otras aceptables.


Uno de los muchos significados de "computación en la nube" es almacenar sus datos en servicios en línea. En la mayoría de los escenarios, eso es una tontería porque te expone a vigilancia. Otro significado (que se superpone pero no es lo mismo) es Servicio como sustituto de software, que le niega el control sobre su informática. Nunca debes usar SaaSS.


— Richard Stallman, ¿A quién sirve realmente ese servidor?


RMS escribió este ensayo hace mucho tiempo, pero recientemente Yanis Varoufakis llevó esta noción de pérdida de libertad un paso más allá en el contexto actual.


¿Para lograr qué se necesitaron avances científicos alucinantes, redes neuronales que suenan fantásticas y programas de inteligencia artificial que desafían la imaginación? Convertir a los trabajadores que trabajan en almacenes, conduciendo taxis y entregando alimentos en perfiles en la nube. Crear un mundo donde los mercados sean cada vez más reemplazados por feudos de la nube. Obligar a las empresas a asumir el papel de vasallos. Y convertirnos a todos en siervos de la nube, pegados a nuestros teléfonos inteligentes y tabletas, produciendo con entusiasmo el capital de la nube que mantiene a nuestros nuevos amos en la nube nueve.


— Yanis Varoufakis, Tecnofeudalismo: lo que acabó con el capitalismo


En la era del capital de la nube, los cloudistas que poseen el servicio en línea/SaaSS/feudo de la nube nos quitan la libertad para cobrarnos una tarifa de suscripción, o el llamado "alquiler de la nube". Por supuesto, quieren controlar nuestros dispositivos (computación), nuestra atención (billetera) y nuestra vida (trabajo).


Entonces, ¿cómo reclamamos nuestra libertad y democracia?


Afirmo que primero liberaremos [como libre] y democratizaremos [como descentralizar] nuestra vida digital, adoptando alternativas de código abierto y autohospedaje si es posible. Esta es mi versión de la "rebelión de las nubes" para derrocar el tecnofeudalismo, y es la misma piedra que Jacob Appelbaum disparó contra la Vigilancia [Capitalismo] .


Es lo más difícil trabajar en contra del funcionamiento de un sistema. El resultado sería el retroceso de una crisis económica más grave, la repetición del capitalismo verde y el efecto contraproducente de la extrema derecha.


Para superar este punto muerto del sistema, debemos solucionar los circuitos de retroalimentación e identificar y alterar los puntos de influencia, como indica Donella Meadows.


Entonces, ¿cuáles y dónde están exactamente los puntos de apalancamiento en el sistema capitalista? Creo que es toda Destrucción Creativa la que sugirió Joseph Schumpeter. Por ejemplo, el auge de la IA que estamos experimentando actualmente, y Llama y Stable Diffusion son las fuerzas creativas y destructivas más fuertes que existen.


También necesitamos la Acción Directa de David Graeber pero dentro de nuestra vida digital.

Tratar la esquizofrenia y la depresión

Hay muchos recursos como gofoss y guías de privacidad con los que es fácil empezar. Pero ahora nos centraremos en los LLM locales. Herramientas como ollama , Jan , GPT4All y llamafile funcionan muy bien para LLM con autohospedaje, ya sea en localhost o en redes de área local.


Este es el primer paso para recuperar nuestra libertad de las oligarquías aprovechando la fuerza creativa y destructiva de la IA de código abierto. El objetivo es alentar a las personas conocedoras de la tecnología a realizar más autohospedaje y a las personas no conocedoras de la tecnología a utilizar más servicios/instancias descentralizados mantenidos por la comunidad de código abierto, como Fediverse.


Sí, Zuckerberg integró Fediverse y LLaMA de código abierto, y no es por su virtud. También lo hace Alibaba y su Qwen. Esto se debe a que, en términos de Gilles Deleuze, el capitalismo es esquizofrénico, lo que significa que está autodesterritorializado por su naturaleza. En pocas palabras, esa es otra forma de expresar la famosa afirmación de Karl Marx: el capitalismo es autodestructivo.


Si realmente queremos salvar nuestro medio ambiente mediante el decrecimiento, tiene que ser desde abajo y no al revés. Más LLM descentralizados y con alojamiento propio conducirán a una menor demanda del mercado de clústeres masivos de IA [al menos por inferencia], por lo que la oferta de centros de datos comenzará a caer espontáneamente.


Las regulaciones tienen su significado, pero nunca resolverán el problema de manera efectiva en un mercado competitivo, y las necesidades y deseos humanos no pueden simplemente ignorarse. La excesiva intervención legislativa puede provocar desempleo que lleve al resurgimiento de los conservadores pero en su peor condición, el ultraconservadurismo.


Esto es lo que Sigmund Freud llamó "el insistente retorno de lo reprimido". La cura es ser más autosuficientes: satisfacer nuestras necesidades con nuestras propias manos en lugar de estar hartos del disfrute excedente del consumismo por parte del [gran] Otro.


La historia ha demostrado que el comunismo no puede acabar con el capitalismo, como ya hemos visto, pero definitivamente no es el fin de la historia de Fukuyama.


Cada callejón sin salida (ciclo) del capitalismo puede ser alterado por el espíritu empresarial. No en el sentido de que "todo el mundo es un emprendedor", pero todos tienen [no tan] iguales oportunidades de actuar [a su manera]: participar, involucrarse y participar en el juego de una revolución tecnológica. y su posterior transformación social.


En el psicoanálisis lacaniano, al tratar la psicosis, el analista debe aliarse con el paciente asumiendo el papel de secretario (empresario) y seguir las reglas del paciente (libre mercado). Luego, encuentre una fijación (oportunidad) y anime al paciente a reposicionar su estructura psíquica (flujo circular) en algo más estable y sostenible. En el caso del capitalismo, la fijación [o punto de anclaje] es el software libre y de código abierto (FOSS).


El autohospedaje descentralizado de LLM locales es como el Rizoma de Deleuze. Puede disminuir la demanda del mercado propietario y eventualmente desmantelar los monolitos de IA. Esta transformación productiva y fluida del software libre es la forma de curar la enfermedad del capitalismo y salvar nuestro medio ambiente.


No sabemos cómo será después del capitalismo, como sugirió Mark Fisher, es imposible siquiera imaginarlo. Pero todavía tenemos que ir más allá del final interminable del capitalismo tardío, liberar el depresivo realismo capitalista y recrear un futuro donde todo sea posible (todos tengan libertad).


Aquí hay una lista de libros que construyeron el contexto de esta publicación:

  • Ludwig von Mises - La acción humana: un tratado de economía
  • Joseph Schumpeter - Capitalismo, socialismo y democracia
  • Murray Rothbard - Hombre, economía y estado
  • Adam Smith - La teoría de los sentimientos morales
  • Kohei Saito - Marx en el Antropoceno: Hacia la idea del comunismo decrecimiento
  • Noam Chomsky - Optimismo sobre desesperación
  • Donella Meadows - Pensando en sistemas
  • David Graeber - Fragmentos de una antropología anarquista
  • Yanis Varoufakis - Tecnofeudalismo: lo que mató al capitalismo
  • Richard Stallman - Software libre, sociedad libre
  • Jean Baudrillard - La sociedad de consumo
  • Gilles Deleuze - Capitalismo y esquizofrenia
  • Francis Fukuyama - El fin de la historia y el último hombre
  • Slavoj Žižek - Menos que nada: Hegel y la sombra del materialismo dialéctico
  • Slavoj Žižek - El objeto sublime de la ideología
  • Bruce Fink - Fundamentos de la técnica psicoanalítica Un enfoque lacaniano para profesionales
  • Dany Nobus - Conceptos clave del psicoanálisis lacaniano
  • Zygmunt Bauman - Trabajo, consumismo y los nuevos pobres
  • David Harvey - Una breve historia del neoliberalismo
  • Murray Bookchin - La ecología de la libertad
  • Mark Fisher - Realismo capitalista