Presentation Objects of Interest

From CTPwiki

Introduction

Aims of this workshop

  1. To give you an insight into how er are working with AI image creation
  2. Have a dialogue on possible intersections with your research.

Agenda

  1. Background (Chr.)
  2. AI image generation: techniques and infrastructures - evading the conventional platforms and capital interests (Nicolas & Pablo)
  3. Conversation

The background (Knowledge Servers)

Within a larger project on digitization, democracy and citizenship (SHAPE), we run a project that not only questions the role of Big Tech and platforms in the construction of knowledge, but also on how one might ‘delink’ from capital interests.

We try to speak from the point of view of what you might call grassroots’ internet culture. A culture that had control of the tools and infrastructures for its own existence – what the anthropologist Chris Kelty once called a ‘recursive publics’.

History took us elsewhere. To 'client-server' relations (rather than peer-to-peer).

We speak of this as a new “epistemic infrastructure” (borrowing the term from Celia Lury): An infrastructure for what and how we know things – and not just for how we find information, or use it in other ways.

Our questions

How does grassroots digital culture respond to this development? OR What does technological autonomy look like today?

… What are the strategies for culturally, democratically and environmentally sustainable knowledge infrastructures?

… What are the tensions within technologies?

… How do you provide alterantives/other services and infrastructures for communities?

Project image made with Stable Diffusion

Our methods

We collaborate with grassroots groups (such as collectives that run such services)

We share a history of being part of this culture ourselves

Our 'amateurism' perhaps even seek to be ‘undisciplined’ – suspending disciplinary regimes (challenging the conditions under which knowledge occurs)

We run and build services, "knowledge servers":

… a server (within the university ecosystem)

… a library

… a wiki

… an etherpad

… a git repository

Portrait of a self-hosted server

How we proceeded with generative AI

images / Stable Diffusion

Our interest in "objects of interest / necessity"

(a sketch of the map)

AI Horde image generation with a communal infrastructure

Why?

  • Monopoly and concentration of power in platform capitalism
  • The user is the product
  • Governance
  • Epistemic closure

Platform economy

Numbers of newly funded AI startups per country
Taller Estampa, map of generative AI

Software

Stable Diffusion page, screenshot
Stable Diffusion, training process
Stable Diffusion pipeline, Severine Dusollier
Network of actants, Stable Diffusion

Decentralization


" El taller se centra en la producción comunitaria de imágenes de IA. Analizaremos juntos diferentes proyectos de software, como ComfyUI DrawThings y AI Horde, que desvinculan a los generadores de imágenes de las plataformas hegemónicas. Examinaremos el ecosistema general que hace posibles estas prácticas: las comunidades implicadas, sus prácticas de imagen y curatoriales, así como sus dependencias. A través de presentaciones y demostraciones, nos plantearemos las siguientes preguntas"

Artbot

En los siguientes 20 minutos, usaremos en conjunto una interfaz para generación (inferencia) de imágenes.

Entra a artbot

Antes de comenzar, haz click en el botón con un ordenador, y busca al "worker" llamado camilla_horde

De esta manera sólo utilizaremos la mesa camilla para nuestra generación de imágenes

Explora las opciones de la interfaz, libremente

Artbot interfaz

Las interfaces son omnipresentes como bien sabemos. Son, al mismo tiempo, un poco invisibles. Lo material se deja un poco lado, a la par de lo complejo, se domestica o se hace invisible.

No solo un hay sistema complejo detrás (modelos computacionales basado en grandes y oscuras bases de datos), tTambién un entrecruzamiento un poco invisible entre lo técnico, lo cultural, lo artístico (computacional, ciencias computacionales, el modelero amateur, el artista visual, y el usuario promedio).

Tampoco se trata de una interfase plug-and-play. Si bien es una versión adecuada en la que no es necesario saber de programación (como en las versiones antiguas), no es una interfase blanca y domesticada (piénsese en Apple, o en chatGPT).

Hay palancas, botones, deslizadores, cuadros de texto, tuercas y tornillos, decisiones. La interfaz es compleja, y con ella se expande el poder de decisión.

(qué comunidades hay detrás de estas interfaces?)

CivitAI

CivitAI es una plataforma/repositorio altamente popular para distribuir imágenes y modelos de IA. En nuestra taxonomía, es lo que nos referimos como un espacio entre privado y común. Es privado en el sentido de que está enfocado a individuos que comparten su trabajo (ej. la creación de nuevos modelos), y común en el sentido de que la mayoría de los modelos pueden ser reutilizados, re-mezclados). Es un repositorio cuyo uso principal consiste en compartir recursos.

buzz buzz buzz: civitAI tiene su propia moneda de cambio. Puede comprase o ganarse siendo parte la de la comunidad (posteando, recomendado, comentando, etc). Puede usarse para dejar propinas, or para pedir ciertos modelos

Captura pantalla civitAI

En gran medida es un hub cultural, con su propia economía, reglas, y preferencias estéticas.

Qué tipo de cuerpos habitan los modelos más populares?

AI Horde

AI Horde es un sistema de clósters de procesamineto distribuidos. Usando código abierto, y crowd-financiado, es un recurso que permite prestar y tomar prestadas otras computadoras con trarjetas gráficas con el fin de usar modelos de IA generativa

El sistema funciona creando un directorio de "trabajadores" que forman parte de esta red, y distribuyendo las llamadas entre sí. En este sentido es parcialmente descentralizado.

Como trabajador, es posible generar "kudos" , la moneda de intercambio con la que también puede generar imágenes de otros trabajadores (más kudos = modelos mejores y más rápidos)´

Un vistazo al trabajo material detrás de convertirse en un "trabajador":

Conectar con el servidor, la mesa camilla

(imagina que pides permiso para entrar a una casa que no es tuya, pero una vez que te dan permiso, puedes hacer los quieras: cambiar los muebles, ducharte, abrir puertas, pintar la casa, etc) 

   $ ssh -p 2020 xvs@xenocenter.zapto.org

Crear un espacio único en el disco, donde se instalan las versiones del código necesarias, apartado de otros archivos similares (environment)

(imagina que tienes un horno, y quieres cocinar con dos tipos de guisados casi idénticos. En vez combinar sabores incompatibles en un sólo horno, te haces de otro horno más pequeño, con sus propios ingredientes que hacen sentido entre sí) 

   $ source camilla_horde/bin/activate

Checar el espacio, uso, y distribución de discos duros

(bueno, yo quiero este nuevo horno chiquito, habrá espacio en la casa?) 

   $ df -a

Checar memoria RAM, total y disponible

(vale, hay espacio, para el horno, pero cuánto gas puedo usar? algunos de mis modelos, digo, de mis guisados, requieren mucho gas) 

   $ free -h

Checar memoria VRAM y modelo de la tarjeta gráfica

(resulta que para mis guisados necesito dos tipos de gas, el segundo, un poco más especial es un poco caro, pero muy potente. Este es realmente el ingredient clave para generar xenovisuales) 

   $ sudo lshw -C display
tarjetas gráficas del servidor´

Corre el programa de GPU decentralizados usando python

(pongo mi guisado a hacer, básicamente´) 

   $ python3 -m venv camilla_horde

Configuración de hordeAI

Ejecutando hordeAI

(ah, pero, veámos mis opciones para cocinar, cuáles son los límites? Que guisos quiero tener siempre a la mano? Qué guisos quiero prohibir? Con quien compartiré mi comida? Será picante?) 

   $ nano bridgeData.yaml
archivo de configuración de ´hordeai

¿Qué significa hacer imágenes de estas maneras?

¿Cómo funciona la gobernanza en estos proyectos?

¿Cuál es la relación entre el ethos de compartir de estos proyectos y su generación de valor?

¿Qué formas toman la economía, el trabajo, los cuerpos?´

pad para escribir en conjunto: https://ctp.cc.au.dk/pad/p/xeno_dialogo

Recursos

Startups funded 2013-2023:

Critical perspective:

AI y materialidad:

Software

Training LoRAs

Retrieved from "https://ctp.cc.au.dk/w/index.php?title=Presentation_Objects_of_Interest&oldid=852"