ai-compare.org
Ein Vergleichsportal und eine Zertifizierungsstelle für KI-Modelle
$ Erstes Meetup
Something new is cooking in the Turing Agency kitchen: ai-compare meetup!
Einmal im Monat treffen wir uns in der bitwäscherei und diskutieren, wie man Übersicht im GenAI-Dschungel schaffen kann.
Welche Kriterien braucht es, um verschiedene Modelle vergleichbar zu machen? Welcher Aspekt bekommt welches Gewicht — Nachhaltigkeit, Transparenz, Umgang mit Bias, Sicherheit? Hat Performance Vorrang oder gesellschafts- politische Verantwortung?
ai-compare.org sammelt, als Non-Profit organisiert, Analysen, Evaluationen und kritische Behind-the-scenes-Recherchen — und bereitet alles so auf, dass Nutzer*innen ohne spezielle technische Expertise einen Zugang zur Vielfalt von KI-Modellen bekommen.
Let's meetup, let's discuss!
- Wann
- Jeden letzten Donnerstag des Monats, 19–21 Uhr
- Extras
- Drinks, Snacks und jeweils ein spannender Gast
# Mission
Alle kennen ChatGPT – der GenAI-Platzhirsch hat schon bald ein ähnliches Monopol wie Google, wenn es um Suchmaschinen geht. Aber es gibt natürlich noch jede Menge anderer Modelle, jeweils mit ihren eigenen Stärken und Schwächen.
ai-compare.org sorgt für Übersicht im GenAI-Dschungel: Als Non-Profit organisiert, sammeln wir alle möglichen Analysen, Evaluationen und kritischen Behind-the-scenes-Recherchen. Und dann bereiten wir das alles so auf, dass Nutzer*innen ohne spezielle technische Expertise einen Zugang zur Vielfalt von KI-Modellen bekommen.
# Kriterien
Dabei spielt nicht allein die Performance der Modelle eine Rolle, sondern auch eine Reihe von gesellschaftspolitisch und ökonomisch relevanten Parametern:
Transparenz & Datenqualität
Transparenz und Qualität der verwendeten Trainingsdaten.Bias & Ethik
Umgang mit Bias und diskriminierenden Mustern.Copyright
Umgang mit Copyright-Problemen und Urheberrecht.Sicherheit
Werden schädliche Inhalte (harmful data) gefiltert?Open vs. Closed
Open Source oder Closed Source / Proprietary?Nachhaltigkeit
Ökologische Nachhaltigkeit (Stromverbrauch, Wasserverbrauch, CO2).Soziale Standards
Soziale Nachhaltigkeit (Sub-contractors, Datenkuration in Billiglohnländern).Geschäftsmodell
Sind die Entwickler profit- oder nonprofit-orientiert?Outputqualität
...und natürlich wird auch die Qualität der Outputs einbezogen.# Roadmap & Vision
Von diesem Hintergrundwissen ausgehend sind eine Reihe von Weiterentwicklungen denkbar:
- Tutorials: Teil des Webauftritts, die Installation und Gebrauch weniger gängiger Modelle erläutern, insbesondere local models.
- Workshops/Schulungen: Für Unternehmen, Schulen, Kulturinstitutionen (Medienkompetenz, nachhaltige KI).
- Modell-Zertifizierung: Wir verleihen Labels, die auf verschiedene Stärken hinweisen (ein grünes, ein sozial nachhaltiges, ein Datensch Sauberkeits-Label – oder eine grosse Synthese für «good GenAI»).
# Über uns
Turing Agency
Dieses Projekt wurde von der Turing Agency initiiert. Wir sind ein Kompetenzzentrum für künstlerische Auseinandersetzungen im Feld menschlich werdender Maschinen.
Visit Turing Agency