{"id":13035,"date":"2024-06-24T10:53:44","date_gmt":"2024-06-24T10:53:44","guid":{"rendered":"https:\/\/dailyai.com\/?p=13035"},"modified":"2024-07-22T15:23:53","modified_gmt":"2024-07-22T15:23:53","slug":"the-rise-of-open-source-ai-models-transparency-and-accountability-in-question","status":"publish","type":"post","link":"https:\/\/dailyai.com\/de\/2024\/06\/the-rise-of-open-source-ai-models-transparency-and-accountability-in-question\/","title":{"rendered":"Der Aufstieg der \"Open-Source\"-KI-Modelle: Transparenz und Verantwortlichkeit in Frage gestellt"},"content":{"rendered":"

Die \u00c4ra der generativen KI schreitet voran, und eine Vielzahl von Unternehmen hat sich dieser Entwicklung angeschlossen, w\u00e4hrend die Modelle selbst immer vielf\u00e4ltiger werden.\u00a0<\/b><\/p>\n

Inmitten dieses KI-Booms haben viele Unternehmen ihre Modelle als \"Open Source\" angepriesen, aber was bedeutet das in der Praxis wirklich?<\/span><\/p>\n

Das Konzept von Open Source hat seine Wurzeln in der Software-Entwicklungsgemeinschaft. Bei herk\u00f6mmlicher Open-Source-Software ist der Quellcode f\u00fcr jedermann frei zug\u00e4nglich und kann eingesehen, ver\u00e4ndert und weitergegeben werden.\u00a0<\/span><\/p>\n

Im Wesentlichen ist Open-Source ein kollaborativer Wissensaustausch, der durch Software-Innovationen vorangetrieben wird und zu Entwicklungen wie dem Linux-Betriebssystem, dem Firefox-Webbrowser und der Programmiersprache Python gef\u00fchrt hat.\u00a0<\/span><\/p>\n

Die Anwendung des Open-Source-Ethos auf die heutigen massiven KI-Modelle ist jedoch alles andere als einfach.\u00a0<\/span><\/p>\n

Diese Systeme werden h\u00e4ufig auf riesigen Datens\u00e4tzen mit Terabytes oder Petabytes an Daten trainiert, wobei komplexe neuronale Netzwerkarchitekturen mit Milliarden von Parametern zum Einsatz kommen. <\/span><\/p>\n

Die erforderlichen Computerressourcen kosten Millionen von Dollar, die Talente sind rar, und das geistige Eigentum ist oft gut gesch\u00fctzt.\u00a0<\/span><\/p>\n

Wir k\u00f6nnen dies bei OpenAI beobachten, das, wie der Name schon sagt, ein KI-Forschungslabor war, das sich weitgehend dem Ethos der offenen Forschung verschrieben hat.\u00a0<\/span><\/p>\n

Allerdings ist das Ethos schnell erodiert<\/a> als das Unternehmen das Geld roch und Investitionen anziehen musste, um seine Ziele zu erreichen. <\/span><\/p>\n

Warum? Weil Open-Source-Produkte nicht auf Gewinn ausgerichtet sind und KI teuer und wertvoll ist.\u00a0<\/span><\/p>\n

Mit der explosionsartigen Entwicklung der generativen KI ver\u00f6ffentlichen Unternehmen wie Mistral, Meta, BLOOM und xAI Open-Source-Modelle, um die Forschung voranzutreiben und gleichzeitig zu verhindern, dass Unternehmen wie Microsoft und Google zu viel Einfluss erlangen.<\/p>\n

Aber wie viele dieser Modelle sind wirklich quelloffen, und zwar nicht nur dem Namen nach?<\/p>\n

Kl\u00e4rung der Frage, wie offen Open-Source-Modelle wirklich sind<\/h2>\n

In einer k\u00fcrzlich erschienenen <\/span>Studie<\/span><\/a>Die Forscher Mark Dingemanse und Andreas Liesenfeld von der Radboud-Universit\u00e4t in den Niederlanden analysierten zahlreiche bekannte KI-Modelle, um zu untersuchen, wie offen sie sind. Sie untersuchten mehrere Kriterien, wie z. B. die Verf\u00fcgbarkeit von Quellcode, Trainingsdaten, Modellgewichten, Forschungsarbeiten und APIs.\u00a0<\/span><\/p>\n

So wurde beispielsweise festgestellt, dass das LLaMA-Modell von Meta und das Gemma-Modell von Google lediglich \"offen gewichtet\" sind, was bedeutet, dass das trainierte Modell \u00f6ffentlich zur Verwendung freigegeben wird, ohne dass vollst\u00e4ndige Transparenz in Bezug auf seinen Code, den Trainingsprozess, die Daten und die Feinabstimmungsmethoden besteht.\u00a0<\/span><\/p>\n

Am anderen Ende des Spektrums hoben die Forscher BLOOM hervor, ein gro\u00dfes mehrsprachiges Modell, das von einer Zusammenarbeit von mehr als 1.000 Forschern weltweit entwickelt wurde, als ein Beispiel f\u00fcr echte Open-Source-KI. Jedes Element des Modells ist f\u00fcr die \u00dcberpr\u00fcfung und weitere Forschung frei zug\u00e4nglich.<\/span><\/p>\n

In dem Papier wurden mehr als 30 Modelle (sowohl Text- als auch Bildmodelle) bewertet, die jedoch die enorme Vielfalt der Modelle zeigen, die den Anspruch erheben, Open-Source zu sein:<\/span><\/p>\n