EleutherAI
Ein gemeinnütziges Forschungslabor, das offen lizenzierte KI-Modelle und Trainingsdatensätze erstellt und größtenteils von Freiwilligen betrieben wird.
EleutherAI startete im Jahr 2020 als eine Gruppe von Freiwilligen auf Discord, die die großen Sprachmodelle, die Unternehmen privat hielten, nachbilden wollten, und entwickelte sich zu einem eingetragenen gemeinnützigen Forschungsinstitut. Seine frühen Versionen, GPT-Neo und GPT-J, gehörten zu den ersten offenen Alternativen zu GPT-3, und sein Pile-Datensatz wurde zu einem Standardbestandteil im Training offener Modelle.
Die nützlichere Arbeit ist heutzutage oft die unscheinbare Art: das Aufräumen des Rohmaterials, auf dem alle anderen aufbauen. Common Pile wurde 2025 veröffentlicht und ist das größte Schulungskorpus, das vollständig aus offen lizenzierten Texten zusammengestellt wurde. Im Jahr 2026 arbeitete das Labor mit Hugging Face an FineBooks, das testet, ob moderne Texterkennungsmodelle sauberere Versionen der Millionen gescannter gemeinfreier Bücher erzeugen können, auf die offene Datensätze angewiesen sind.