Apertus v1.5 70B

Über das Modell

Das transparenteste Modell dieses Katalogs, und zwar mit deutlichem Abstand. Die Swiss AI Initiative von ETH Zürich und EPFL veröffentlicht nicht nur die Gewichte unter Apache 2.0, sondern auch die Trainingsdaten, das Trainingsrezept und die Zwischenstände. Bei jedem anderen offenen Modell dieses Katalogs endet die Offenheit bei der Datei mit den Zahlen – hier nicht. Wer wissen will, warum das ein Unterschied ist, findet die Begründung im Lexikon unter offene Gewichte und Open Source bei KI.

Zwei Eigenschaften gehen noch darüber hinaus. Erstens wurde beim Training der Widerspruch von Rechteinhabern berücksichtigt, ausdrücklich auch rückwirkend. Zweitens empfiehlt das Projekt, die Gewichte halbjährlich neu zu laden, weil spätere Widersprüche in neuere Fassungen einfließen. Das ist der bislang ernsthafteste Versuch, ein Sprachmodell an einer datenschutzrechtlichen Anforderung auszurichten statt umgekehrt.

72 Milliarden Parameter, 262.144 Token Kontext, Bild und Ton als Eingabe, Text als Ausgabe.

Eine Einschränkung, die für dieses Portal zählt: Die Schweiz ist nicht Mitglied der Europäischen Union. Für die Herkunftsfrage ist Apertus damit ein europäisches, aber kein EU-Modell – wer in einer Vergabeunterlage nach EU-Herkunft fragt, muss das trennen. Am Datenschutz ändert es nichts, solange die Gewichte auf unserer Hardware liegen: Für die Verarbeitung zählt, wo gerechnet wird, nicht woher die Datei stammt.

Stärken

Kurz gesagt

Offene Gewichte, offene Trainingsdaten, offenes Trainingsrezept – Apache 2.0