Inkling: Unser Modell mit offenen Gewichten

Inkling: Unser Modell mit offenen Gewichten (via) Mira Muratis Thinking Machines Lab hat gerade sein erstes Modell mit offenen Gewichten veröffentlicht. Inkling ist „ein Mixture-of-Experts-Transformator mit 975B Gesamtparametern, 41B aktiv“ – ein Apache-2.0-lizenziertes multimodales Modell, das auf 45 Billionen Text-, Bild-, Audio- und Video-Token trainiert wird.

Sie versprechen auch Inkling-Small, ein 276B-Modell (12B aktiv), aber das wird noch getestet und die Gewichte werden veröffentlicht, „sobald die Arbeit abgeschlossen ist“.

Die Modellkarte ist viel kürzer, als ich es von US-amerikanischen KI-Laboren gewohnt bin. Es enthält Links zu einer noch kürzeren Trainingsdatendokumentation, in der fast nichts Interessantes enthalten ist – am besten lässt es sich in diesen beiden Absätzen zusammenfassen:

Die Datensätze, die Thinking Machines Lab zur Entwicklung seiner KI-Dienste verwendet, umfassen Inhalte, die gemeinfrei sind, sowie Inhalte, die möglicherweise dem Schutz geistigen Eigentums unterliegen.

Die Dienste von Thinking Machines Lab wurden unter Verwendung öffentlich zugänglicher Inhalte entwickelt, die aus dem offenen Internet und öffentlich zugänglichen Datenrepositorys stammen. Bestimmte Datensätze wurden auch von Dritten bezogen.

Nach eigener Aussage von Thinking Machines handelt es sich hierbei nicht um ein Grenzmodell. Stattdessen ist es als starkes Basismodell für die Feinabstimmung mithilfe der eigenen Tinker-Trainingsplattform gedacht:

Inkling ist nicht das stärkste Gesamtmodell, das heute erhältlich ist, weder offen noch geschlossen. Stattdessen macht es eine Kombination von Qualitäten zu einer guten offenen Basis für individuelle Anpassungen: multimodale Fähigkeiten, effizientes Denken und die Verfügbarkeit von Tinker für die Feinabstimmung.

An dieser Veröffentlichung gibt es viel zu mögen. Es ist Apache-2.0-lizenziert und scheint mit den Open-Weight-Modellen aus China konkurrenzfähig zu sein. Es ist gut zu sehen, dass das US-amerikanische Open-Weight-Ökosystem neben NVIDIA Nemotron und Gemma 4 einen neuen vielversprechenden Konkurrenten hat.

Hier ist der Versuch eines SVG-Pelikans auf einem Fahrrad, den ich damit erstellt habe curl Befehl gegen die Thinking Machines API:

curl "https://tinker.thinkingmachines.dev/services/tinker-prod/oai/api/v1/chat/completions" \
  -H "Authorization: Bearer $TINKER_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{
    "model": "thinkingmachines/Inkling",
    "messages": (
      {"role": "user", "content": "Generate an SVG of a pelican riding a bicycle"}
    ),
    "stream": false
  }'

Vollständige Antwort hier.

Da es sich um ein multimodales Modell handelt, habe ich es sein eigenes Bild beschreiben lassen (nachdem ich es in JPEG gerendert habe), indem ich diesen JSON gesendet habe:

{
  "model": "thinkingmachines/Inkling",
  "messages": ({
    "role": "user",
    "content": (
      {"type": "image_url", "image_url": {"url": "data:image/jpeg;base64,$BASE_64_JPEG"}},
      {"type": "text", "text": "Describe this image in detail"},
    ),
  }),
  "stream": false
}

Hier ist die vollständige Antwort. Es dachte, es hätte einen „Storch oder eine Möwe“ gezeichnet:

Dies ist eine fröhliche, flache Vektor-Cartoon-Illustration mit einem weißen Vogel, der mit dem Fahrrad durch eine grüne Landschaft fährt.

Der Vogel: Die zentrale Figur ist ein stilisierter weißer Vogel – ähnlich einem Storch oder einer Möwe – mit einem rundlichen, rundlichen Körper. Es hat einen langen, hervorstehenden orangefarbenen Schnabel, der leicht geöffnet ist und eine schwarze Linie für den Mund freigibt. Sein Auge ist klein und schwarz mit einem winzigen weißen Glanz. Der Vogel hat schwarze Flügel- und Schwanzfedern mit weißen Rändern und dünne orangefarbene Beine, die in schwarzen Füßen enden, die auf den orangefarbenen Pedalen des Fahrrads ruhen.

Das Fahrrad: Das Fahrrad hat einen einfachen schwarzen Rahmen mit zwei großen Rädern mit schwarzen Reifen, grauen Innenfelgen und schwarzen, kreuzförmig angeordneten Speichen. Der Lenker ist schwarz und an einer schwarzen Kurbel sind leuchtend orangefarbene Pedale befestigt. Hinter dem Körper des Vogels ist ein weißer Sitz sichtbar.

Die Einstellung: Die Szene liegt vor einem klaren, hellblauen Himmel. Es gibt zwei flauschige weiße Wolken – eine auf der linken Seite und eine kleinere in der Nähe des Vogelkopfes auf der rechten Seite. In der oberen rechten Ecke scheint eine helle, durchgehend gelbe Sonne. Unten gibt es sanfte grüne Hügel mit einer glatten, geschwungenen Oberkante, auf der das Fahrrad ruht.

Der Gesamtstil ist verspielt, schlicht und farbenfroh, mit klaren Linien und einer hellen, sonnigen Atmosphäre.