De Whisper-Thunder Reveal: Runway Gen-4.5 is nu het leidende Text to Video-model in de Artificial Analysis Video Leaderboards, en heeft Veo 3, Kling 2.5 Turbo en Sora 2 Pro overtroffen! Runway Gen-4.5 is de nieuwste release van @runwayml, die de Runway Gen-4 opvolgt die in maart werd uitgebracht. Terwijl Gen-4 alleen Image to Video ondersteunde, introduceert Runway Gen-4.5 Text to Video-generatie. We hebben de Image to Video-generatiecapaciteiten van Runway Gen-4.5 nog niet geëvalueerd. Runway Gen-4.5 wordt geleidelijk uitgerold naar gebruikers van de Runway-applicatie, met een bredere beschikbaarheid die in de komende dagen wordt verwacht. Zie hieronder voor vergelijkingen tussen Runway Gen-4.5 en andere toonaangevende modellen in onze Artificial Analysis Video Arena 🧵

Artificial Analysis organiseert vandaag een workshop in samenwerking met NVIDIA op NeurIPS! We praten over onze nieuwe Openness Index en wat het betekent voor onderzoekers en ontwikkelaars. De sessie is om 13:00 uur in het Omni Hotel. Voel je vrij om langs te komen als je op de conferentie bent!

Mistral heeft zojuist hun nieuwe grote open gewichtenmodel gelanceerd, Mistral Large 3 (675B totaal, 41B actief), samen met een set van drie Ministral-modellen (3B, 8B, 14B) Mistral heeft Instruct (niet-redenerende) varianten van alle vier de modellen uitgebracht, evenals redeneringsvarianten van de drie Ministral-modellen. Alle modellen ondersteunen multimodale invoer en zijn vandaag beschikbaar met een Apache 2.0-licentie op @huggingface. We hebben Mistral Large 3 en de Instruct-varianten van de drie Ministral-modellen vóór de lancering geëvalueerd. Mistral’s hoogst scorende model in de Artificial Analysis Intelligence Index blijft het propriëtaire Magistral Medium 1.2, dat een paar maanden geleden in september is gelanceerd - dit komt doordat redenering modellen een aanzienlijk voordeel geeft in veel evaluaties die we gebruiken. Mistral onthult dat een redeneringsversie van Mistral Large 3 al in training is en we kijken ernaar uit om deze binnenkort te evalueren! Belangrijke hoogtepunten: ➤ Grote en kleine modellen: met 675B totaal en 41B actief, is Mistral Large 3 Mistral’s eerste open gewichten mengsel-van-experts model sinds Mixtral 8x7B en 8x22B van eind 2023 tot begin 2024. De Ministral-releases zijn dicht bij elkaar met 3B, 8B en 14B parameter varianten. ➤ Significante toename in intelligentie maar niet onder de leidende modellen (inclusief propriëtaire): Mistral Large 3 vertegenwoordigt een significante upgrade vergeleken met de vorige Mistral Large 2 met een +11 punt stijging op de Intelligence Index tot 38. Echter, Large 3 blijft achter bij de leidende propriëtaire redenerende & niet-redenerende modellen. ➤ Veelzijdige kleine modellen: de Ministral-modellen worden uitgebracht met Base, Instruct en Redenering variant gewichten - we hebben alleen de Instruct-varianten getest vóór de release, die Index-scores van 31 (14B), 28 (8B) en 22 (3B) behaalden. Dit plaatst Ministral 14B voor de vorige Mistral Small 3.2 met 40% minder parameters. We werken aan het evalueren van de redeneringsvarianten en zullen hun intelligentieresultaten binnenkort delen. ➤ Multi-modale mogelijkheden: alle modellen in de release ondersteunen tekst- en afbeeldinginvoer - dit is een significante differentiator voor Mistral Large 3, aangezien weinige open gewichtenmodellen in zijn grootteklasse ondersteuning hebben voor afbeeldinginvoer. De contextlengte neemt ook toe tot 256k, waardoor grotere invoertaken mogelijk zijn. Deze nieuwe modellen van Mistral zijn geen stapverandering ten opzichte van de concurrentie met open gewichten, maar ze vertegenwoordigen een sterke prestatiebasis met visuele mogelijkheden. De Ministral 8B en 14B varianten bieden bijzonder aantrekkelijke prestaties voor hun grootte, en we zijn enthousiast om te zien hoe de gemeenschap deze modellen gebruikt en verder ontwikkelt. Bij de lancering zijn de nieuwe modellen beschikbaar voor serverless inferentie op @MistralAI en een reeks andere aanbieders, waaronder @awscloud Bedrock, @Azure AI Foundry, @IBMwatsonx, @FireworksAI_HQ, @togethercompute, en @modal.