Xiaomi enthüllt Trainingsdetails zu MiMo-V2-Pro: 1T Modellparameter, Tausende eingesetzter GPUs

Gate-News-Meldung, 24. April — Die Leiterin des Teams für große Sprachmodelle bei Xiaomi, Luo Fuli, gab in einem ausführlichen Interview bekannt, dass das Modell MiMo-V2-Pro insgesamt 1 Billion Parameter besitzt und für das Training Tausende von GPUs erforderlich waren. Sie merkte an, dass die 1T-Skala die minimale Schwelle darstellt, um eine Leistungsfähigkeit zu erreichen, die an das Niveau von Claude Opus 4.6 heranreicht, und um ein wettbewerbsfähiges Eintrittsticket für die nächste Phase von KI-Agenten zu sichern.

Technisch gesehen nutzt die Pro-Version einen extremen Sparse-Attention-Mechanismus mit einem Verhältnis von 7:1 zwischen globaler Attention und Sliding-Window-Attention, um die Inferenzkosten für die Verarbeitung langer Kontexte zu steuern. Das Modell behält außerdem die MTP (Multi-Token Prediction)-Architektur bei, um überschüssige Rechenleistung für schnellere Inferenz zu nutzen.

Auf der Management-Seite beschäftigt das 100-köpfige MiMo-Team nur 30–40 Personen, die direkt an den Kern-Iterationen beteiligt sind. Das Team arbeitet ohne formale Hierarchien oder explizite Aufteilungen in Untergruppen und ohne festgelegte Liefertermine. Wenn es auf instabile numerische Probleme wie Peaks im Trainingsverlust stößt, priorisiert das Team das Anhalten des Trainings zur Untersuchung, selbst wenn dies bedeutet, den Betrieb für eine oder zwei Wochen einzustellen und dabei Millionen von Dollar an Compute-Kosten zu verursachen.

Disclaimer: The information on this page may come from third parties and does not represent the views or opinions of Gate. The content displayed on this page is for reference only and does not constitute any financial, investment, or legal advice. Gate does not guarantee the accuracy or completeness of the information and shall not be liable for any losses arising from the use of this information. Virtual asset investments carry high risks and are subject to significant price volatility. You may lose all of your invested principal. Please fully understand the relevant risks and make prudent decisions based on your own financial situation and risk tolerance. For details, please refer to Disclaimer.

Verwandte Artikel

Anthropic sucht Finanzierung bei einer Bewertung von über 900 Mrd. US-Dollar und könnte möglicherweise OpenAI übertreffen

Laut Jin Ten plant Anthropic eine neue Finanzierungsrunde am 30. April, die das Unternehmen mit über $900 Milliarden bewerten würde. Dies könnte das Unternehmen zum wertvollsten KI-Startup der Welt machen und OpenAI übertreffen. Das Management des Unternehmens prüft mehrere Investorenangebote, die dessen aktuelle Bewertung mehr als

GateNews1M her

Anthropic erwägt eine neue Finanzierung, bewertet das Unternehmen höher als OpenAI und wird zur wertvollsten KI-Neugründung

Der KI-Entwickler Anthropic befindet sich in einer ersten Prüfungsphase für eine neue Finanzierungsrunde, und die Marktbewertung könnte 900 Milliarden US-Dollar überschreiten. Wenn diese Runde erfolgreich abgeschlossen wird, wird das Unternehmen seinen Wettbewerber OpenAI überholen und zum weltweit wertvollsten AI-Startup mit der höchsten Bewertung werden. Mit der schnellen Verbreitung von generativen KI-Technologien sucht Anthropic aktiv nach Mitteln, um die Infrastruktur auszubauen, und es heißt, dass die erste öffentliche Platzierung (IPO) frühestens in diesem Oktober stattfinden soll. Technologieriesen wie Google und Amazon haben zuvor bereits enorme Summen investiert, was zeigt, dass die Kapitalmärkte dem technologischen Potenzial dieser Unternehmen eine hohe Bedeutung beimessen. Analyse zur Finanzierungsgröße und zum Bewertungswachstum von Anthropic Laut einem Bericht von Bloomberg unter Berufung auf informierte Personen befindet sich Anthropic in einer ersten Prüfungsphase für eine neue Finanzierungsrunde, wobei die Unternehmensbewertung voraussichtlich 900 Milliarden US-Dollar überschreiten wird. Mit diesem Jahr

ChainNewsAbmedia13M her

Anthropic prüft Investorangebote, da die Bewertung im Sekundärmarkt $1 Trillion erreicht

Laut Berichten prüft Anthropic Angebote von Investoren, während die Bewertung des Unternehmens im Sekundärmarkt sich $1 trillion nähert. Die Gespräche befinden sich weiterhin in einem frühen Stadium, da das Unternehmen zusätzliche Infrastruktur sucht, um die steigende Nachfrage nach seinen Produkten zu unterstützen. Es lohnt sich zu beachten, dass die jüngste Finanzierungsrunde von Anthropic im Primärmarkt das Unternehmen mit billion bewertete, während die höheren Bewertungsangaben die Handelsaktivitäten im Sekundärmarkt widerspiegeln. It's worth noting that Anthropic's

GateNews46M her

Amazon-Geschäftsbericht: KI steigert das Wachstum von AWS am schnellsten in drei Jahren, Free Cashflow unter Druck

Amazonerträge im ersten Quartal 181,5 Milliarden US-Dollar, +17% im Jahresvergleich; der Quartalsumsatz von AWS lag bei 37,6 Milliarden US-Dollar, +28% im Jahresvergleich, ein neues Hoch in drei Jahren, begünstigt durch Investitionen in KI-Startups. In den vergangenen 12 Monaten beliefen sich die Investitionen in Ausrüstung auf 151,0 Milliarden US-Dollar, wodurch sich der freie Cashflow auf 1,2 Milliarden US-Dollar verringerte. Der E-Commerce und die Werbung entwickelten sich solide; gleichzeitig wurden einige Fresh- und Go-Filialen geschlossen, um sich auf digitale und Cloud-Investitionen zu konzentrieren. Der Markt bleibt hinsichtlich der kurzfristigen Liquidität skeptisch, doch die durch KI getriebene Erholung von AWS wird anerkannt.

ChainNewsAbmedia54M her

Microsoft(Microsoft) Finanzanalyse: Herausforderungen bei der Monetarisierung von KI und beim Ausbau der Cloud

Microsofts neuester Quartalsbericht zeigt, dass das Cloud-Wachstum leicht über den Erwartungen liegt, aber dass die Monetarisierung von KI die Markterwartungen noch nicht vollständig erfüllt. Die Zahl der zahlenden Copilot-Nutzer steigt auf 20 Millionen, die annualisierte Umsatz-Run-Rate liegt bei über 37 Milliarden US-Dollar, und obwohl die Umsätze von Office hoch sind, erfüllt das Wachstum nicht die Erwartungen einiger Investoren. Die Investitionsausgaben belaufen sich auf 31,9 Milliarden US-Dollar und wachsen um 49 %, liegen jedoch unter den von Analysten geschätzten Bewertungen; Verzögerungen beim Ausbau der Infrastruktur bremsen das Wachstum. Mit der beschleunigten Konkurrenz durch Amazon und Google wird der Aktienkurs beeinflusst, und Anleger sind hinsichtlich des weiteren Wachstums von dessen Marktanteil vorsichtig.

ChainNewsAbmedia1Std her

Meta erhöht die Ausgaben für KI-Kapitalinvestitionen, nachdem nach der Veröffentlichung des Geschäftsberichts die Aktie stark eingebrochen ist

Meta veröffentlicht den Quartalsbericht: Der Umsatz beträgt 56,3 Milliarden US-Dollar, ein Anstieg von 33% im Vergleich zum Vorjahr. Das EPS liegt bei 7,31 und damit über den Erwartungen, jedoch gehen die täglich aktiven Nutzer leicht zurück auf 3,56 Milliarden. Der Ausblick für die gesamten Kapitalausgaben wurde auf 1250–1450 Milliarden US-Dollar angehoben, da die Kosten für Rechenzentren und Hardware gestiegen sind; nach Börsenschluss fällt der Aktienkurs um etwa 7%. Gleichzeitig wurden Stellen abgebaut und das neue KI-Modell Muse Spark vorgestellt, um die Effizienz zu steigern; angesichts strenger regulatorischer Vorgaben und Prozessrisiken ist die langfristige Profitabilität mit Unsicherheit behaftet.

ChainNewsAbmedia1Std her
Kommentieren
0/400
Keine Kommentare