de.wedoany.com-Bericht: Das Shanghai Artificial Intelligence Laboratory (Shanghai AI Lab) hat kürzlich die Genehmigung und Einführung von sechs nationalen Standards erhalten, die es federführend beantragt hat. Diese decken zukunftsweisende Bereiche der künstlichen Intelligenz ab, darunter große Modelle, Scientific Intelligence, KI-Sicherheit und verkörperte Intelligenz. Gleichzeitig schreitet die Arbeit an mehreren wichtigen KI-Standards, die das Labor leitet, stetig voran, einschließlich des ersten IEEE-Internationalstandards im Bereich Scientific Intelligence. In seiner Funktion als Leiter der WG9-Gruppe baut das Labor systematisch eine umfassende KI-Sicherheitsmanagementnormenkette auf, um die qualitativ hochwertige Entwicklung der chinesischen KI-Industrie zu unterstützen.
Basierend auf einer langfristigen, abgestimmten Zusammenarbeit zwischen Industrie, Wissenschaft und Forschung hat das Labor eine KI-Bewertungsstandardmatrix aufgebaut, die alle Bereiche abdeckt, ein mehrstufiges hierarchisches System umfasst und den gesamten Geschäftsprozess durchgängig integriert. Durch die Entwicklung eines umfassenden Bewertungssystems, das subjektive und objektive Aspekte vereint, erforscht das Labor Bewertungsparadigmen, die sowohl technische Leistung als auch praktische Anwendung berücksichtigen, um die Initiative „Künstliche Intelligenz+" zu unterstützen.
Die sechs genehmigten nationalen Standards sind: „Künstliche Intelligenz – Spezifikationen für den Aufbau einer Bewertungsplattform für große Modelle", „Künstliche Intelligenz – Technische Spezifikationen für die Aufbereitung wissenschaftlicher Daten", „Künstliche Intelligenz – Technische Spezifikationen für die Bündelung und Klassifizierung wissenschaftlicher Datenhinweise", „Cybersicherheitstechnologie – Bewertungsmethode für den Reifegrad der KI-Sicherheitsfähigkeit", „Künstliche Intelligenz – Bewertungsspezifikationen für Weltmodelle" und „Künstliche Intelligenz – Spezifikationen für die Datenqualität verkörperter Intelligenz – Teil 2: Generierte Daten". Bis heute hat das Shanghai AI Lab gemeinsam mit Forschungseinrichtungen, Hochschulen und der Industrie eine KI-Bewertungsstandardmatrix aufgebaut, die alle Bereiche abdeckt, ein mehrstufiges hierarchisches System umfasst und den gesamten Geschäftsprozess durchgängig integriert. In Bezug auf die Abdeckung der Bereiche umfasst die horizontale Anordnung vier Kernbereiche: große Modelle, Scientific Intelligence, KI-Sicherheit und verkörperte Intelligenz, mit Unterteilungen in Szenarien wie allgemeine große Modelle, multimodale Modelle, Weltmodelle, Agenten und humanoide Robotersimulationen, die Text, Audio/Video, verkörperte Interaktion und reale Testszenarien für KI-Produkte in verschiedenen Branchen abdecken. In Bezug auf das hierarchische System ist vertikal eine vierstufige koordinierte Standardarchitektur aufgebaut: Nationale Standards legen die Branchenuntergrenze fest, Branchenstandards konkretisieren subjektive Bewertungsanforderungen, Gruppenstandards setzen szenarienbasierte Lösungen um, und parallel werden IEEE-Internationalstandards entwickelt, um ein System aus „Basisnormen – spezifischen Indikatoren – Umsetzungsdetails – internationalen Regeln" zu bilden. In Bezug auf den gesamten Geschäftsprozess werden die Standards einheitlich nach dem geschlossenen Kreislauf „Indikatorendefinition – Testmethode – Datensatzspezifikation – Plattformaufbau – Sicherheitsabnahme" erstellt, der Schlüsselphasen wie Modellentwicklung und -iteration, Werksabnahmetests, Bewertung durch Dritte, Branchenimplementierung und Betrieb und Wartung der Bewertungsplattform abdeckt.
Eine Innovation in dieser Standardmatrix ist der integrierte subjektiv-objektive Bewertungsmechanismus. Dieser Mechanismus basiert auf einer objektiven quantitativen Bewertung, um eine Abdeckung aller Indikatoren, eine Umsetzung über den gesamten Prozess und eine gegenseitige Anerkennung der Ergebnisse zwischen verschiedenen Institutionen zu erreichen. Gleichzeitig werden subjektive Wahrnehmungsindikatoren wie Interaktionserfahrung und Szenarioanpassung standardisiert, um vereinzelte menschliche Eindrücke zu quantifizieren und zu archivieren. Die beiden Arten von Bewertungsdaten kalibrieren sich gegenseitig und heben die KI-Bewertung von einer reinen Leistungsbewertung auf ein umfassendes Bewertungssystem, das technische Fähigkeiten, Benutzererfahrung und industriellen Wert gleichermaßen berücksichtigt.
Die vom Shanghai AI Lab aufgebaute KI-Bewertungsstandardmatrix zielt darauf ab, Barrieren in der Branchenbewertung zu durchbrechen, die Benchmarks für die heimische Spitzen-KI zu vereinheitlichen, die gegenseitige Anerkennung und den Austausch von Bewertungsergebnissen zwischen verschiedenen Institutionen zu ermöglichen und die Kosten für wiederholte Tests bei Unternehmen zu senken. Die Matrix wird auch die Forschungs- und Entwicklungsiteration von Spitzentechnologien wie großen Modellen, verkörperter Intelligenz und Scientific Intelligence standardisieren, die Leistung und Sicherheitskonformität von KI-Produkten verbessern und die internationale Standardisierungsstrategie Chinas im KI-Bereich unterstützen.
Für die Zukunft wird das Shanghai AI Lab weiterhin im Bereich der KI-Bewertungsstandardisierung arbeiten, die Standardmatrix iterativ aktualisieren, Bewertungsdetails für Nischenszenarien ergänzen und den Implementierungsprozess der integrierten subjektiv-objektiven Bewertung optimieren. Das Labor wird die Zusammenarbeit zwischen Industrie, Wissenschaft, Forschung und Anwendung vertiefen, eine offene und gemeinsame Standardverifizierungsplattform aufbauen, gemeinsam mit Forschungseinrichtungen, Hochschulen und Industrieunternehmen an der Standardentwicklung und experimentellen Verifizierung arbeiten, die Standardimplementierung vorantreiben und die skalierte Verbreitung lokaler Standards beschleunigen.
