Hugging Face stellt Model Integration Contracts für Transformers vor

Hugging Face stellt mit transformers-mic einen vorgeschlagenen Standard für Tests von Modellen in Transformers vor. Kleine Versionen echter Modelle laufen auf CPU und vergleichen Ergebnisse mit zuvor geprüften Werten. Bei einem Rückblick auf frühere Programmstände zeigte ein solcher Test den UMT5-Fehler bei jedem betroffenen Stand an. In der aktuellen automatischen Prüfung werden Fehler gemeldet, sie blockieren Änderungen aber noch nicht.