Benchmark-Leistung
Im standardisierten Bewertungssystem SimpleQA erreicht Jan-nano eine Genauigkeit von 87,3% in der chinesischen Domäne und übertrifft damit Modelle der gleichen Parameterklasse um 15 Prozentpunkte. Seine speziell verstärkte Fähigkeit zur Erkennung von Entitäten erreicht einen F1-Wert von 91,2%, wenn es um komplexe Fragen in spezialisierten Bereichen wie Medizin, Recht usw. geht. Die vom Modell verwendete nicht-denkende Chat-Vorlage reduziert effektiv die redundante Ausgabe von 17% und macht die Antworten direkter und effektiver.
Praktische Anwendungstests zeigen, dass Jan-nano bei fachlichen Fragen wie "Erläuterung des Verhältnisses zwischen der Anwendung von Artikel 52 des Vertragsgesetzes und Artikel 153 des Bürgerlichen Gesetzbuches" automatisch auf die Datenbank mit Gesetzestexten zurückgreifen und detaillierte Analysen erstellen kann, die gerichtliche Auslegungen und typische Fälle einschließen, und zwar mit einer Genauigkeit, die der eines praktizierenden Anwalts entspricht (82%). Dies macht Jan-nano zu einem leistungsstarken Assistenten in Berufsfeldern wie der Rechtstechnik und der medizinischen Beratung.
Diese Antwort stammt aus dem ArtikelJan-nano: ein leichtes und effizientes Modell für die TexterstellungDie
