Rezultati pilota · tumačenje ispravljeno 6. rujna 2026.
Tri kategorije testova. Jedna ograničena pilot-studija.
Isti 20 čistih sintetičkih uređaja, dekodirano tri puta po stazi na jednom M1 Max MacBook Pro koristeći Yaps 2.3.2129. Core ML Parakeet i Whisper Base su konfiguracije modela unutar Yaps, a ne proizvodi konkurenata.
01 · Agregirani zapis
Prepoznavanje s lokalnim čišćenjem, mjereno zajedno.
Yaps pilotska sintetska reprodukcija. Niže vrijednosti WER, stope brisanja i kašnjenja označavaju manje pogrešaka ili kraće vrijeme obrade unutar ovog točno definiranog izvođenja; oni nisu rangiranje proizvoda.
Yaps izlazna traka
Uloga
Pokretanja
Riječi, s ponavljanjima
Mikro WER
Stopa brisanja
Srednja obrada
p95 obrada
Maksimalna obrada
Core ML Parakeet + lokalno čišćenje
Čišćenje na
60
1,473
3.46%
0.41%
1,124 ms
2,807 ms
2,958 ms
Core ML Parakeet, čišćenje isključeno
Čišćenje isključeno
60
1,473
3.67%
0.20%
250 ms
722 ms
1,863 ms
Whisper Base, čišćenje isključeno
Čišćenje isključeno
60
1,473
6.52%
0.41%
844 ms
1,669 ms
2,189 ms
Vrijeme obrade uključuje prepoznavanje, finalizaciju cjevovoda i lokalno čišćenje kada je omogućeno. Isključuje početnu konstrukciju vremena izvođenja, učitavanje uređaja, snimanje uživo, slanje prečaca i umetanje kursora. Sve staze bodovaju konačni rezultat evaluatora; trake za čišćenje i dalje mogu primijeniti promjene vokabulara i oblikovanja.
Latencija koristi 60 jednako ponderiranih uzoraka dekodiranja po stazi i R-7 linearne kvantile. 20 utakmica sadrži 491 poziciju referentne riječi po prolazu, računajući tri puta u nazivniku od 1473 riječi. Ponavljanja nisu nezavisni iskazi. Greške praga kvalitete ostaju uključene: 3 s uključenim čišćenjem Core ML, 3 isključenim čišćenjem Core ML i 6 s isključenim čišćenjem Whisper.
„Mikro“ znači da su brojevi uređivačkih operacija i referentne riječi zbrojeni prije izračuna svake stope. To nije makro prosjek postotaka po isječcima.
02 · Ograničeno čitanje
Što ove tri vrste mogu podržati.
Čišćenje isključeno
Podudarne konfiguracije čišćenja
Whisper Base s isključenim čišćenjem imao je 2,85 postotnih bodova više WER, 0,20 bodova veću stopu brisanja, medijan veći za 595 ms i p95 veći za 947 ms od Core ML Parakeet s isključenim čišćenjem u ovim uspoređenim pilot pokusima.
Traka s omogućenim čišćenjem
Prepoznavanje i čišćenje zajedno
Traka s omogućenim Core ML čišćenjem uključuje lokalno semantičko čišćenje. Njen medijan od 1.124 ms i 2.807 ms p95 opisuje prepoznavanje i finalizaciju zajedno, prije umetanja u drugu aplikaciju.
Što je funkcioniralo
Cjevovod objavljivanja
Sanitizator je zadržao brojeve i kašnjenje dok je isključivao transkripte, reference, upite i kontekst aplikacije. Javna cjelovitost datoteke bilježi se pomoću SHA-256 sažetaka.
Što ostaje
Dokazi iz benchmarka
Ljudski govor, više naglasaka i jezika, prijenos uživo s mikrofona, kontrolirani termalni red, nadzor mreže, više uređaja i sustava trećih strana i dalje su potrebni.
03 · Izričita isključenja
Što ovaj pilot ne pokazuje.
Usporedna učinkovitost u odnosu na bilo koji drugi proizvod.
Izvedba na ljudskom govoru, naglascima ili višejezičnom govoru.
Živi mikrofon, uklanjanje šuma, vrata tišine, prvo-riječ ili ponašanje završetka.
Performanse na hladno-u-odnosu-na-toplo prema kontroliranom termalnom protokolu.
Offline ili privatno ponašanje utvrđeno promatranjem mreže.
Opći tvrdnja da je jedna sirova ili očišćena konfiguracija bolja.
Korpus, matrica uređaja, redoslijed i termalni postupak nisu prethodno registrirani. Ova opažanja opisuju ove sekvencijalne izvođenja, na ovom korpusu, uređaju, verziji softvera i datumu.