Risultati pilota · interpretazione corretta 6 settembre 2026
Tre categorie di test. Uno studio pilota limitato.
Le stesse 20 apparecchiature sintetiche pulite, decodificate tre volte per corsia su un M1 Max MacBook Pro utilizzando Yaps 2.3.2129. Core ML Parakeet e Whisper Base sono configurazioni di modello all'interno di Yaps, non prodotti della concorrenza.
01 · Record aggregato
Riconoscimento con pulizia locale, misurati insieme.
Yaps pilota di simulazione con dispositivo sintetico. Valori inferiori di WER, tasso di cancellazione e latenza indicano meno errori o tempi di elaborazione più brevi all'interno di questa configurazione specifica; non sono classifiche di prodotto.
Yaps corsia di uscita
Ruolo
Esegue
Parole, con ripetizioni
Micro WER
Tasso di cancellazione
Elaborazione mediana
Elaborazione p95
Elaborazione massima
Core ML Parakeet + pulizia locale
Pulizia su
60
1,473
3.46%
0.41%
1,124 ms
2,807 ms
2,958 ms
Core ML Parakeet, pulizia disattivata
Pulisci disattivato
60
1,473
3.67%
0.20%
250 ms
722 ms
1,863 ms
Whisper Base, pulizia di
Pulisci disattivato
60
1,473
6.52%
0.41%
844 ms
1,669 ms
2,189 ms
Il tempo di elaborazione include il riconoscimento, la finalizzazione della pipeline e la pulizia locale quando abilitata. Esclude la costruzione runtime iniziale, il caricamento delle apparecchiature, la registrazione dal vivo, l'invio di scorciatoie e l'inserimento del cursore. Tutte le corsie assegnano un punteggio all'output finale del valutatore; Le corsie di pulizia possono ancora applicare modifiche al vocabolario e alla formattazione.
La latenza utilizza 60 campioni di decodifica equamente ponderati per corsia e quantili lineari R-7. Le 20 apparecchiature contengono 491 posizioni di parole di riferimento per passaggio, contate tre volte nel denominatore di 1.473 parole. Le ripetizioni non sono espressioni indipendenti. Gli errori della soglia di qualità rimangono inclusi: 3 con pulizia Core ML attivata, 3 con pulizia Core ML disattivata e 6 con Whisper.
"Micro" significa che i conteggi delle operazioni di modifica e le parole di riferimento sono stati sommati prima di calcolare ciascuna tariffa.Non è la media macro delle percentuali per clip.
02 · Lettura limitata
Cosa possono supportare queste tre file.
Pulisci disattivato
Configurazioni di pulizia abbinate
Whisper Base con la pulizia disattivata ha avuto 2,85 punti percentuali in più WER, un tasso di eliminazione di 0,20 punti più alto, una mediana più alta di 595 ms e un p95 più alto di 947 ms rispetto a Core ML Parakeet con la pulizia disattivata in questi progetti pilota abbinati corre.
Corsia abilitata alla pulizia
Riconoscimento e pulizia insieme
La corsia abilitata alla pulizia Core ML include la pulizia semantica locale. La sua mediana di 1.124 ms e la p95 di 2.807 ms descrivono insieme il riconoscimento e la finalizzazione, prima dell'inserimento in un'altra applicazione.
Ciò che ha funzionato
Pipeline di pubblicazione
Il sanificatore ha mantenuto le conte e la latenza escludendo trascrizioni, riferimenti, suggerimenti e contesto dell'applicazione. L'integrità dei file pubblici è registrata con digest SHA-256.
Cosa rimane
Prove di riferimento
Sono ancora necessari il parlato umano, molteplici accenti e lingue, l'acquisizione dal microfono dal vivo, l'ordine termico controllato, l'osservazione della rete, più dispositivi e sistemi di terze parti.
03 · Esclusioni esplicite
Cosa questo pilota non mostra.
Prestazioni comparative rispetto a qualsiasi altro prodotto.
Prestazioni sul discorso umano, accenti o discorso multilingue.
Microfono live, riduzione del rumore, porta-silenzio, prima parola o comportamento di flush finale.
Prestazioni freddo/caldo con un protocollo termico controllato.
Comportamento offline o sulla privacy stabilito tramite osservazione della rete.
Un'affermazione generale secondo cui una configurazione grezza o pulita è migliore.
Il corpus, la matrice dei dispositivi, l'ordine e la procedura termica non sono stati preregistrati. Queste osservazioni descrivono queste esecuzioni sequenziali, su questo corpus, dispositivo, versione del software e data.