Pilotresultat · tolkning korrigerad 6 september 2026
Tre testkategorier. En begränsad pilotstudie.
The same 20 clean synthetic fixtures, decoded three times per lane on one M1 Max MacBook Pro using Yaps 2.3.2129. Core ML Parakeet and Whisper Base are model configurations inside Yaps, not competitor products.
01 · Sammanlagd post
Igenkänning med lokal rensning, mätt tillsammans.
Yaps syntetiska testuppspelningspilot. Lägre WER, raderingsfrekvens och latensvärden indikerar färre fel eller kortare behandlingstid inom denna exakta körinställning; de är inte produktbetyg.
Yaps utgångsbana
Roll
Kör
Ord, med upprepningar
Mikro WER
Raderingshastighet
Medianbearbetning
p95-bearbetning
Maximal bearbetning
Core ML Parakeet + lokal rensning
Rensning på
60
1,473
3.46%
0.41%
1,124 ms
2,807 ms
2,958 ms
Core ML Parakeet, städning av
Rengöring av
60
1,473
3.67%
0.20%
250 ms
722 ms
1,863 ms
Whisper Base, städning av
Rengöring av
60
1,473
6.52%
0.41%
844 ms
1,669 ms
2,189 ms
Behandlingstiden inkluderar igenkänning, slutförande av pipeline och lokal rensning när aktiverat. Det utesluter initial runtime-konstruktion, fixturladdning, liveinspelning, genvägsutskick och markörinsättning. Alla banor ger slutliga utvärderingsresultat; Rensningsbanor kan fortfarande tillämpa ordförråd och formateringsändringar.
Latensen använder 60 lika viktade avkodningsprov per körfält och R-7 linjära kvantiler. De 20 matcherna innehåller 491 referensordspositioner per pass, räknade tre gånger i nämnaren på 1 473 ord. Upprepningar är inte självständiga yttranden. Kvalitetströskelfel förblir inkluderade: 3 med Core ML rensning på, 3 med Core ML rensning av och 6 med Whisper.
"Mikro" betyder att antalet redigeringsoperationer och referensord summerades innan varje takt beräknades.Det är inte makrogenomsnittet av procentsatser per klipp.
02 · Begränsad läsning
Vad dessa tre rader kan stödja.
Rengöring av
Matchade rensningskonfigurationer
Whisper Base with cleanup off had 2.85 percentage points higher WER, 0.20 points higher deletion rate, a 595 ms higher median, and a 947 ms higher p95 than Core ML Parakeet with cleanup off in these matched pilot runs.
Rensningsaktiverad körfält
Igenkänning och rengöring tillsammans
Den Core ML rensningsaktiverade filen inkluderar lokal semantisk rensning. Dess 1 124 ms median och 2 807 ms p95 beskriver igenkänning och slutförande tillsammans, innan de sätts in i en annan applikation.
Vad fungerade
Publiceringspipeline
Sanitizern behöll räknare och latens medan den uteslöt transkript, referenser, anvisningar och applikationskontext. Offentlig filintegritet registreras med SHA-256-digester.
Vad som förblir
Benchmark bevis
Mänskligt tal, flera accenter och språk, direkt mikrofonupptagning, kontrollerad termisk ordning, nätverksobservation, fler enheter och tredjepartssystem krävs fortfarande.
03 · Explicita uteslutningar
Vad denna pilot inte visar.
Jämförelseprestanda mot någon annan produkt.
Prestation på mänskligt tal, accenter eller flerspråkigt tal.
Live-mikrofon, brusreducering, tystnadsgrind, första ordet, eller avslutningsbeteende.
Kall-mot-varm prestanda under ett kontrollerat termiskt protokoll.
Offline- eller sekretessbeteende etablerat genom nätverksobservation.
Ett allmänt påstående att en rå eller renad konfiguration är bättre.
Korpusen, enhetsmatrisen, ordningen och den termiska proceduren var inte förregistrerade. Dessa observationer beskriver dessa sekventiella körningar, på denna korpus, enhet, mjukvaruversion och datum.