Результати пілотного проекту · інтерпретацію виправлено 6 вересня 2026 р.
Три категорії тестів. Одне обмежене пілотне дослідження.
Ті самі 20 чистих синтетичних приладів, декодованих три рази на доріжку на одному M1 Max MacBook Pro за допомогою Yaps 2.3.2129. Core ML Parakeet і Whisper Base є конфігураціями моделі в Yaps, а не продуктами конкурентів.
01 · Агрегований запис
Розпізнавання з локальним очищенням, виміряні разом.
Yaps синтетичний пілот відтворення фікстур. Нижчі WER, показники видалення та затримки свідчать про меншу кількість помилок або коротший час обробки в рамках цього конкретного налаштування; вони не є рейтингами продукту.
Yaps вихідна лінія
Роль
Запускає
Слова з повтореннями
Мікро WER
Рівень видалення
Середня обробка
обробка p95
Максимальна обробка
Core ML Parakeet + локальне очищення
Очищення на
60
1,473
3.46%
0.41%
1,124 ms
2,807 ms
2,958 ms
Core ML Parakeet, очищення вимкнено
Очищення вимкнено
60
1,473
3.67%
0.20%
250 ms
722 ms
1,863 ms
Whisper Base, очищення від
Очищення вимкнено
60
1,473
6.52%
0.41%
844 ms
1,669 ms
2,189 ms
Час обробки включає розпізнавання, фіналізацію конвеєра та локальне очищення, якщо ввімкнено. Це виключає початкову конструкцію середовища виконання, завантаження приладів, живий запис, відправку ярликів і вставку курсору. Усі доріжки оцінюють остаточний результат оцінювача; смуги очищення все ще можуть застосовувати зміни словника та форматування.
Затримка використовує 60 однаково зважених зразків декодування на доріжку та лінійні квантилі R-7. 20 тестів містять 491 позицію довідкового слова за проходження, враховуючи три рази в знаменнику з 1473 слів. Повтори не є самостійними висловлюваннями. Помилки порогу якості залишаються включеними: 3 з увімкненим очищенням Core ML, 3 з вимкненим очищенням Core ML і 6 з Whisper.
«Мікро» означає, що підрахунки операцій редагування та опорні слова були сумовані перед обчисленням кожного показника. Це не макро-середнє відсотків по кліпах.
02 · Обмежене читання
Що ці три рядки можуть підтримувати.
Очищення вимкнено
Відповідні конфігурації очищення
Whisper Base з вимкненим очищенням мав на 2,85 відсоткових пунктів вищу WER, на 0,20 пунктів вищу швидкість видалення, на 595 мс вищу медіану та на 947 мс вищу p95, ніж Core ML Parakeet з вимкненою очисткою в цих відповідні пілотні прогони.
Доріжка з підтримкою очищення
Розпізнавання та очищення разом
Смуга з увімкненим очищенням Core ML включає локальне семантичне очищення. Його медіана 1124 мс і 2807 мс p95 описують разом розпізнавання та фіналізацію перед вставленням в іншу програму.
Що спрацювало
Конвеєр публікації
Санітизатор зберігав підрахунки та затримку, виключаючи транскрипти, посилання, підказки та контекст застосування. Цілісність публічного файлу фіксується за допомогою SHA-256 хешів.
Що залишається
Докази на основі бенчмарків
Людська мова, кілька акцентів та мов, захоплення живого мікрофона, контрольований тепловий порядок, спостереження за мережею, більше пристроїв та сторонніх систем все ще потрібні.
03 · Явні виключення
Що цей пілот не показує.
Порівняльна продуктивність у порівнянні з будь-яким іншим продуктом.
Продуктивність на людській мові, акцентах або багатомовній мові.
Живий мікрофон, шумопригнічення, гейт тиші, перше слово або поведінка підчищення хвоста.
Продуктивність у холодному та теплому стані за контрольованим тепловим протоколом.
Офлайн або поведінка з точки зору конфіденційності, встановлена шляхом спостереження за мережею.
Загальне твердження, що одна сирa або оброблена конфігурація краща.
Корпус, матриця пристроїв, порядок і термічна процедура не були попередньо зареєстровані. Ці спостереження описують ці послідовні прогони на цьому корпусі, пристрої, версії програмного забезпечення та даті.