Точность транскрипции финских совещаний: мы протестировали 4 инструмента искусственного интеллекта (2026)

Инструменты для транскрибирования встреч на финском языке найти несложно. Многие ИИ-помощники для проведения встреч указывают финский язык в списке поддерживаемых языков, но одно дело — заявлять о возможности транскрибирования на финском, а совсем другое — действительно это делать.

В финском языке окончания указывают на значение в конце отдельного слова. Слово «leikkaussalivalmiutta» содержит в себе целую английскую фразу, и одно пропущенное окончание меняет смысл предложения.

Многие инструменты, поддерживающие финский язык, изначально разработаны для англоязычных пользователей, а другие языки добавлены в них в качестве дополнения, и наши тесты это подтверждают.

Мы провели тестирование tl;dv в сравнении с тремя другими системами на быстром, родном финском языке в формальной обстановке:

• Fireflies
• Ноота
• Fathom

Обычно мы бы включили сервис Google Gemini в наши тесты, так как многие компании и отделы продаж уже используют его в своих рабочих средах. Однако Gemini поддерживает Gemini восемь языков, и финский среди них нет.

Результаты были обезличены и оценивались методом «слепого» рецензирования по четырём разделам, два из которых были взяты из документации и маркетинговых материалов каждого инструмента:

• Транскрипция и точность
• Качество встреч в реальных условиях
• Возможности и функции
• Доверие, безопасность и ценность

Оценку проводили две модели большого языка (LLM): Claude Anthropicи ChatGPT от OpenAI в рамках анонимизированных, изолированных проектов, чтобы исключить предвзятость. Затем будет проведена проверка носителями языка.

По итогам тестирования tl;dv первое место, набрав 173 балла из 200. Noota и Fireflies вторые и третьи места с результатами 149 и 148 баллов соответственно, а Fathom значительно Fathom , набрав 94 балла.

Транскрипция и точность записи финского совещания

Сначала мы рассмотрели точность обработки исходного текста, то есть то, как каждый инструмент обрабатывал сам финский язык.

tl;dv первое место, набрав 59 баллов из 65.

Точность языкового выражения

Именно в этом аспекте tl;dv вперед. Он получил максимальный балл за точность перевода, став единственным инструментом, сумевшим отразить все нюансы «живого» финского языка.

Например, одна из выступающих, поправляя себя, действительно произнесла «tuomatta, tuomas, tuomalla». В официальном протоколе это было сведено к одному четкому слову. tl;dv то, что было сказано. Остальные же сгладили это, превратив в более лаконичный вариант.

Показатель ошибок в тексте

Показатель частоты ошибок на уровне слов (WER) является нашим наиболее объективным критерием оценки. Мы сравнили результаты работы каждого инструмента с официальными протоколами Эдускунты по каждому заседанию. tl;dv самый низкий показатель частоты ошибок с довольно значительным отрывом: в среднем 9,6 % по сравнению с 14,1 % у Fireflies, 14,4 % у Noota и 17,1 % у Fathom.

Стенограмма парламентских заседаний не является дословной, поэтому все указанные процентные показатели завышают реальный уровень погрешности. Тем не менее, tl;dv примерно на треть точнее, чем его ближайший конкурент, и сохранял это преимущество на всех трех заседаниях.

Распознавание объектов

tl;dv максимальное количество баллов и смог правильно распознать слова «Lindtman», «Lohikoski», «Oulaskankaan» и «Danske Bank».

Fireflies «Noota» опустились на третье место, в результате чего «Lindtman» превратился в «Lindman», «Lohikoski» — в «Lohjanski», а «Oulaskangas» — в «Oulunaskankaan».

Fathom самый низкий результат — 2 балла, и именно в его ошибках наиболее ярко проявилась проблема приоритета английского языка: премьер-министр Орпо превратился в «Орко», министр Мултала — в «Мультола», министр Мюккянен — в «Мюнккястэ», а Danske Bank стал «Таски Панкин».

Числа, даты и валюта

Самая большая цифра, озвученная на встрече — корректировка на девять миллиардов евро — сбила с толку большинство инструментов. Fireflies Noota услышали «yhdeksän miljardin» и записали «yhdeksän miljoonin» — девять миллионов. Только tl;dv Fathom эту цифру правильно.

Однако в других местах Fathom : например, превратил «95 процентов предпринимателей» в «95… 50 prosenttia» и сократил 2026 до «26».

Распознавание технических терминов

tl;dv единственным инструментом, получившим максимальный балл. Он смог правильно распознать и воспроизвести финские технические термины «vaihtoehtobudjetti», «kehysriihi», «päästökauppa», а также аббревиатуры «THL» и «EKP». Все остальные инструменты неоднократно неправильно транскрибировали те же слова, превращая vaihtoehtobudjetti в «vaihtoehtopudjetti», а kehysriihi — в «kehysjärjestö». В частности, Fathom показал самый низкий результат.

Качество встреч в реальных условиях

Из 45 участников tl;dv наибольшее количество баллов — 36, а Fireflies «Noota» разделили второе место с 33 баллами; Fathom последнее место с 9 баллами по двум конкретным причинам.

Диаризация

Никто не получил максимального балла за диаризацию, поскольку во всех инструментах была одна особенно сложная часть, в которой вопрос был вплетен в речь другого собеседника. tl;dv Fireflies по 7 баллов из 10, разделив между собой остальных четырёх говорящих — за исключением этой ошибки их результаты были практически идеальными. Noota набрала 6 баллов. Система смогла выделить говорящих, но допустила ту же ошибку, что и Mattila, и не дошла до конца, несмотря на то что получила файл в полном объеме. Fathom 0 баллов, так как нам не удалось загрузить файлы непосредственно на платформу.

Частота галлюцинаций и частота вставки

В ходе наших испытаний мы зафиксировали несколько случаев появления «галлюцинаций» при использовании инструментов, в частности во время испытаний во Франции.

tl;dv максимальный балл — 9 из 10: в стенограмме не было никаких выдумок, но был добавлен один пункт, который не соответствовал действительности на 100 %. Noota набрал 8 баллов: его работа была обоснованной на протяжении всего текста, в резюме были добавлены собственные интерпретации и анализ, но вымышленных фактов не было.

Fireflies худшим из рабочих инструментов, получив оценку 6. Качество стенограммы в целом было приемлемым, но при создании сводки на основе стенограммы система сформировала задачи и передала их человеку, который не участвовал в совещании.

По результатам анализа стенограммы Fathom 3 Fathom за галлюцинации. Инструмент начал генерировать предложения на английском языке, которых никто не произносил, и охарактеризовал восемь случаев банкротства в день как «послевоенный рекорд» — выражение, которое нигде не встречается в аудиозаписи.

Краткая информация о качестве

Fathom 0 Fathom за качество резюме, как и в нашем тесте по шведскому языку. Несмотря на то, что в рекламных материалах компания заявляет о возможности транскрибирования финского языка, получить резюме на финском языке не удается. Разговор транскрибируется на финский язык (в некоторой степени, судя по приведенному выше), но резюме и список действий представлены исключительно на английском языке, причем возможности перевода нет.

Возможности и функции

В этом разделе рассматриваются особенности каждого инструмента и то, как они вписываются в ваш стек.

tl;dv первое место, набрав 60 баллов из 72, за ним следуют Fireflies 58 баллами, Noota — с 57 и Fathom 46.

Финский интерфейс

Ни один из этих инструментов не поддерживает интерфейс на финском языке. Они могут распознавать и создавать резюме текстов на финском, но на данный момент ни один из них не может работать полностью на финском языке.

Голосовая идентификация

Распознавание голоса — это та функция, которая tl;dv выделяет tl;dv среди других сервисов. Если вы включите эту функцию, система запомнит ваш голос. Ни один из других инструментов не предлагает такую возможность.

Отслеживание слов-заполнителей

Существует множество инструментов, которые удаляют «öö» и «tota». В отличие от них, tl;dv не удаляет эти символы, а tl;dv их, и это был единственный инструмент в наборе, который так поступал.

Где Fathom неудачу

Fathom базовыми функциями: запись без ботов, синхронизация с CRM, настраиваемый словарь, собственный сервер MCP. Однако в программе отсутствуют функции, необходимые для неанглоязычной команды: нет перевода, нет форматов экспорта, нет возможности записи с мобильных устройств, нет сводных писем по итогам встреч, а метки времени являются крайне ненадежными.

Доверие, безопасность и ценность

Для всех, кто работает в Финляндии или Европе, соблюдение нормативных требований имеет большое значение. tl;dv Fireflies Noota получили максимальные оценки. Fathom меньше баллов — 12.

Обучение ИИ на основе ваших аудиозаписей

tl;dv Fireflies Noota не обучают ИИ на ваших аудиозаписях. Fathom по умолчанию. Эту функцию можно отключить, но настройка спрятана глубоко в меню, поэтому ваши записи будут использоваться для обучения модели, пока вы её не отключите.

Выбор места хранения данных

Возможность выбирать место хранения данных — это надежный показатель доверия. tl;dv Fireflies Noota предлагают такую возможность. Fathom хранит данные Fathom в США.

Тест на точность финского языка: методология

Наше сравнение основано на контролируемом тесте с сопоставимыми условиями, призванном обеспечить одинаковые условия для каждого инструмента.

Набор тестов

Мы отобрали три сессии вопросов и ответов в финском парламенте — Эдускунте, записанные 28 ноября, 5 декабря и 12 декабря 2024 года.

Формат сессии вопросов и ответов предполагал выступления нескольких докладчиков, быструю смену выступлений, непринужденную речь на финском языке, а также обилие технической терминологии, имен и цифр; продолжительность каждого clip 10 минут.

Каждый инструмент прошел тестирование с одинаковыми записями в одинаковых условиях: три встречи в режиме реального времени и, по возможности, цикл загрузки.

Fathom поддерживает загрузку файлов, поэтому не смог выполнить этот второй запуск.

Точность и частота ошибок в словах оценивались на основе официального протокола каждого заседания — «Pöytäkirja».

Обзор

Оценка проводилась вслепую: результаты работы каждого инструмента были анонимизированы и пронумерованы буквами, а затем оценивались двумя LLM в рамках независимых, изолированных друг от друга проектов, чтобы избежать предвзятости.

Кроме того, в ближайшее время мы проведем оценку знаний носителями языка.

Применялись два правила оценки: за недоступную функцию начислялся ноль баллов, а за вывод, в котором текст был преобразован обратно в английский, также начислялся ноль баллов.

Данные о характеристиках были взяты из открытых источников каждой компании и проверены на соответствие фактическим результатам, полученным в ходе наших тестов.

Набор инструментов

Компании Fireflies Fathom выбраны потому, что обе являются крупными американскими компаниями.

Noota была нашим выбором для европейского рынка, поэтому при её разработке учитывались требования GDPR.

В ходе нашего исследования компания Lingsoft была отмечена как финский стандарт, однако она специализируется на предоставлении услуг в области распознавания речи (ASR) и языковых услуг, а не на разработке программ для самостоятельного ведения записей, поэтому сравнение не было полноценным, и она не вошла в набор продуктов, подвергшихся оценке.

Разбивка двигателя и плана

Принцип работы каждого инструмента заключается в том, что он управляется движком, который обрабатывает запись и преобразует её в стенограмму.

Область применения и ограничения

• «Pöytäkirja» представляет собой отредактированную стенограмму, а не дословную запись. Из неё удаляются неудачные начала предложений, повторения и мелкие поправки, которые люди вносят, когда говорят быстро. Это означает, что каждый показатель частоты ошибок в словах превышает реальный уровень ошибок.
• Проверка носителя языка находится на рассмотрении.
• Fathom не Fathom выполнить цикл загрузки, а в его потоковом выводе отсутствовало разделение по динамикам, поэтому по нашему правилу «отсутствующих характеристик» он получил нулевую оценку по диаризации.
• Третий отчет Fathomне поступил в течение нашего периода измерения, что отразилось на его оценке скорости обработки.
• Данные об объектах, находящихся в общественном достоянии, отражают информацию, опубликованную на момент тестирования, и могут изменяться.

Какая программа для транскрибирования записей совещаний лучше всего подходит для финского языка?

Лучшим программным обеспечением для транскрибирования встреч на финском языке является tl;dv, которое заняло первое место в нашем тестировании, набрав 173 балла из 200. Второе место заняла Noota с результатом 149 баллов, Fireflies отстала Fireflies балл (148), а Fathom отстала, набрав 94 балла.

tl;dv трёх из четырёх уровней и поделил четвёртое место, причём вырвался вперёд именно там, где финский язык становится сложным. У него был самый низкий показатель ошибок в словах среди всех четырёх инструментов. Это был единственный инструмент, который правильно распознал каждое имя, каждую цифру и каждый технический термин. Он ни разу не запутался в финском языке. Кроме того, это был единственный инструмент, предлагающий функцию «голосовой печати» и отслеживание заполняющих слов — обе эти функции отвечают тому же принципу, который обеспечил ему лидерство в рейтингах точности: передавать то, что было сказано, а не приукрашивать речь.

Так что всё зависит от того, для чего вам нужна эта стенограмма. Если вам важно, чтобы запись была точной, имена написаны правильно, цифры не искажены и ничего не было придумано, то, судя по имеющимся данным, это tl;dv».

Если вы проводите встречи на финском языке и вам нужен помощник на базе искусственного интеллекта, которому можно доверять в вопросах точности деталей, попробуйте tl;dv .