В ноябре 1999 года компьютерный журнал "PC Expert" провел сравнительное тестирование самых известных систем машинного перевода: Power Translator, Reverso/PROjectMT*, Systran и Transcend для двух языковых пар (англо-французской и французско-английской). Было проведено обширное тестирование с использованием текстов по информатике, философии, медицине, юриспруденции, религии (использовались тексты из Библии). В ходе тестирования также переводились выдержки из художественных произведений (любовные романы и законы Мэрфи).
В приведенной ниже таблице показаны оценки, которые получили системы в результате тестирования. Оценки выставлялись по ряду параметров (таких как, качество перевода, состав и качество словарей, способность систем к развитию и встраиванию в другие системы, а также скорость работы). Каждому параметру был присвоен весовой коэффициент, определяющий важность данного параметра. Так, качеству перевода, как наиболее важному параметру, был присвоен максимальный коэффициент, равный 4. В итоге система перевода Reverso/PROjectMT опередила своих конкурентов по сумме показателей практически на 30 %.
За высокое качество перевода и, как было сказано в рецензии "за работоспособность, образованность и дипломатическую тонкость" система перевода Reverso/PROjectMT была отмечена наградой "Выбор редакции" журнала "PC Expert".
Полные тексты тестирования можно посмотреть на сайте PC Expert.
Таблица результатов тестирования
| Параметр/Система | Power Translator | Reverso | Systran | Transcend |
Англо-Французское направление | ||||
| Open Sources | 3,3 | 4,0 | 3,7 | 3,0 |
| Перевод любовных романов | 3,3 | 4,0 | 3,7 | 3,0 |
| Перевод законов Мерфи | 3,3 | 4,0 | 3,3 | 3,0 |
| Перевод Библии | 2,0 | 2,0 | 2,0 | 2,0 |
| Перевод отрывков из книги Societe du Spectacle | 3,0 | 3,5 | 4,0 | 4,0 |
| Средняя оценка перевода | 3,0 | 3,5 | 3,3 | 3,0 |
| Словарь по информатике | 1,3 | 3,8 | 1,9 | 1,6 |
| Словарь по информатике журнала JO | 1,7 | 2,0 | 0,4 | 1,1 |
| Юридический словарь | 4,5 | 4,5 | 4,1 | 3,1 |
| Словарь по философии | 1,3 | 1,7 | 0,4 | 0,7 |
| Морской словарь | 4,6 | 4,7 | 4,6 | 3,2 |
| Медицинский словарь | 3,2 | 4,1 | 3,4 | 0,9 |
| Средняя оценка словаря | 2,8 | 3,5 | 2,5 | 1,8 |
| Французско-Английское направление | ||||
| Фразы | 3,5 | 4,0 | 4,0 | 3,0 |
| Перевод новостей | 3,5 | 3,5 | 3,8 | 3,3 |
| Перевод отрывков из книги Societe du Spectacle | 4,0 | 3,5 | 4,0 | 3,5 |
| Средняя оценка | 3,5 | 4,0 | 4,0 | 3,0 |
Сводная таблица результатов тестирования
| Параметр/Система | Power Translator | Reverso | Systran | Transcend | Коэффициент |
| Качество перевода | 3,2 | 3,8 | 3,7 | 3,0 |
|
| Словарь | 2,8 | 3,5 | 2,5 | 1,8 |
|
| Способность системы к развитию | 4,0 | 4,0 | 2,0 | 2,0 |
|
| Скорость | 0,4 | 5,0 | 2,2 | 2,9 |
|
| Эргономика/встраиваемость | 3,0 | 4,0 | 3,5 | 1,0 |
|
| Итоговая оценка |
Подписаться на новости
Веб-форма не найдена.