Machine Translation & Post-editing in the Industry

Language

English (UK)

Машинный перевод (МП) и постредактирование (PEMT, MTPE) в переводческой отрасли
[[Светлана: информированное согласие об условиях участия]]
Основная информация
1. Должность *
2. Тип компании *

Переводческая компания, поставщик лингвистических услуг Фирма, компания, организация, корпорация или издательство Учебное заведение
3. Есть ли в вашей компании/организации отдел переводов? *

Да Нет
4. Размер компании/организации: *

Менее 10 сотрудников От 11 до 50 сотрудников От 51 до 500 сотрудников Более 500 сотрудников
Проекты по постредактированию машинного перевода
Постредактированием машинного перевода (PEMT, MTPE) называется "редактирование и исправление результата машинного перевода". Под машинным переводом понимается "автоматический перевод текста с одного естественного языка на другой с помощью компьютерной программы".

Источник: ISO 18587-2017
5. Выполняются ли в вашей компании/организации переводческие проекты, подразумевающие постредактирование МП? *

Да Нет
6. Для какого типа документов применяется постредактирование? *

Документы для внутреннего использования Документы для широкого использования и для внешнего заказчика Иные типы документов Я не знаю

Соглашение между заказчиком и поставщиком лингвистических услуг
7. При выполнении постредактирования для внешнего заказчика/внешним поставщиком, содержит ли типовое соглашение на оказание услуг любые из перечисленных ниже пунктов? *

Технические условия проекта: требования к соблюдению лингвистических норм (например, руководства по стилю, терминологии, фразеологии и т.д.) Дополнительные технические условия: для обучения модулей МП используются корпуса или базы текстов (сопоставление текстов для отладки или пользовательской настройки МП) Дополнительные технические условия: определенный тип контента, выполнение предварительного редактирования исходного текста и т.д. Дополнительные технические условия: уровень качества системы МП для проектных языковых пар Дополнительные технические условия: тип постредактирования МП (частичное или полное) Дополнительные технические условия: использование технологий МП разрешено Дополнительные технические условия: использование МП запрещено Дополнительные технические условия: проверка результата перевода или постредактирования экспертами заказчика Дополнительные технические условия: отчет об оценке качества перевода (TQA) целевого текста

Текущие тенденции в проектах по постредактированию МП
В следующих трех разделах представлены ключевые вопросы этого исследования.

Опыт в области постредактирования машинного перевода
8. Как давно в вашей компании/организации выполняются проекты по постредактированию МП? *

Менее 1 года От 1 до 5 лет Более 5 лет
9. Какой процент переводов выполняется с применением постредактирования? *

Менее 25% От 26% до 50% От 51% до 75% Более 76%
10. Выберите языковые пары, для которых наиболее часто выполняется постредактирование.
Исходный язык 1 *
Целевой язык 1 *
Исходный язык 2
Целевой язык 2
Исходный язык 3
Целевой язык 3
Данного языка нет в списке. Укажите его ниже.

Коды языков могут соответствовать ISO 639-2 или ISO 639-3; символ ">" показывает направление перевода. Например, "EN>FR" означает перевод с английского на французский. Если вы не уверены, какой код ISO соответствует языку, укажите название языка полностью. Чтобы показать двунаправленность перевода, можно использовать сочетание символов "<>", например: English<>French.
11. Для каких языковых пар вы выполняете постредактирование МП? *
12. Кто, как правило, принимает решение о переводе с применением постредактирования? *

Заказчик перевода Наша компания или организация Конечные потребители
13. Присылают ли заказчики перевода результат МП вместе с исходным текстом? *

Да, и сообщают, что был использован МП Да, но не сообщают, что был использован МП Нет
14. Используется ли при постредактировании МП исходный текст для справки? *

Нет, исходный текст недоступен (мы выполняем одноязычное постредактирование) Да, мы выполняем двуязычное постредактирование: исходный текст + результат МП Да, мы выполняем двуязычное постредактирование: исходный текст + результат МП + результат постредактирования
15. На основании чего принимается решение о том, что исходный текст подходит для машинного перевода и постредактирования? *

Анализ содержания (тип текста, число повторов, сфера применения и т.д.) Общее качество МП на данный момент для рассматриваемой языковой пары Внешние факторы: время на выполнение проекта и стоимость Мы проводим тщательный анализ исходного текста (STA), чтобы оценить показатели непереводимости
16. На основании чего принимается решение о том, что результат МП - достаточно высокого качества и пригоден для дальнейшего постредактирования? *

Автоматическая оценка (такие показатели, как BLEU, TER, METEOR и пр.) Ручная оценка на основе типологии ошибок Оценка качества машинного перевода (QE) или степень уверенности (прогнозирование) Ручная оценка расстояния редактирования в результате постредактирования
17. Вы когда-нибудь использовали результат МП, не поставив заказчика в известность об этом? *

Нет Да Да, но с постредактированием
18. Какой уровень постредактирования чаще всего требуется заказчику? *

Частичное постредактирование или "достаточно хорошее" качество Полное постредактирование или качество "как при переводе человеком" Я не знаю
19. Проверяет ли второй переводчик/редактор тексты после постредактирования МП? *

Тексты проходят редактирование и финальную проверку Тексты редактируются Тексты проходят финальную проверку Тексты не подвергаются дополнительному редактированию или проверке Я не знаю
20. Какой из следующих сценариев постредактирования чаще всего используется в вашей компании или организации? *

Повышение среднего (приемлемого) качества результата МП до высокого или пригодного для публикации качества Повышение плохого качества результата МП до среднего (приемлемого) качества Повышение плохого качества результата МП до высокого или пригодного для публикации качества Я не знаю
21. Отслеживается ли производительность постредакторов? *

Да Нет
22. Сколько слов в час в среднем должен обрабатывать постредактор? *

Менее 1000 сл./ч От 1000 до 3000 сл./ч От 3000 до 5000 сл./ч Более 5000 сл./ч
Контролируемый язык и контролируемое написание текста
23. Используются ли какие-либо средства контролируемых языков (CL) или контролируемого написания текстов (CA) для создания или предварительного редактирования контента, который будет переведен с использованием МП? *

Да Нет
24. Кто разрабатывает CL, который используется для создания или предварительного редактирования контента, который будет переведен с использованием МП? *

Это внутренняя разработка нашей компании или организации Сторонний разработчик
25. Для каких языков используется CL или CA, если контент требуется перевести с использованием МП? *

Профиль постредактора машинного перевода
26. Сколько штатных постредакторов работает в вашей компании или организации? *
27. Сколько внештатных постредакторов в вашей базе? *
28. Выполняют ли штатные постредакторы постредактирование 100% своего времени? *

Да, они выполняют постредактирование полный рабочий день Нет, они также переводят или руководят переводческими проектами Нет, у них большой список других задач

29. Какой объем работы эти задачи составляют для штатных постредакторов? *

	Основная задача	Второстепенная задача	Возможная задача	Никогда
Настройка/отладка МП
Сбор сведений о качестве результата МП для настройки модуля МП
Управление проектами PEMT: выдача внештатным сотрудникам и т.д.
Подготовка материалов для обучения МП (создание корпусов текстов, сопоставление, очистка и т.д.)
Оценка качества результата МП (категоризация ошибок и т.д.)
Разработка руководств по постредактированию
Постредактирование результата машинного перевода
Предварительное редактирование исходного текста
Корректура результата постредактирования (одноязычная)
Контроль качества и проверка текста
Редактирование результата МП после постредактирования (двуязычное)
Поддержка пользователей средств CAT/МП
Извлечение терминологии и управление терминологическими базами
Отслеживание производительности постредакторов

30. Какой объем работы эти задачи составляют для внештатных постредакторов? *

	Основная задача	Второстепенная задача	Возможная задача	Никогда
Настройка/отладка МП
Сбор сведений о качестве результата МП для настройки
Управление проектами PEMT: выдача внештатным сотрудникам и т.д.
Подготовка материалов для обучения МП (создание корпусов текстов, сопоставление, очистка и т.д.)
Оценка качества результата МП (категоризация ошибок и т.д.)
Разработка руководств по постредактированию
Постредактирование результата машинного перевода
Предварительное редактирование исходного текста
Корректура постредактированного результата (одноязычная)
Контроль качества и проверка текста
Редактирование результата МП после постредактирования (двуязычное)
Поддержка пользователей со средствами CAT/МП
Извлечение терминологии и управление терминологическими базами
Отслеживание производительности постредакторов

31. Что берется за основу при оплате проектов по постредактированию МП? *

Расстояние редактирования (пост-анализ) Почасовая ставка (затраченное время указывает постредактор) Почасовая ставка (затраченное время фиксируется программой) Ставка на основе исходных слов (предварительный анализ) Ставка на основе исходных страниц Ставка на основе целевых слов Ставка на основе целевых страниц
Критерии отбора постредакторов
32. Какие из приведенных ниже характеристик постредакторов вы оценили бы более высоко для своих проектов по постредактированию? *

Специалист с более серьезной лингвистической подготовкой (и со знаниями в предметной области) Специалист с более серьезной экспертной подготовкой (и со знанием языков)
Обратите особое внимание на следующие два вопроса. Они особенно важны с точки зрения точности результатов настоящего исследования.

33. Какие из приведенных ниже критериев учитываются при найме или отборе постредакторов МП в вашей компании или организации? *

	Обязательно	Важно	Желательно	Неважно
Умение постредактировать перевод в обоих направлениях
Умение работать со средствами CAT
Сертификаты по постредактированию от профессиональной ассоциации (ProZ, TAUS и т.д.)
Опыт руководства проектами
Умение работать с системами МП
Навыки предварительного редактирования или работы с контролируемыми языками (CL)
Опыт постредактирования результата МП
Производительность (скорость обработки контента)
Навыки в области контроля качества (QA)
Навыки редактирования и корректуры
Навыки использования технологии автоматического распознавания речи (ASR) или сенсорно-визуальных технологий
Знание конкретного языка (вариант, подъязык)
Знание предметной области или специализация в этой области
Технические навыки: макросы, xliff, tmx, Java, регулярные выражения и т.д.
Навыки управления терминологией и анализа информации
Навыки оценки качества перевода (TQA) (баллы, показатели, оценка и т.д.)
Высшее образование в области переводов или смежных дисциплинах

34. Оцените следующие навыки и компетенции согласно их важности для профессионального постредактора (1 = почти нет | 5 = очень важно). *

	1	2	3	4	5
Умение принимать решение: редактировать или отвергать (переводить с нуля) результат МП
Умение редактировать согласно руководствам по постредактированию
Умение добиваться качества "ручного перевода" при постредактировании (полное постредактирование)
Умение добиваться "достаточно хорошего" качества перевода при постредактировании (частичное постредактирование)
Умение предварительно редактировать исходный текст согласно нормам контролируемых языков
Умение обучать и настраивать МП
Умение выявлять ошибки МП
Умение применять правильную стратегию корректуры
Умение советовать, когда постредактирование МП является адекватным способом обработки текста или проекта
Умение предоставлять обратную связь для разработчиков решений МП
Способность изучать новые технологии

35. В каких случаях качество постредактирования признается неудовлетворительным? *

Такого у нас не случается Недостаточный объем постредактирования (необходимые изменения не внесены в результат МП) Излишний объем постредактирования (внесены ненужные, "вкусовые" правки) Выполнено псевдоредактирование (постредактор добавил ошибки, которых не было в начальном результате МП) Я не знаю
36. Применяется ли специальное тестовое задание для постредакторов, отличное от заданий для переводчиков? *

Да Нет

Проект по постредактированию МП
Задания по постредактированию МП
37. Выдаются ли специальные задания по постредактированию МП, отличные от обычных? *

Да, мы предоставляем подробную информацию: например, о системе МП, методах ее обучения, показатели и баллы качества, руководства по постредактированию Да, мы предоставляем некоторую дополнительную информацию: описание рабочего процесса или руководства по постредактированию Нет
38. Какие из следующих пунктов включает в себя задание по постредактированию? *

Описание контента (тип текста, целевая аудитория, анализ исходного текста и т.д.) Примеры, демонстрирующие, когда стоит отказаться от результата МП (= перевести с нуля) Сведения об обучении данной системы МП и наиболее частотные ошибки Показатели качества для результата МП Сведения о принципе работы данного типа МП (гибридный, на основе правил, статистический, нейронный) Название системы машинного перевода Руководства по постредактированию: общий список того, что стоит и чего не стоит делать (например: "исправление орфографических ошибок: ДА", "улучшение стиля: НЕТ") Руководства по постредактированию: список примеров, подобранных для конкретной языковой пары Уровень постредактирования: частичное или полное
Руководства по постредактированию МП
39. Какие руководства по постредактированию МП выдаются постредакторам? *

Разработанные в компании с учетом потребностей всей компании или организации Разработанные в компании с учетом типа контента или языка Руководства по постредактированию TAUS Только указание уровня постредактирования (частичное или полное)
Обратная связь от постредакторов для улучшения качества МП
40. Должны ли постредакторы предоставлять отзывы по качеству МП для дальнейшей настройки? *

Да Нет
41. Какие данные постредакторы присылают по завершении проекта по постредактированию МП? *

Примеры повторяющихся ошибок: просто список слов Примеры повторяющихся ошибок (в структурированном шаблоне): исходный текст, результат МП, результат постредактирования Общее описание качества работы системы машинного перевода Типы ошибок: порядок слов, синтаксис, грамматика, орфография, пунктуация, терминология и т.п. Степень серьезности ошибок: критическая, серьезная, незначительная, неважная и т.д. Примеры ошибок в исходном тексте, которые повлияли на ошибки МП
TQA (Оценка качества перевода)
42. Используется ли система оценки качества перевода (TQA) для проектов по постредактированию МП? *

Нет Да, система встроена в средство CAT Да, система не встроена в средство CAT
43. Определена ли модель оценки качества перевода в соответствии со стратегией управления рисками? *

Да Нет Я не знаю
44. Какая из перечисленных ниже систем TQA используется в процессе? *

АТА ITS 2.0 LISA QA Metric MQM (Multidimensional Quality Metrics) MTM LinguaSoft QA Model SAE J2450 SDL TMS Classic Model TAUS DQF (offline) TAUS DQF Dashboard (online) Никакая

Обучение постредактированию машинного перевода
45. Предусмотрено ли в вашей компании/организации обучение постредактированию МП? *

Мы никогда не проводили обучение Мы провели обучение по крайней мере один раз Обучение постредактированию МП проходит регулярно
46. Кто проходит обучение постредактированию МП? *
47. Изменяется ли программа в зависимости от того, кто проходит обучение? *

Да Нет
48. Кто проводит обучение? *

Штатные сотрудники Мы просим пройти курс по постредактированию организации TAUS
49. Кто обучает штатных сотрудников? *

Штатные сотрудники Обучение проводится в рамках курса TAUS
50 Кто обучает внештатных сотрудников? *

Штатные сотрудники Обучение проводится в рамках курса TAUS
51. Как организовано обучение? *

Очное Онлайн (видеоконференции) Онлайн (запись) Очно-заочное
52. Как организовано обучение штатных сотрудников? *

Очное Онлайн (видеоконференции) Онлайн (запись) Очно-заочное
53. Как организовано обучение внештатных сотрудников? *

Очное Онлайн (видеоконференции) Онлайн (запись) Очно-заочное
54. Известно ли вам, что включает в себя обучение, проводимое штатными сотрудниками? *

Да Нет
55. Какие элементы включает в себя обучение? *

Описание типов контента и типов текста с точки зрения применения МП Интеграция средств CAT и систем МП Оценка МП: автоматическая и на основе эталона (показатели качества) Оценка МП: ручная (выставление баллов, ранжирование переводов, категоризация ошибок) Типы МП: на основе правил, на основе примеров, статистические, гибридные или нейронные Отношение к постредактированию: принятие решения, когда следует отказаться от результата МП и переводить с нуля Руководства по постредактированию: исчерпывающий список и примеры для нужной языковой пары Уровни постредактирования: частичное и полное Практические задания по постредактированию для необходимой языковой пары Риски постредактирования: недостаточный объем редактирования, излишнийобъем редактирования и псевдоредактирование Техники и стратегии постредактирования (перестановка, замена, добавление, удаление) Технология постредактирования: средства постредактирования, автоматическое распознавание речи, сенсорный экран и т.д. Предварительное редактирование и контролируемые языки Инструменты отслеживания производительности Оценка качества или степень уверенности (прогноз, без эталона постредактирования)

56. Какие элементы включает в себя обучение для разных категорий слушателей? *

	Для штатных сотрудников	Для внештатных сотрудников
Описание типов контента и типов текста с точки зрения применения МП
Интеграция средств CAT и систем МП
Оценка МП: автоматическая и на основе эталона (показатели качества)
Оценка МП: ручная (выставление баллов, ранжирование переводов, категоризация ошибок)
Типы МП: на основе правил, на основе примеров, статистические, гибридные или нейронные
Отношение к постредактированию: принятие решения, когда следует отказаться от результата МП и переводить с нуля
Руководства по постредактированию: исчерпывающий список и примеры для нужной языковой пары
Уровни постредактирования: частичное и полное
Практические задания по постредактированию для необходимой языковой пары
Риски постредактирования: недостаточный объем редактирования, излишний объем редактирования и псевдоредактирование
Техники и стратегии постредактирования (перестановка, замена, добавление, удаление)
Технология постредактирования: средства постредактирования, автоматическое распознавание речи, сенсорный экран и т.д.
Предварительное редактирование и контролируемые языки
Инструменты отслеживания производительности
Оценка качества или степень уверенности (прогноз, без эталона постредактирования)

Технологии и средства
57. На каком принципе машинного перевода основана применяемая в вашей компании или организации система МП? *

МП на основе правил Статистический МП Нейронный МП Я не знаю
58. Какая система/модуль МП чаще всего используется для проектов с постредактированием?
Основная система МП *
Дополнительная система МП (если применимо)
54_1. Какой источник МП Вы используете? *
59. Используются ли существующие базы переводов и(или) глоссарии для обучения, настройки и отладки МП? *

Да Нет Я не знаю
60. Интегрируется ли используемая система МП с иными средствами? *

Да, c ПО для локализации Да, c ПО для создания субтитров Да, c ПО для локализации и ПО для создания субтитров Нет
62. Объединяются ли результаты МП и совпадения из базы переводов в редакторе? *

Да Нет
Интеграция TM/МП отсутствует
63. В каком средстве выполняется постредактирование МП? *

В текстовом редакторе В редакторе МП
Интеграция TM/МП
64. В какой среде интегрируются результаты обработки TM и МП? *

В среде CAT В редакторе МП
65. Какие средства CAT используются наиболее часто?
Основное средство CAT *
Дополнительное средство CAT
66. Видит ли постредактор источник получения результата перевода? *

Да Нет Я не знаю
67. Используются ли "восстановленные" сегменты? (Совпадения из баз ТМ и результаты МП, объединенные в неточное совпадение для постредактирования) *

Да Нет Я не знаю
68. Какое средство применяется для отслеживания производительности? *

Таблицы Excel Klok Системы TMS, такие как Plunet, XTRF, Lotus, Everwin, Trello, Dapulse и т.д. Приложение Qualitivity Собственные приложения TAUS DQF Нет
69. Используют ли постредакторы какие-либо из перечисленных ниже инструментов для выполнения контроля качества (QA)? *

Antidote Checkmate ContentQuo globalReview Language Tool lexiQA Project Open Translation Quality QA Distiller TQAuditor Verifika Xbench Нет
70. Какие средства контролируемого написания текстов используются чаще всего? *

Acrolinx CLAT Congree CrossAuthor HyperSTE MaxIT MindReader Никакие, только средства обработки текстов

Мнения и впечатления
71. Как вы считаете, соответствуют ли существующие курсы обучения постредактированию задачам подготовки профессиональных постредакторов? *

Да Нет
72. Хотели ли бы вы иметь доступ к онлайн-платформе, позволяющей вашей компании/организации посылать задания на постредактирование постредакторам, только проходящим обучение? *

Да Нет
73. Знаете ли вы о публикациях или существующих работах по любым из указанных ниже стандартов? *

ISO 18587:2017 "Услуги перевода — Постредактирование результатов машинного перевода" ASTM WK46396 "Новый подход к разработке показателей качества перевода" Нет
74. Если у вас возникли комментарии к вопросам данного исследования, укажите их в поле ниже.
Благодарим за участие!
Если вы согласны принять участие в дополнительном обсуждении некоторых аспектов данного исследования, пожалуйста, укажите свой адрес электронной почты и контактные данные ниже:
example@example.com
ФИО:

Имя Отчество Фамилия
Если вы хотите только получить отчет с результатами данного исследования, пожалуйста, укажите свой адрес электронной почты в поле ниже:
example@example.com

Благодарим вас за время, потраченное на ответы.
В настоящем исследовании принимают участие только поставщики лингвистических услуг, компании и организации, которые переводят тексты с использованием машинного перевода с последующим постредактированием.
Общественные организации, например, негосударственные организации и государственные органы, в настоящий момент не принимают участия в исследовании. Однако весьма вероятно, что подобное исследование будет проведено и среди таких организаций.

Если бы вы хотели принять в нем участие, пожалуйста, оставьте свои контактные данные ниже:
ФИО:

Имя Отчество Фамилия
E-mail:
example@example.com
Организация, негосударственная организация, учреждение:

Should be Empty:

Машинный перевод (МП) и постредактирование (PEMT, MTPE) в переводческой отрасли

Основная информация

Проекты по постредактированию машинного перевода

Соглашение между заказчиком и поставщиком лингвистических услуг

Текущие тенденции в проектах по постредактированию МП

Контролируемый язык и контролируемое написание текста

Критерии отбора постредакторов

Задания по постредактированию МП

Руководства по постредактированию МП

Обратная связь от постредакторов для улучшения качества МП

TQA (Оценка качества перевода)

Обучение постредактированию машинного перевода

Технологии и средства

Интеграция TM/МП отсутствует

Интеграция TM/МП

Мнения и впечатления

Благодарим за участие!