Machine Translation & Post-editing in the Industry

Машинный перевод (МП) и постредактирование (PEMT, MTPE) в переводческой отрасли
[[Светлана: информированное согласие об условиях участия]]
Основная информация
1. Должность*
2. Тип компании*

Переводческая компания, поставщик лингвистических услугФирма, компания, организация, корпорация или издательствоУчебное заведениеOther
3. Есть ли в вашей компании/организации отдел переводов?*

ДаНет
4. Размер компании/организации:*

Менее 10 сотрудниковОт 11 до 50 сотрудниковОт 51 до 500 сотрудниковБолее 500 сотрудников
Проекты по постредактированию машинного перевода
Постредактированием машинного перевода (PEMT, MTPE) называется "редактирование и исправление результата машинного перевода". Под машинным переводом понимается "автоматический перевод текста с одного естественного языка на другой с помощью компьютерной программы".

Источник: ISO 18587-2017
5. Выполняются ли в вашей компании/организации переводческие проекты, подразумевающие постредактирование МП?*

ДаНет
6. Для какого типа документов применяется постредактирование?*

Документы для внутреннего использованияДокументы для широкого использования и для внешнего заказчикаИные типы документовЯ не знаю

Соглашение между заказчиком и поставщиком лингвистических услуг
7. При выполнении постредактирования для внешнего заказчика/внешним поставщиком, содержит ли типовое соглашение на оказание услуг любые из перечисленных ниже пунктов?*

Технические условия проекта: требования к соблюдению лингвистических норм (например, руководства по стилю, терминологии, фразеологии и т.д.)Дополнительные технические условия: для обучения модулей МП используются корпуса или базы текстов (сопоставление текстов для отладки или пользовательской настройки МП)Дополнительные технические условия: определенный тип контента, выполнение предварительного редактирования исходного текста и т.д.Дополнительные технические условия: уровень качества системы МП для проектных языковых парДополнительные технические условия: тип постредактирования МП (частичное или полное)Дополнительные технические условия: использование технологий МП разрешеноДополнительные технические условия: использование МП запрещеноДополнительные технические условия: проверка результата перевода или постредактирования экспертами заказчикаДополнительные технические условия: отчет об оценке качества перевода (TQA) целевого текстаOther

Текущие тенденции в проектах по постредактированию МП
В следующих трех разделах представлены ключевые вопросы этого исследования.

Опыт в области постредактирования машинного перевода
8. Как давно в вашей компании/организации выполняются проекты по постредактированию МП?*

Менее 1 годаОт 1 до 5 летБолее 5 лет
9. Какой процент переводов выполняется с применением постредактирования?*

Менее 25%От 26% до 50%От 51% до 75%Более 76%
10. Выберите языковые пары, для которых наиболее часто выполняется постредактирование.
Исходный язык 1*
Целевой язык 1*
Исходный язык 2
Целевой язык 2
Исходный язык 3
Целевой язык 3
Данного языка нет в списке. Укажите его ниже.

Коды языков могут соответствовать ISO 639-2 или ISO 639-3; символ ">" показывает направление перевода. Например, "EN>FR" означает перевод с английского на французский. Если вы не уверены, какой код ISO соответствует языку, укажите название языка полностью. Чтобы показать двунаправленность перевода, можно использовать сочетание символов "<>", например: English<>French.
11. Для каких языковых пар вы выполняете постредактирование МП?*
12. Кто, как правило, принимает решение о переводе с применением постредактирования?*

Заказчик переводаНаша компания или организацияКонечные потребителиOther
13. Присылают ли заказчики перевода результат МП вместе с исходным текстом?*

Да, и сообщают, что был использован МПДа, но не сообщают, что был использован МПНет
14. Используется ли при постредактировании МП исходный текст для справки?*

Нет, исходный текст недоступен (мы выполняем одноязычное постредактирование)Да, мы выполняем двуязычное постредактирование: исходный текст + результат МПДа, мы выполняем двуязычное постредактирование: исходный текст + результат МП + результат постредактирования
15. На основании чего принимается решение о том, что исходный текст подходит для машинного перевода и постредактирования?*

Анализ содержания (тип текста, число повторов, сфера применения и т.д.)Общее качество МП на данный момент для рассматриваемой языковой парыВнешние факторы: время на выполнение проекта и стоимостьМы проводим тщательный анализ исходного текста (STA), чтобы оценить показатели непереводимостиOther
16. На основании чего принимается решение о том, что результат МП - достаточно высокого качества и пригоден для дальнейшего постредактирования?*

Автоматическая оценка (такие показатели, как BLEU, TER, METEOR и пр.)Ручная оценка на основе типологии ошибокОценка качества машинного перевода (QE) или степень уверенности (прогнозирование)Ручная оценка расстояния редактирования в результате постредактированияOther
17. Вы когда-нибудь использовали результат МП, не поставив заказчика в известность об этом?*

НетДаДа, но с постредактированием
18. Какой уровень постредактирования чаще всего требуется заказчику?*

Частичное постредактирование или "достаточно хорошее" качествоПолное постредактирование или качество "как при переводе человеком"Я не знаю
19. Проверяет ли второй переводчик/редактор тексты после постредактирования МП?*

Тексты проходят редактирование и финальную проверкуТексты редактируютсяТексты проходят финальную проверкуТексты не подвергаются дополнительному редактированию или проверкеЯ не знаю
20. Какой из следующих сценариев постредактирования чаще всего используется в вашей компании или организации?*

Повышение среднего (приемлемого) качества результата МП до высокого или пригодного для публикации качестваПовышение плохого качества результата МП до среднего (приемлемого) качестваПовышение плохого качества результата МП до высокого или пригодного для публикации качестваЯ не знаю
21. Отслеживается ли производительность постредакторов?*

ДаНет
22. Сколько слов в час в среднем должен обрабатывать постредактор?*

Менее 1000 сл./чОт 1000 до 3000 сл./чОт 3000 до 5000 сл./чБолее 5000 сл./ч
Контролируемый язык и контролируемое написание текста
23. Используются ли какие-либо средства контролируемых языков (CL) или контролируемого написания текстов (CA) для создания или предварительного редактирования контента, который будет переведен с использованием МП?*

ДаНет
24. Кто разрабатывает CL, который используется для создания или предварительного редактирования контента, который будет переведен с использованием МП?*

Это внутренняя разработка нашей компании или организацииСторонний разработчикOther
25. Для каких языков используется CL или CA, если контент требуется перевести с использованием МП?*

Профиль постредактора машинного перевода
26. Сколько штатных постредакторов работает в вашей компании или организации?*
27. Сколько внештатных постредакторов в вашей базе?*
28. Выполняют ли штатные постредакторы постредактирование 100% своего времени?*

Да, они выполняют постредактирование полный рабочий деньНет, они также переводят или руководят переводческими проектамиНет, у них большой список других задач

29. Какой объем работы эти задачи составляют для штатных постредакторов?*

	Основная задача	Второстепенная задача	Возможная задача	Никогда
Настройка/отладка МП
Сбор сведений о качестве результата МП для настройки модуля МП
Управление проектами PEMT: выдача внештатным сотрудникам и т.д.
Подготовка материалов для обучения МП (создание корпусов текстов, сопоставление, очистка и т.д.)
Оценка качества результата МП (категоризация ошибок и т.д.)
Разработка руководств по постредактированию
Постредактирование результата машинного перевода
Предварительное редактирование исходного текста
Корректура результата постредактирования (одноязычная)
Контроль качества и проверка текста
Редактирование результата МП после постредактирования (двуязычное)
Поддержка пользователей средств CAT/МП
Извлечение терминологии и управление терминологическими базами
Отслеживание производительности постредакторов

30. Какой объем работы эти задачи составляют для внештатных постредакторов?*

	Основная задача	Второстепенная задача	Возможная задача	Никогда
Настройка/отладка МП
Сбор сведений о качестве результата МП для настройки
Управление проектами PEMT: выдача внештатным сотрудникам и т.д.
Подготовка материалов для обучения МП (создание корпусов текстов, сопоставление, очистка и т.д.)
Оценка качества результата МП (категоризация ошибок и т.д.)
Разработка руководств по постредактированию
Постредактирование результата машинного перевода
Предварительное редактирование исходного текста
Корректура постредактированного результата (одноязычная)
Контроль качества и проверка текста
Редактирование результата МП после постредактирования (двуязычное)
Поддержка пользователей со средствами CAT/МП
Извлечение терминологии и управление терминологическими базами
Отслеживание производительности постредакторов

31. Что берется за основу при оплате проектов по постредактированию МП?*

Расстояние редактирования (пост-анализ)Почасовая ставка (затраченное время указывает постредактор)Почасовая ставка (затраченное время фиксируется программой)Ставка на основе исходных слов (предварительный анализ)Ставка на основе исходных страницСтавка на основе целевых словСтавка на основе целевых страницOther
Критерии отбора постредакторов
32. Какие из приведенных ниже характеристик постредакторов вы оценили бы более высоко для своих проектов по постредактированию?*

Специалист с более серьезной лингвистической подготовкой (и со знаниями в предметной области)Специалист с более серьезной экспертной подготовкой (и со знанием языков)
Обратите особое внимание на следующие два вопроса. Они особенно важны с точки зрения точности результатов настоящего исследования.

33. Какие из приведенных ниже критериев учитываются при найме или отборе постредакторов МП в вашей компании или организации?*

	Обязательно	Важно	Желательно	Неважно
Умение постредактировать перевод в обоих направлениях
Умение работать со средствами CAT
Сертификаты по постредактированию от профессиональной ассоциации (ProZ, TAUS и т.д.)
Опыт руководства проектами
Умение работать с системами МП
Навыки предварительного редактирования или работы с контролируемыми языками (CL)
Опыт постредактирования результата МП
Производительность (скорость обработки контента)
Навыки в области контроля качества (QA)
Навыки редактирования и корректуры
Навыки использования технологии автоматического распознавания речи (ASR) или сенсорно-визуальных технологий
Знание конкретного языка (вариант, подъязык)
Знание предметной области или специализация в этой области
Технические навыки: макросы, xliff, tmx, Java, регулярные выражения и т.д.
Навыки управления терминологией и анализа информации
Навыки оценки качества перевода (TQA) (баллы, показатели, оценка и т.д.)
Высшее образование в области переводов или смежных дисциплинах

34. Оцените следующие навыки и компетенции согласно их важности для профессионального постредактора (1 = почти нет | 5 = очень важно).*

	1	2	3	4	5
Умение принимать решение: редактировать или отвергать (переводить с нуля) результат МП
Умение редактировать согласно руководствам по постредактированию
Умение добиваться качества "ручного перевода" при постредактировании (полное постредактирование)
Умение добиваться "достаточно хорошего" качества перевода при постредактировании (частичное постредактирование)
Умение предварительно редактировать исходный текст согласно нормам контролируемых языков
Умение обучать и настраивать МП
Умение выявлять ошибки МП
Умение применять правильную стратегию корректуры
Умение советовать, когда постредактирование МП является адекватным способом обработки текста или проекта
Умение предоставлять обратную связь для разработчиков решений МП
Способность изучать новые технологии

35. В каких случаях качество постредактирования признается неудовлетворительным?*

Такого у нас не случаетсяНедостаточный объем постредактирования (необходимые изменения не внесены в результат МП)Излишний объем постредактирования (внесены ненужные, "вкусовые" правки)Выполнено псевдоредактирование (постредактор добавил ошибки, которых не было в начальном результате МП)Я не знаюOther
36. Применяется ли специальное тестовое задание для постредакторов, отличное от заданий для переводчиков?*

ДаНет

Проект по постредактированию МП
Задания по постредактированию МП
37. Выдаются ли специальные задания по постредактированию МП, отличные от обычных?*

Да, мы предоставляем подробную информацию: например, о системе МП, методах ее обучения, показатели и баллы качества, руководства по постредактированиюДа, мы предоставляем некоторую дополнительную информацию: описание рабочего процесса или руководства по постредактированиюНет
38. Какие из следующих пунктов включает в себя задание по постредактированию?*

Описание контента (тип текста, целевая аудитория, анализ исходного текста и т.д.)Примеры, демонстрирующие, когда стоит отказаться от результата МП (= перевести с нуля)Сведения об обучении данной системы МП и наиболее частотные ошибкиПоказатели качества для результата МПСведения о принципе работы данного типа МП (гибридный, на основе правил, статистический, нейронный)Название системы машинного переводаРуководства по постредактированию: общий список того, что стоит и чего не стоит делать (например: "исправление орфографических ошибок: ДА", "улучшение стиля: НЕТ")Руководства по постредактированию: список примеров, подобранных для конкретной языковой парыУровень постредактирования: частичное или полноеOther
Руководства по постредактированию МП
39. Какие руководства по постредактированию МП выдаются постредакторам?*

Разработанные в компании с учетом потребностей всей компании или организацииРазработанные в компании с учетом типа контента или языкаРуководства по постредактированию TAUSТолько указание уровня постредактирования (частичное или полное)Other
Обратная связь от постредакторов для улучшения качества МП
40. Должны ли постредакторы предоставлять отзывы по качеству МП для дальнейшей настройки?*

ДаНет
41. Какие данные постредакторы присылают по завершении проекта по постредактированию МП?*

Примеры повторяющихся ошибок: просто список словПримеры повторяющихся ошибок (в структурированном шаблоне): исходный текст, результат МП, результат постредактированияОбщее описание качества работы системы машинного переводаТипы ошибок: порядок слов, синтаксис, грамматика, орфография, пунктуация, терминология и т.п.Степень серьезности ошибок: критическая, серьезная, незначительная, неважная и т.д.Примеры ошибок в исходном тексте, которые повлияли на ошибки МПOther
TQA (Оценка качества перевода)
42. Используется ли система оценки качества перевода (TQA) для проектов по постредактированию МП?*

НетДа, система встроена в средство CATДа, система не встроена в средство CATOther
43. Определена ли модель оценки качества перевода в соответствии со стратегией управления рисками?*

ДаНетЯ не знаю
44. Какая из перечисленных ниже систем TQA используется в процессе?*

АТАITS 2.0LISA QA MetricMQM (Multidimensional Quality Metrics)MTM LinguaSoft QA ModelSAE J2450SDL TMS Classic ModelTAUS DQF (offline)TAUS DQF Dashboard (online)НикакаяOther

Обучение постредактированию машинного перевода
45. Предусмотрено ли в вашей компании/организации обучение постредактированию МП?*

Мы никогда не проводили обучениеМы провели обучение по крайней мере один разОбучение постредактированию МП проходит регулярно
46. Кто проходит обучение постредактированию МП?*
47. Изменяется ли программа в зависимости от того, кто проходит обучение?*

ДаНет
48. Кто проводит обучение?*

Штатные сотрудникиМы просим пройти курс по постредактированию организации TAUSOther
49. Кто обучает штатных сотрудников?*

Штатные сотрудникиОбучение проводится в рамках курса TAUSOther
50 Кто обучает внештатных сотрудников?*

Штатные сотрудникиОбучение проводится в рамках курса TAUSOther
51. Как организовано обучение?*

ОчноеОнлайн (видеоконференции)Онлайн (запись)Очно-заочноеOther
52. Как организовано обучение штатных сотрудников?*

ОчноеОнлайн (видеоконференции)Онлайн (запись)Очно-заочноеOther
53. Как организовано обучение внештатных сотрудников?*

ОчноеОнлайн (видеоконференции)Онлайн (запись)Очно-заочноеOther
54. Известно ли вам, что включает в себя обучение, проводимое штатными сотрудниками?*

ДаНет
55. Какие элементы включает в себя обучение?*

Описание типов контента и типов текста с точки зрения применения МПИнтеграция средств CAT и систем МПОценка МП: автоматическая и на основе эталона (показатели качества)Оценка МП: ручная (выставление баллов, ранжирование переводов, категоризация ошибок)Типы МП: на основе правил, на основе примеров, статистические, гибридные или нейронныеОтношение к постредактированию: принятие решения, когда следует отказаться от результата МП и переводить с нуляРуководства по постредактированию: исчерпывающий список и примеры для нужной языковой парыУровни постредактирования: частичное и полноеПрактические задания по постредактированию для необходимой языковой парыРиски постредактирования: недостаточный объем редактирования, излишнийобъем редактирования и псевдоредактированиеТехники и стратегии постредактирования (перестановка, замена, добавление, удаление)Технология постредактирования: средства постредактирования, автоматическое распознавание речи, сенсорный экран и т.д.Предварительное редактирование и контролируемые языкиИнструменты отслеживания производительностиОценка качества или степень уверенности (прогноз, без эталона постредактирования)Other

56. Какие элементы включает в себя обучение для разных категорий слушателей?*

	Для штатных сотрудников	Для внештатных сотрудников
Описание типов контента и типов текста с точки зрения применения МП
Интеграция средств CAT и систем МП
Оценка МП: автоматическая и на основе эталона (показатели качества)
Оценка МП: ручная (выставление баллов, ранжирование переводов, категоризация ошибок)
Типы МП: на основе правил, на основе примеров, статистические, гибридные или нейронные
Отношение к постредактированию: принятие решения, когда следует отказаться от результата МП и переводить с нуля
Руководства по постредактированию: исчерпывающий список и примеры для нужной языковой пары
Уровни постредактирования: частичное и полное
Практические задания по постредактированию для необходимой языковой пары
Риски постредактирования: недостаточный объем редактирования, излишний объем редактирования и псевдоредактирование
Техники и стратегии постредактирования (перестановка, замена, добавление, удаление)
Технология постредактирования: средства постредактирования, автоматическое распознавание речи, сенсорный экран и т.д.
Предварительное редактирование и контролируемые языки
Инструменты отслеживания производительности
Оценка качества или степень уверенности (прогноз, без эталона постредактирования)

Технологии и средства
57. На каком принципе машинного перевода основана применяемая в вашей компании или организации система МП?*

МП на основе правилСтатистический МПНейронный МПЯ не знаюOther
58. Какая система/модуль МП чаще всего используется для проектов с постредактированием?
Основная система МП*
Дополнительная система МП (если применимо)
54_1. Какой источник МП Вы используете?*
59. Используются ли существующие базы переводов и(или) глоссарии для обучения, настройки и отладки МП?*

ДаНетЯ не знаю
60. Интегрируется ли используемая система МП с иными средствами?*

Да, c ПО для локализацииДа, c ПО для создания субтитровДа, c ПО для локализации и ПО для создания субтитровНетOther
62. Объединяются ли результаты МП и совпадения из базы переводов в редакторе?*

ДаНет
Интеграция TM/МП отсутствует
63. В каком средстве выполняется постредактирование МП?*

В текстовом редактореВ редакторе МПOther
Интеграция TM/МП
64. В какой среде интегрируются результаты обработки TM и МП?*

В среде CATВ редакторе МПOther
65. Какие средства CAT используются наиболее часто?
Основное средство CAT*
Дополнительное средство CAT
66. Видит ли постредактор источник получения результата перевода?*

ДаНетЯ не знаю
67. Используются ли "восстановленные" сегменты? (Совпадения из баз ТМ и результаты МП, объединенные в неточное совпадение для постредактирования)*

ДаНетЯ не знаю
68. Какое средство применяется для отслеживания производительности?*

Таблицы ExcelKlokСистемы TMS, такие как Plunet, XTRF, Lotus, Everwin, Trello, Dapulse и т.д.Приложение QualitivityСобственные приложенияTAUS DQFНетOther
69. Используют ли постредакторы какие-либо из перечисленных ниже инструментов для выполнения контроля качества (QA)?*

AntidoteCheckmateContentQuoglobalReviewLanguage ToollexiQAProject Open Translation QualityQA DistillerTQAuditorVerifikaXbenchНетOther
70. Какие средства контролируемого написания текстов используются чаще всего?*

AcrolinxCLATCongreeCrossAuthorHyperSTEMaxITMindReaderНикакие, только средства обработки текстовOther

Мнения и впечатления
71. Как вы считаете, соответствуют ли существующие курсы обучения постредактированию задачам подготовки профессиональных постредакторов?*

ДаНетOther
72. Хотели ли бы вы иметь доступ к онлайн-платформе, позволяющей вашей компании/организации посылать задания на постредактирование постредакторам, только проходящим обучение?*

ДаНетOther
73. Знаете ли вы о публикациях или существующих работах по любым из указанных ниже стандартов?*

ISO 18587:2017 "Услуги перевода — Постредактирование результатов машинного перевода"ASTM WK46396 "Новый подход к разработке показателей качества перевода"НетOther
74. Если у вас возникли комментарии к вопросам данного исследования, укажите их в поле ниже.
Благодарим за участие!
Если вы согласны принять участие в дополнительном обсуждении некоторых аспектов данного исследования, пожалуйста, укажите свой адрес электронной почты и контактные данные ниже:
example@example.com
ФИО:

ИмяОтчествоФамилия
Если вы хотите только получить отчет с результатами данного исследования, пожалуйста, укажите свой адрес электронной почты в поле ниже:
example@example.com

Благодарим вас за время, потраченное на ответы.
В настоящем исследовании принимают участие только поставщики лингвистических услуг, компании и организации, которые переводят тексты с использованием машинного перевода с последующим постредактированием.
Общественные организации, например, негосударственные организации и государственные органы, в настоящий момент не принимают участия в исследовании. Однако весьма вероятно, что подобное исследование будет проведено и среди таких организаций.

Если бы вы хотели принять в нем участие, пожалуйста, оставьте свои контактные данные ниже:
ФИО:

ИмяОтчествоФамилия
E-mail:
example@example.com
Организация, негосударственная организация, учреждение:

Should be Empty:

Машинный перевод (МП) и постредактирование (PEMT, MTPE) в переводческой отрасли

Основная информация

Проекты по постредактированию машинного перевода

Соглашение между заказчиком и поставщиком лингвистических услуг

Текущие тенденции в проектах по постредактированию МП

Контролируемый язык и контролируемое написание текста

Критерии отбора постредакторов

Задания по постредактированию МП

Руководства по постредактированию МП

Обратная связь от постредакторов для улучшения качества МП

TQA (Оценка качества перевода)

Обучение постредактированию машинного перевода

Технологии и средства

Интеграция TM/МП отсутствует

Интеграция TM/МП

Мнения и впечатления

Благодарим за участие!