Гибридная технология перевода Юлия Епифанцева PROMT - презентация, доклад, проект скачать

Нажмите для полного просмотра!

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №1

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №2

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №3

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №4

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №5

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №6

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №7

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №8

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №9

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №10

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №11

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №12

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №13

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №14

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №15

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №16

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №17

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №18

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №19

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №20

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №21

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №22

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №23

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №24

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №25

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №26

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №27

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №28

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №29

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №30

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №31

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №32

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №33

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №34

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №35

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №36

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №37

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №38

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №39

Гибридная технология перевода Юлия Епифанцева PROMT, слайд №40

Содержание ▲

Вы можете ознакомиться и скачать презентацию на тему Гибридная технология перевода Юлия Епифанцева PROMT. Доклад-сообщение содержит 40 слайдов. Презентации для любого класса можно скачать бесплатно. Если материал и наш сайт презентаций Mypresentation Вам понравились – поделитесь им с друзьями с помощью социальных кнопок и добавьте в закладки в своем браузере.

Слайды и текст этой презентации

Слайд 1

Описание слайда:

Гибридная технология перевода Юлия Епифанцева PROMT

Слайд 2

Описание слайда:

Машинный перевод Машинный (автоматический) перевод – процесс перевода текстов с одного естественного языка на другой с помощью компьютерной программы

Слайд 3

Описание слайда:

Основные типы систем МП Rule-based машинный перевод (RBMT) – перевод, основанный на правилах. Статистический машинный перевод (SMT).  Гибридные системы перевода (HMT)

Слайд 4

Описание слайда:

Типы RBMT Системы по типу Transfer предложение на языке входа => морфологический, грамматический, семантический анализ => преобразование в структуру выходного языка (TRANSFER) => синтез выходного предложения по полученной структуре=> предложение на языке выхода Системы по типу Interlingua предложение на языке входа => анализ входного предложения в терминах метаязыка => синтез из метаструктуры предложения выходного языка => предложение на языке выхода Разработка метаязыка = языконезависимое представление, наличие знаний о мире (онтологии, логики предикатов)

Слайд 5

Описание слайда:

Компоненты RBMT на примере PROMT Лингвистические базы данных - двуязычные словари - файлы имен, транслитерации - морфологические таблицы Модуль перевода - грамматические правила - алгоритмы перевода

Слайд 6

Описание слайда:

Двуязычные словари имеют трехуровневую структуру для настройки системы на различные предметные области: Генеральный словарь (от 50 до 250 тысяч статей) Специализированные словари (от 5 до 100 тысяч статей; охватывают различные тематики: бизнес, спорт, IT, добыча нефти и газа, металлургия...) Пользовательские словари (вспомогательные, открыты для редактирования пользователю)

Слайд 7

Описание слайда:

Словарная статья (1) Слово или выражение на входном языке Коллекция переводов (активных и неактивных) Структурированное описание различной лингвистической информации (морфологической, синтаксической, семантической) в виде набора признаков и модификаторов

Слайд 8

Описание слайда:

Словарная статья (2)

Слайд 9

Описание слайда:

Словарная статья (3) Словарная настройка на примере ‘chest’

Слайд 10

Описание слайда:

Уровни анализа предложения (1) Препроцессор Нормализация текста (удаление повторяющихся пробелов...) Токенизация входной цепочки (поиск входных словоформ в словаре с сопутствующим морфологическим анализом) Лексический анализ (контекстный анализ, различные склейки: имена, номера телефонов, даты...) Снятие омонимии (определение частей речи в случаях грамматической неоднозначности) Уровень сбора групп (соединение лексических единиц в группы) Анализ сложных предложений (выделение простых в составе сложного, синтаксическая омонимия) Семантико-синтаксический разбор (заполнение глагольного фрейма) Синтез (синтез по полученной структуре, расстановка элементов внутри группы и групп в предложении...)

Слайд 11

Описание слайда:

Уровни анализа предложения (2)

Слайд 12

Описание слайда:

Уровни анализа предложения (3)

Слайд 13

Описание слайда:

Преимущества и недостатки RBMT Преимущества - синтаксическая и морфологическая точность, - стабильность и предсказуемость результата, - возможность настройки на предметную область. Недостатки - трудоемкость и длительность разработки, - необходимость поддерживать и актуализировать лингвистические БД, - «машинный акцент» при переводе.

Слайд 14

Описание слайда:

Статистический машинный перевод (1) История Принципы SMT разработаны еще в 1949 г. Уорреном Уивером «Вторая волна» – начало 1990-х, IBM «Третья волна» – Google, Microsoft, Language Weaver, Яндекс и десятки других Статистический МП – это поиск наиболее вероятного перевода предложения с использованием данных, полученных из параллельных корпусов.

Слайд 15

Описание слайда:

Статистический машинный перевод (2) Сегодня SMT – наиболее активно разрабатываемая архитектура MT. Почему? Легко построить, если есть двуязычный корпус, ноль / минимум лингвистики Переносимость технологии на любые пары языков Лексическая гладкость Ограничения / недостатки: Ограниченность параллельных корпусов в природе и их real-life качество Плохо справляется с морфологией / синтаксисом (по сравнению с RBMT) Искажение информации (дублирование, пропуск или подмена информации) USA is to blame = США не виноват Russia is to blame = Россия виновата

Слайд 16

Описание слайда:

Выводы Обе технологии имеют свои достоинства и недостатки, но главное – они не решили задачу по получению качественного машинного перевода. МТ-сообщество ожидает прорыва в качестве перевода в гибридных моделях RBMT + SMT.

Слайд 17

Описание слайда:

Гибридная технология PROMT Объединение RBTM и статистических технологий лингвистический анализ входного предложения порождение вариантов перевода использование статистических технологий оценка и выбор лучшего варианта перевода с использованием Модели языка

Слайд 18

Описание слайда:

Этапы Гибридной технологии Обучение RBMT на основе параллельного корпуса с использованием статистических технологий Эксплуатация на основе натренированной системы

Слайд 19

Описание слайда:

Архитектура Гибридной технологии

Слайд 20

Описание слайда:

Обучение

Слайд 21

Описание слайда:

Эксплуатация

Слайд 22

Описание слайда:

Модель языка (1)

Слайд 23

Описание слайда:

Модель языка (2) Модель языка (Language Model/LM) – это набор n-грамм моноязычного корпуса с их вероятностными характеристиками. N-грамма – это последовательность слов из предложений длины n.

Слайд 24

Описание слайда:

Модель языка (3)

Слайд 25

Описание слайда:

Модель языка (4) Perplexity (PPL) – вычисляемая для предложения «степень его искаженности» по отношению к данной LM. Чем меньше PPL, тем «естественнее» предложение. Модель языка - оценка релевантности (через PPL) каждого перевода по отношению к данному корпусу, - выбор лучшего варианта среди всех порожденных.

Слайд 26

Описание слайда:

Как работает Гибридная технология Создание терминологического словаря из параллельных текстов для RBMT автоматическим путем Порождение всех возможных вариантов перевода на основе - лексических вариантов - вариантов синтеза разных конструкций - применения постредактирования  выбор лучшего варианта через Модель языка

Слайд 27

Описание слайда:

Терминологический словарь (1) Технология получения: а) на основе параллельного корпуса составляются таблицы n-грамм входного корпуса вместе с вероятностями соответствий этих n-грамм n-граммам выходного корпуса, б) на основании парсеров для входного и выходного языков, а также частотных характеристик из общего числа n-грамм извлекаются релевантные для словаря единицы с некоторой грамматической информацией (например, о валентности) создается двуязычный глоссарий в) в автоматическом режиме создается словарь для RBMT

Слайд 28

Описание слайда:

Терминологический словарь (2)

Слайд 29

Описание слайда:

Лексические варианты The restaurant features a unique space with a cozy lounge and an eclectic blend of music, art and sculpture. Rule-based Ресторан представляет собой уникальное пространство (место) с удобным залом и эклектичной смесью музыки, искусства и скульптуры. Hybrid Ресторан представляет собой уникальное пространство с удобным залом и эклектичной смесью музыки, искусства и скульптуры. (PPL==778) Ресторан представляет собой уникальное место с удобным залом и эклектичной смесью музыки, искусства и скульптуры. (PPL=522)

Слайд 30

Описание слайда:

Варианты синтеза конструкций (1) Rule-based: выбор определенной модели синтеза Hybrid: синтезирование нескольких вариантов перевода Правило синтеза: перевод конструкции to + инфинитив чтобы + инфинитив для + существительное You can use the same steps to edit the collection. Можно использовать те же самые шаги, чтобы отредактировать коллекцию. (PPL=372) Можно использовать те же самые шаги для редактирования коллекции. (PPL=358)

Слайд 31

Описание слайда:

Варианты синтеза конструкций (2) Rule-based: выбор определенной модели синтеза Hybrid: синтезирование нескольких вариантов перевода Правило синтеза: порядок следования подлежащего и сказуемого. Click Browse to browse the path for the folder in which you want newly created documents to be located. Нажмите Browse для просмотра пути к папке, в которой Вы хотите, чтобы недавно созданные документы были расположены. (PPL= 290) Нажмите Browse для просмотра пути к папке, в которой Вы хотите, чтобы были расположены недавно созданные документы. (PPL= 274)

Слайд 32

Описание слайда:

Данные для постредактирования (1)

Слайд 33

Описание слайда:

Данные для постредактирования (2) Технология : на основе параллельного корпуса выделяется таблица n-грамм входного корпуса вместе с вероятностями соответствий этих n-грамм n-граммам выходного корпуса. с платежом PayPal банковским переводом  в случае платежа PayPal посредством банковского перевода вводите банковский перевод  инициируете перевод когда Вы закончены  после окончания Вашей работы каждое усилие было приложено  были предприняты все усилия

Слайд 34

Описание слайда:

Данные для постредактирования (3) Пример применения нескольких замен сегментов машинного переводами сегментами человеческого перевода. With PayPal payment by bank transfer, you initiate a bank transfer from your bank account to your PayPal account. С платежом PayPal банковским переводом вы вводите банковский перевод с Вашего банковского счета на ваш счет PayPal. (PPL=95) В случае платежа PayPal посредством банковского перевода вы инициируете перевод с Вашего банковского счета на ваш счет PayPal. (PPL == 7)

Слайд 35

Описание слайда:

Слайд 36

Описание слайда:

Слайд 37

Описание слайда:

LM Statistics

Слайд 38

Описание слайда:

Поиск по параллельным корпусам

Слайд 39

Описание слайда:

Выводы Преимущества RBMT сохраняются: - синтаксическая и морфологическая точность, - стабильность и предсказуемость результата, - возможность настройки на предметную область. Недостатки RBMT нивелируются за счет использования параллельных корпусов и статистических методов - автоматическая настройка лингвистических баз данных (быстрое и качественное извлечение терминологии), - исчезает «машинный» акцент при перевода (варианты синтеза и постредактирование).