История FineReader: так создавалась легенда (часть II)

Моя цель - предложение широкого ассортимента товаров и услуг на постоянно высоком качестве обслуживания по самым выгодным ценам.

Прежде чем перейти к статье, хочу вам представить, экономическую онлайн игру Brave Knights, в которой вы можете играть и зарабатывать. Регистируйтесь, играйте и зарабатывайте!

FineReader в человеческом обличии по мнению нейросети
FineReader в человеческом обличии по мнению нейросети

Мы продолжаем изучать летопись функционального развития легендарного редактора FineReader PDF. Первую часть 30-летней истории можно прочитать здесь. А сейчас перенесемся в середину нулевых. 

2005: ABBYY FineReader 8.0

В этот раз ждать новой версии пришлось всего год. Достигнув высоких показателей точности и качества распознавания, разработчики переключили внимание на другой важный компонент – скорость.

Иконка ABBYY FineReader 8.0
Иконка ABBYY FineReader 8.0

В восьмой версии появился новый режим распознавания, позволяющий в несколько раз ускорить обработку качественно отпечатанных документов. Более того, реализовано автоматизированное выполнение типовых задач распознавания, в том числе и по собственным сценариям. 

Другой вектор, в котором целенаправленно и последовательно двигалась программа, – расширение диапазона работы с PDF-файлами. Вместе с общей скоростью распознавания выросла и скорость преобразования документов этого формата, а также усовершенствована технология их обработки. Теперь программа предварительно анализировала содержимое файла, определяя наличие текстовых блоков, и принимала решение о его распознавании или извлечении текста из текстового слоя.

Splash Screen ABBYY FineReader 8.0
Splash Screen ABBYY FineReader 8.0

Впервые в продукте появилась функция защиты PDF-файлов паролем. По желанию пользователь мог установить пароль на открытие файла или на внесение любых изменений. При преобразовании PDF-файла и сохранении результатов распознавания в форматы MS Word, PDF и HTML FineReader 8.0 по умолчанию восстанавливал все гиперссылки, найденные в исходном документе. Также впервые в комплект поставки системы включена утилита для распознавания скриншотов.

Повышено качество распознавания факсов и документов, отсканированных с низким разрешением, на новый уровень выведено распознавание изображений, полученных с помощью цифровой камеры. И это стало большим прорывов для программы, так как цифровые снимки отличаются от отсканированных изображений, и способ их распознавания и обработки также устроен по-другому. FineReader 8.0 научилась отличать сфотографированные документы от отсканированных и применять для обработки снимков новую адаптивную технологию распознавания.  

Интерфейс ABBYY FineReader 8.0
Интерфейс ABBYY FineReader 8.0

Для пользователей, которым необходимо оцифровывать печатные издания (книги, журналы), в ABBYY FineReader 8.0 появилась функция «выпрямления» строк. Она помогала  устранять искривленные строки вблизи сгиба. 

Интерфейс ABBYY FineReader 8.0
Интерфейс ABBYY FineReader 8.0

Сторонние эксперты, тестировавшие вышедший релиз, подчеркивали, что конкурентов у продукта в настоящее время (2005 год ), попросту нет. 

2007: ABBYY FineReader 9.0

Вернувшись к привычному двухгодичному ритму выпуска продуктов, ABBYY презентовала FineReader 9.0 в 2007 году. 

Иконка ABBYY FineReader 9.0
Иконка ABBYY FineReader 9.0

В ходе работы над новой версией компания особенно тщательно проработала пользовательские фидбеки и запросы рынка. После плотного общения с аудиторией, проведенной серии опросов и фокус-групп решено было акцентировать внимание не столько на внутренней начинке, сколько на внешней оболочке. ABBYY FineReader 9.0 получила новый интерфейс с современным для своего времени UX\UI. Во главу угла был поставлен принцип простоты и понятности для того, чтобы даже у человека, который впервые сталкивается с продуктом, не возникло трудностей в понимании его устройства и нахождении основных инструментов.  

Splash Screen ABBYY FineReader 9.0
Splash Screen ABBYY FineReader 9.0

Качественно новый шаг был сделан и в том, как система воспринимает поступивший для обработки документ. В 9-ой версии были внедрены технологии, позволяющие проводить анализ и распознавание документа как целостного объекта. Как комментировали тогда разработчики, идея и способ ее реализации обдумывались на протяжении нескольких лет, а с появлением новых технических возможностей наконец-то получилось их воплотить. Новая технология Adaptive Document Recognition Technology (ADRT) позволила системе воспринимать все разрозненные элементы, которые по сути формируют логическую структуру документа (колонтитулы, сноски, подписи, диаграммы, стили, шрифты, нумерацию), как единое целое. Эта разработка значительно упростила работу с сложными многостраничными файлами.

Интерфейс ABBYY FineReader 9.0
Интерфейс ABBYY FineReader 9.0

Выход ABBYY FineReader 9.0 позволил компании сделать огромный шаг в направлении международного рынка. Релиз впервые включал расширенную версию OCR с поддержкой иврита, китайского, японского и тайского языков. Традиционно они  признаются самыми сложными для распознавания, И неспроста: в иврите слова пишутся справа налево (а включенные в текст иностранные слова – слева направо), китайские иероглифы имеют несколько вариантов написания, в тайском языке нет пробелов между словами и, соответственно, пунктуационных знаков. Можно только представить, как пришлось помучиться разработке.

Интерфейс ABBYY FineReader 9.0
Интерфейс ABBYY FineReader 9.0

2010: ABBYY FineReader 10

Юбилейная десятая версия увидела свет в 2010 году. Компания заявила о внедрении целого ряда инновационных технологий для повышения качества и скорости работы продукта. 

Иконка ABBYY FineReader 10
Иконка ABBYY FineReader 10

Впервые внедренную в девятый релиз адаптивную технологию распознавания документов ADRT заменила ADRT2. В версии нового поколения получалось более качественно восстанавливать логическую структуру документа при распознавании. Особенно востребовано это было для обработки технических документов с множеством различных элементов. 

Вообще в этой версии акцент был сделан на повышении точности распознавания документов низкого качества – плохо пропечатанных факсов, снимков со слабым разрешением. А главной новинкой релиза стала возможность распознавать изображения, сделанные с помощью фотокамеры мобильного телефона. И это при том, что мощности камер были далеки от современных. ABBYY FineReader 10.0 вполне достойно считывала данные с таких снимков и могла сохранить их в формате MS Word, Excel, PDF.

Splash Screen ABBYY FineReader 10
Splash Screen ABBYY FineReader 10

Помимо мобильных телефонов, еще один продукт современности, к которому успешно адаптировался новый FineReader, — электронные книги. Десятая версия позволила достаточно эффективно переводить бумажные издания в электронный вид. Программа могла автоматически сохранять главы книги в отдельные HTML-файлы и восстанавливать ссылки в содержании на соответствующие разделы печатного оригинала.  

Примечательна ABBYY FineReader 10.0 и тем, что в текущей версии большое внимание получил блок функций для работы с файлами формата PDF. В некотором смысле это можно назвать поворотным моментом в дальнейшей истории продукта, который впоследствии целенаправленно трансформировался в редактор PDF.

Интерфейс ABBYY FineReader 10
Интерфейс ABBYY FineReader 10

2012: ABBYY FineReader 11

В одиннадцатой версии ABBYY FineReader, вышедшей в 2012 году,  анонсировано значительное улучшение производительности, снижение количества ошибок при распознавании и общее повышение удобства взаимодействия с продуктом. 

Иконка ABBYY FineReader 11
Иконка ABBYY FineReader 11

Что примечательно, возможности для оптимизации ресурсов были зашиты в самые разные инструменты. Так, например, появился новый черно-белый режим, который позволил ускорить обработку на 30% по сравнению с цветным. При работе с простыми по структуре документами (и с нормальным качеством печати) можно было использовать режим так называемого быстрого распознавания. В этом случае повысить производительность можно практически до 70%. Большой вклад в повышение эффективности использования вычислительных возможностей внесли и многоядерные процессоры.

С помощью этих и других приемов удалось повысить скорость обработки на европейских языках до 25% для отдельных типов документов, на иероглифических — до 40%. 

Splash Screen ABBYY FineReader 11
Splash Screen ABBYY FineReader 11

При общем увеличении скорости не пострадало и качество распознавания, совсем наоборот. В одиннадцатой версии ABBYY FineReader оптимизирована работа с тяжелыми многостраничными документами. При распознавании без искажений сохранялась их структура, более качественно получилось считывать данные из таблиц, диаграмм, колонтитулов и сносок. 

Last but not least – важные новшества в языковой части. В продукте появилась возможность распознавания арабского, вьетнамского, туркменского (латиница) языков. Также для них и некоторых других языков реализована словарная поддержка. По словам компании, ABBYY FineReader продолжал удерживать звание самой многоязычной системы распознавания в мире.

Подробный разбор одиннадцатой версии, сделанный самой компанией, есть в этом блоге

Интерфейс ABBYY FineReader 11
Интерфейс ABBYY FineReader 11

2014: ABBYY FineReader 12

Постепенно подбираемся к современности. В 2014 году выходит ABBYY FineReader 12.

Иконка ABBYY FineReader 12
Иконка ABBYY FineReader 12

К числу новых возможностей программы можно отнести мгновенную загрузку отсканированных страниц и изображений, вне зависимости от размера документа.  Фактически пользователь сразу получал доступ к просмотру, редактированию уже распознанных областей, изменению порядка страниц. Также программа научилась моментально распознавать и конвертировать выделенную область документа – отдельную цитату или абзац – без необходимости его полной обработки. 

Появился расширенный набор опций автоматической предобработки фотографий, с помощью которых можно было превращать снимки в изображения, не уступающие по качеству хорошим сканам, и сразу же архивировать их. 

Улучшить качество обработанных документов можно было за счет автоматического удаления цветных меток и сглаживания излишне пикселизированных символов.

Интерфейс ABBYY FineReader 12
Интерфейс ABBYY FineReader 12

Команда ABBYY упорно работает над более точным воссозданием и форматированием многостраничных документов со сложной структурой. В двенадцатой версии, благодаря усовершенствованной технологии ADRT, распознавание таблиц улучшено на 40%, диаграмм и графиков — на 33%.

Реагируя на обращения пользователей, разработчики сделали возможным некоторые манипуляции с многостраничным документом в фоновом режиме до завершения процесса распознавания. Пока система считывает и обрабатывает данные, можно просмотреть текст, скопировать или отредактировать фрагмент, изменить порядок страниц. 

Общая скорость обработки данных выросла на 10-15%. Что интересно, теперь продукт перед запуском процесса распознавания сам предлагал пользователю сделать выбор между двумя режимами: с приоритетом скорости или качества. В первом режиме документы обрабатывались почти в 2 раза быстрее.

Интерфейс ABBYY FineReader 12
Интерфейс ABBYY FineReader 12

Вместе с тем, ABBYY FineReader 12 «подружился» с облаками, научившись загружать документы и выгружать их после обработки в Dropbox, Google Drive, Microsoft OneDrive и другие облачные хранилища.

2017: ABBYY FineReader 14

С выходом в 2017 году ABBYY FineReader 14 была четко обозначена новая траектория развития продукта – в сторону многофункциональной обработки файлов формата PDF. 

Иконка ABBYY FineReader 14
Иконка ABBYY FineReader 14

В компании рассказали, что в дополнение к распознаванию и конвертации документов, за которое отвечает OCR, включен PDF-редактор с широким набором возможностей, а также различные средства автоматизации процесса обработки документов.  

ABBYY FineReader 14 позиционировался как универсальный инструмент для работы с разными типами документов. В число ключевых функций продукта входило распознавание графических и текстовых документов, их конвертация, редактирование файлов формата PDF, добавление, перемещение и удаление изображений, вставка, копирование и изменение порядка страниц документа, а также возможность их защиты и использования цифровой подписи. 

Интерфейс ABBYY FineReader 14
Интерфейс ABBYY FineReader 14

В программе появились фичи, без которых сегодняшние пользователи FineReader из корпоративного сегмента не могут представить себе ежедневную продуктивную работу:

  • возможность поиска по содержимому документа PDF;

  • быстрая конвертация и обработка файлов по заданному расписанию в папке Hot Folder;

  • сравнение документов.

Интерфейс ABBYY FineReader 14
Интерфейс ABBYY FineReader 14

Кстати, именно в этом релизе у продукта появился привычный современному пользователю интерфейс с элементами управления, распределенными между верхним и боковым меню, и большой площадью для просмотра и масштабирования документа.

2019: ABBYY FineReader PDF 15

ABBYY FineReader PDF 15 – последняя версия, доступная пользователям из России до ухода компании с отечественного рынка. Она вышла в 2019 году и включала важные обновления. «Начинка» продукта была усовершенствована за счет более современных инструментов  искусственного интеллекта и машинного обучения. 

Иконка ABBYY FineReader PDF 15
Иконка ABBYY FineReader PDF 15

Ключевая цель при разработке продукта, которую компания заявляла в то время, – сделать так, чтобы редактирование любых файлов в ABBYY FineReader могло осуществляться так же просто, быстро и удобно как в текстовых редакторах типа MS Word. Текущий релиз действительно позволил работать с PDF-документами, как говорится, в потоке. Пользователи могли в комфортном ритме и режиме совершать любые операции – извлекать нужные фрагменты, конвертировать их в требуемый формат, вносить корректировки в текст и элементы оформления, сравнивать версии или создавать файлы PDF из нескольких документов разного формата. Sounds Like Magic.  

Splash Screen ABBYY FineReader PDF 15
Splash Screen ABBYY FineReader PDF 15

Какие еще изменения почувствовали пользователи? Во-первых, программа стала гораздо быстрее работать с многостраничными документами. На протяжении нескольких релизов команда пошагово решала эту задачу, постепенно повышая скорость обработки таких файлов и оптимизируя точность распознавания изображений, диаграмм и таблиц. В пятнадцатой версии файлы, в том числе объемные и со сложной структурой, стали открываться на 40% быстрее. 

Во-вторых, был сделан большой шаг вперед в обработке таблиц, качество и структура которых зачастую страдает при конвертации в другой формат. Теперь программа научилась сохранять границы между ячейками, заполненные поля и форматирование, а также позволила удобно редактировать текст внутри ячеек.

Интерфейс ABBYY FineReader PDF 15
Интерфейс ABBYY FineReader PDF 15

В-третьих, использование сверточных нейронных сетей позволило существенно минимизировать ошибки распознавания PDF-документов, созданных из других приложений, в том числе PDF с битыми кодировками или некачественным текстовым слоем.  

Интерфейс ABBYY FineReader PDF 15
Интерфейс ABBYY FineReader PDF 15

Важно отметить, что в 2020 году вышел обновленный релиз пятнадцатой версии, в котором в названии продукта впервые стал фигурировать приоритетный для него формат документов – PDF. С этого момента и по сегодняшний день продукт носит имя ABBYY FineReader PDF. В этом же релизе появилась долгожданная и широко востребованная фича создания и редактирования интерактивных PDF-форм.

2022: ContentReader PDF 15

Вы находитесь тут. История продукта ABBYY FineReader PDF в России поставлена на паузу после ухода компании с отечественного рынка в 2022 году.

Иконка ContentReader PDF 15
Иконка ContentReader PDF 15

Однако, как это часто бывает, каждый конец есть лишь начало чего-то нового. Развитие технологий и продуктов для интеллектуальной обработки информации в России продолжила команда бывшего российского офиса ABBYY под новым брендом – Content AI. 

Одним из первых выпущенных нами решений стал ContentReader PDF 15 – технологический наследник FineReader. Это многофункциональный редактор PDF, который умеет также успешно справляться с любыми задачами по обработке документов этого формата, как и его легендарный предшественник.

Splash Screen ContentReader PDF 15
Splash Screen ContentReader PDF 15

Что выгодно отличает ContentReader PDF, это возможность запуска на Linux. Мы адаптировали продукт для совместимости с отечественными операционными системами и сейчас работаем над новой кроссплатформенной версией продукта. У ContentReader PDF есть своя стратегия развития. Обещаем регулярно выводить актуальные новинки с прицелом на задачи и потребности российских пользователей.  

Интерфейс ContentReader 15
Интерфейс ContentReader 15

А вот краткая версия всего вышеизложенного:

История FineReader
История FineReader

Источник: https://habr.com/ru/companies/contentai/articles/761104/


Интересные статьи

Интересные статьи

Добрый день! Меня зовут Александр, я старший специалист по тестированию в ГК Юзтех. В этой статье я постараюсь кратко рассказать историю создания новых исследовательских сценариев и поделиться с вами ...
Привет, Хабр! Сегодня я хочу продолжить разговор про методологии внедрения BI. В этом посте речь пойдет о тех методах, которые предлагают специалисты Qlik, PowerBI и Tableau. В этом посте вы узнаете, ...
Добро пожаловать  на 2-й день челленджа #30DaysOfPlaywright!Материал первого дня обучения содержал информацию о том, как настраивать и проверять нашу локальную среду для тестирования. П...
Git - это консольная утилита, для отслеживания и ведения истории изменения файлов, в вашем проекте. Чаще всего его используют для кода, но можно и для других файлов. Напр...
Сидение на необъявленном карантине можно провести с пользой, совершенствуя тело и разум. О первом мы, возможно, когда-нибудь поговорим, а пока предлагаем вам пищу для ума: подборку разноплановы...