Если бы мне дали миллиард долларов на научные исследования, я бы создал большую программу в масштабе NASA по обработке естественного языка (NLP).[из
Reddit AMA Майкла Джордана, 2015]. Из данной публикации вы узнаете, есть ли рынок для приложений текстовой аналитики. И не слишком ли оптимистичен заслуженный профессор М. Джордан по поводу потенциала NLP, а лучше потратить миллиард долларов на что-то другое.
Введение
Вначале определимся с терминами.
Интеллектуальный анализ текста (англ.,
text mining) —
это технологии получения структурированной информации из коллекций текстовых документов. Обычно в это понятие
включают такие крупные задачи, как
- категоризация текста
- извлечение информации
- информационный поиск.
Часто, когда говорят о применении интеллектуального анализа текста в бизнесе — текстовой аналитики (англ.,
text analytics) — имеют в виду не просто структурированную информацию, а т.н. углубленное понимание предмета анализа (insights), которое помогает в принятии бизнес-решений. Известный эксперт Сэт Граймс определяет текстовую аналитику как
технологические и бизнес процессы применения алгоритмических подходов к обработке и извлечению информации из текста и получению глубокого понимания.
Принято считать, что формируется новый рынок когнитивно-вычислительных (
cognitive computing) продуктов. По
оценкам MarketsandMarkets глобальный рынок продуктов на основе обработки естественного языка должен составить $13.4 млрд. к 2020 году при росте в 18.4% по CAGR. Таким образом, сейчас этот рынок оценивается примерно в $5.8 млрд. В последние годы этот растущий рынок ознаменовался целым
рядом громких сделок, вроде покупки Alchemy API компанией IBM. По
другим оценкам, аналогичный рынок в Европе уже сейчас превосходит пол-миллиарда долларов и удвоится к 2019 году. Рынок Северной Америки составляет почти 40% глобального рынка текстовой аналитики и имеет
оптимистичные оценки роста.
