Составленная учеными диаграмма частот встречаемости пар слов для новостных текстов и рассказовСтатья исследователей пока не принята к публикации в рецензируемый научный журнал, но ее препринт доступен на сайте arXiv.org.
Алгоритм, придуманный авторами этой научной работы, анализирует, сколько раз любое слово из текста встречается вместе с другими словами в рассказах и новостных сообщениях. Полученные данные впоследствии сравнивали.
Оказалось, что для двух данных типов текстов этот показатель заметно отличается. Исследователи проверили созданную ими методику при помощи 400 новостных заметок, случайным образом выбранных с новостного сайта National Public Radio, и 400 случайных рассказов из базы электронной библиотеки проекта «Гутенберг». Чтобы исключить влияние исторических особенностей языка, авторы выбирали для анализа произведения писателей XX века.
Для новостных заметок точность угадывания составила 69,1 процента с погрешностью 1,22 процента, а для рассказов — 73,8 процента с погрешностью 5,15 процента, передает Lenta.Ru.
Недавно другой коллектив ученых представил еще одну работу, в которой были продемонстрированы возможности использования компьютера для анализа текстов. Исследователи разработали алгоритм, при помощи которого компьютер смог расшифровать один из мертвых языков семитской группы за несколько часов.
19.01 05:36
25
Кадры из фильма «Голодные игры»
16.01 19:44
50
Выставка CES 2012 в Лас-Вегасе
30.12 13:57
10
Главные в 2011 году разгадки тайн космоса
27.12 22:44
10
Лучшие снимки National Geographic в 2011 году
26.12 15:50
10
Самое важное в робототехнике за 2011 год
25.12 21:28
30
Фантазии на тему ёлки на «Красном Октябре»