Александр Георгиевич Додонов , Дмитрий Владимирович Ланде , Виктор Владимирович Прищепа , Владимир Григорьевич Путятин - Компьютерная конкурентная разведка

НАЦИОНАЛЬНАЯ АКАДЕМИЯ НАУК УКРАИНЫ
ИНСТИТУТ ПРОБЛЕМ РЕГИСТРАЦИИ ИНФОРМАЦИИ

А.Г. Додонов, Д.В. Ландэ,
В.В. Прищепа, В.Г. Путятин

КОМПЬЮТЕРНАЯ
КОНКУРЕНТНАЯ РАЗВЕДКА

Киев – 2021
2

УДК 004.5
ББК 22.18, 32.81, 60.54
C95
А.Г. Додонов, Д.В. Ландэ, В.В. Прищепа, В.Г. Путятин
Компьютерная конкурентная разведка. – Киев: ТОВ
«Інжиніринг», 2021. – 354 с.
Книга посвящена рассмотрению вопросов компьютерной
конкурентной разведки, разведки в открытых ресурсах сети
Интернет. Компьютерная конкурентная разведка охватывает
автоматизированные процедуры сбора и аналитической обработки информации, которые проводятся с целью поддержки принятия управленческих решений, повышения конкурентоспособности исключительно из открытых источников в
компьютерных сетях – веб-сайтов, блогосферы, социальных
сетей, мессенджеров, баз данных. В книге рассматриваются
различные вопросы информационно-аналитической деятельности в сетевой среде. В качестве теоретических основ компьютерной конкурентной разведки рассматриваются элементы теории информации, анализа социальных сетей, информационного и математического моделирования.
Для широкого круга специалистов в области информационных технологий и безопасности.
Рекомендовано к изданию ученым советом Института проблем регистрации информации НАН Украины
(протокол № 9 от 17 февраля 2021 года)
Рецензенты:
Член-корр. НАН Украины, д.т.н., профессор В.В.Мохор
Д.т.н., профессор А.Я. Матов
Д.ю.н., профессор К.И. Беляков
 А.Г. Додонов, Д.В. Ландэ,
В.В. Прищепа, В.Г. Путятин,
2021

ISBN 978-966-2344-79-0

3

Оглавление
Введение .............................................................................................. 7
1. Конкурентная разведка и OSINT ........................................ 14
1.1. Задачи конкурентной разведки................................. 14
1.2. Особенности компьютерной конкурентной
разведки ........................................................................................ 16
1.3. Проблемы компьютерной
конкурентной
разведки ........................................................................................ 18
1.4. OSINT – разведка по открытым источникам ......... 20
1.4.1. OSINT как дисциплина разведки .......................... 20
1.4.2. Области применения OSINT .................................. 24
1.4.3. Технологии OSINT ....................................................... 26
1.4.4. Международный опыт ............................................. 29
2. Компьютерные технологии конкурентной разведки .. 31
2.1. Поиск информации в Интернете ................................ 37
2.2. Мониторинг информационного пространства...... 44
2.3. Text Mining, Information Extraction ............................ 46
2.4. Модели предметных областей ...................................... 51
2.5. Концепция Big Data.......................................................... 58
2.5.1. Понятие Больших Данных ..................................... 58
2.5.2. Техники больших данных ........................................ 62
2.5.3. Технологии и инструменты больших данных 71
2.6. Математические основы ................................................ 96
4

2.6.1. Временные ряды......................................................... 98
2.6.2. Корреляционный анализ ....................................... 104
2.6.3. Анализ Фурье ............................................................. 109
2.6.4. Вейвлет-анализ ........................................................ 112
2.6.5. Корреляция с шаблоном ........................................ 125
2.6.6. Фрактальный анализ ............................................ 127
2.6.7. Мультифрактальный анализ............................ 137
2.6.8. Сетевые модели ....................................................... 147
2.7. Реализованные технологии конкурентной
разведки ...................................................................................... 164
3. Источники информации ...................................................... 200
3.1. Веб-сайты ........................................................................... 204
3.2. Социальные сети, блоги ................................................ 209
3.2.1. Основные социальные сети ................................. 212
3.2.2. Мониторинг социальных сетей ......................... 216
3.2.3. Анализ социальных сетей .................................... 220
3.3. Глубинный веб, специальные базы данных ......... 222
3.3.1. Понятие «глубинный веб» ...................................... 223
3.3.2. Виды ресурсов глубинного веб ............................. 227
3.3.3. Сервисы работы с глубинным веб..................... 232
3.3.4. Специальные базы данных................................... 233
4. Репутационный анализ ......................................................... 239
4.1. Проблема управления репутацией ........................... 239
4.2. Моделирование репутации в сетях .......................... 244
5

4.3. Рейтингование интернет-ресурсов .......................... 252
5. Правовые вопросы конкурентной разведки................ 262
5.1. Конкурентная разведка в правовом поле ............. 262
5.2. Конкурентная разведка и защита коммерческой
тайны ............................................................................................ 265
5.3. Конкурентная разведка --">