Мониторинг социальных медиа
Данные социальных медиа – это авторские сообщения (так называемый «авторский контент»), в которых пользователи выражают свое мнение (оценку, жалобу и т.п.) в Интернете возможными способами – чаще всего в социальных сетях и на специализированных форумах с отзывами (например, banki.ru). Такие отзывы получили термин «социальные медиа», так как отзывы представляют собой средства массовой информации (нацеленной на то, чтобы ее прочитали другие люди), и в большинстве случаев читатели отзывов имеют возможность комментировать написанное (отсюда слово «социальные»).Существует несколько способов автоматического сбора данных социальных медиа. Первый способ – это поисковые машины и их API.
API — Application Programming Interface — набор классов, процедур и функций от администрации поисковых систем и социальных сетей для использования внешними разработчиками — является наиболее «правильным» и наиболее удобным в плане проектирования «сборщика данных». Каждый сервис накладывает на свой API ряд ограничений.
Поисковые машины (Яндекс, Google и т. д.) дают наиболее полную картину по поисковым запросам. Однако поисковики больше «заточены» на скорость предоставления результата, и из-за этого выдача бывает неполной.
Второй способ – это API социальных сетей. Основная проблема сбора данных здесь – это особенность ограничений, которые накладывает каждая социальная сеть (от ограничения на количество запросов в минуту до высоких требований к приложению).
Третий способ – это специально написанные программы-роботы, которые заходят на определенные страницы сайта и считывают всю информацию со страницы, а затем создают базу, распределяя информацию по нужным параметрам.
На сборе базы данных отзывов из социальных медиа специализируется ряд компаний. Они используют разные способы сбора данных, и от специфики этих способов зависит качество итоговой базы.
РАДАР для работы с данными SM использует несколько способов получения данных: работа со специализированными компаниями – системами мониторинга, собственный робот (на данный момент в полном режиме работает на сайте banki.ru, и в тестовом – в социальных сетях Вконтакте, Livejournal, Twitter), а также ручной поиск по ЯППБ (Яндекс.Поиск по блогам).