Военная разведка полна технократов, которые добывают большие данные везде и всюду, чтобы их можно было найти, в данном случае это из социальных сетей. Почему военным нужно очищать и сохранять миллиарды и миллиарды сообщений в социальных сетях? ⁃ TN Editor
В открытом доступе в Интернете были обнаружены три неправильно настроенных корзины AWS S3, содержащих «десятки терабайт» сообщений в социальных сетях и аналогичных страниц - все они были извлечены военными США со всего мира для идентификации и профилирования лиц, представляющих интерес.
Архивы были найдены by охотник за нарушениями безопасности ветеранов Крис Викери из UpGuard во время обычного сканирования открытых хранилищ данных, размещенных на Amazon, и эти хранилища не были полностью скрыты. Сегменты были названы centcom-backup, centcom-archive и pacom-archive.
CENTCOM - это общее сокращение для Центрального командования США, которое контролирует военные операции на Ближнем Востоке, в Северной Африке и Центральной Азии. PACOM - это название Тихоокеанского командования США, охватывающее остальную часть Южной Азии, Китай и Австралазию.
Викери сказала Регистр сегодня он случайно наткнулся на них, выполняя поиск слова «COM» в общедоступных сегментах S3. После уточнения результатов поиска обнаружился архив CENTCOM, и сначала он подумал, что он связан с китайской транснациональной компанией Tencent, но быстро понял, что это был военный архив США поразительных размеров.
«Для исследования я загрузил 400 ГБ образцов, но там было много терабайт данных», - сказал он. «В основном это сжатые текстовые файлы, которые могут расширяться в десять раз, поэтому существуют десятки и десятки терабайт, и это консервативная оценка».
Только одна из корзин содержала миллиард сообщений в социальных сетях 1.8, автоматически загружаемых за последние восемь лет и до сегодняшнего дня. В основном он содержит публикации, сделанные в Центральной Азии, однако Викери отметил, что некоторые материалы взяты из комментариев, сделанных американскими гражданами.
Базы данных также содержат некоторые интересные подсказки относительно того, для чего эта информация используется. В документах упоминается тот факт, что архив был собран в рамках программы правительства США Outpost, которая представляет собой кампанию по мониторингу и влиянию в социальных сетях, разработанную для нацеливания на иностранную молодежь и удержания ее от терроризма.
Викери обнаружил в архиве файлы конфигурации разработки Outpost, а также индексы ключевых слов Apache Lucene, предназначенные для использования с поисковой системой с открытым исходным кодом Elasticsearch. Другой файл относится к Coral, который вполне может быть отсылкой к программе сбора данных Coral Reef вооруженных сил США.
«Коралловый риф - это способ анализа основного источника данных, чтобы дать аналитику возможность извлекать значительные объемы данных и обеспечивать наводящие на размышления ассоциации между людьми для построения этой социальной сети», - сказал Марк Китц, технический директор Армейской распределенной системы общего доступа. - Армия, сказал Журнал «Связь» и «Электроника» Вооруженных сил вернулся в 2012.
«Раньше мы копались в этих отчетах разведки или любых данных, которые были доступны, и это было бы очень трудоемко».
wpDiscuz