Хранилище данных расследований
Хранилище данных расследований (IDW) — это база данных с возможностью поиска , которой управляет ФБР . Она была создана в 2004 году. Большая часть характера и объема базы данных засекречена . База данных представляет собой централизованное объединение нескольких федеральных баз данных и баз данных штатов, включая уголовные дела различных правоохранительных органов , Министерства финансов США ( Сети по борьбе с финансовыми преступлениями FinCEN) и публичных баз данных записей. Согласно показаниям Майкла Морхарта перед комитетом Палаты представителей по финансовым услугам в 2006 году, «IDW представляет собой централизованное, закрытое через Интернет хранилище данных разведки и расследований. Эта система, поддерживаемая ФБР, позволяет стране запросить информацию, имеющую отношение к расследованиям и разведывательным вопросам». [1]
Обзор
[ редактировать ] | Этот раздел необходимо обновить . ( февраль 2017 г. ) |
Размер базы данных, похоже, быстро растет. В 2004 году, согласно запросу правительства на управление проектом, его составлял примерно 10 ТБ размер . По словам одного из сотрудников ФБР, в 2005 году в IDW содержалось около 100 миллионов документов. В 2006 году он содержал более 560 миллионов документов и был доступен более чем 12 000 человек. Согласно веб-сайту ФБР, по состоянию на 22 августа 2007 года база данных содержала 700 миллионов записей из 53 баз данных и была доступна 13 000 человек по всему миру.
По состоянию на 2007 год [update]ФБР является объектом иска, поданного EFF ( Electronic Frontier Foundation ) из-за отсутствия публичного уведомления с описанием базы данных и критериев включения личной информации, как того требует Закон о конфиденциальности 1974 года . Иски являются результатом двух запросов в соответствии с Законом о свободе информации, поданных EFF в 2006 году.
Частично его построила корпорация Chiliad. [2] [3] Управление технического директора ФБР, [4] и другие. В число компаний, перечисленных в файлах FOIA, входит Northrop Grumman. [5] и другие.
Цель
[ редактировать ]Хранилище данных расследований – Секрет (IDW-S) «предоставляет данные и услуги по обработке/анализу данных агентам и аналитикам ФБР при выполнении ими антитеррористических, контрразведывательных и правоохранительных миссий». Основная подсистема поддерживает Контртеррористический отдел (CTD), Подразделение специальных мероприятий, а через DOCLAB-S — Объединенный комитет по расследованиям разведки (JICI) и IntelPlus. [6]
Согласно электронному письму от 2005 года, «IDW также будет использоваться для уголовных и других санкционированных расследований, не связанных с CT, по мере его развития». (CT — это борьба с терроризмом) [7]
Подсистемы
[ редактировать ]Внутри системы были подсистемы IDW-S Core, SPT и DOCLAB-S. [8]
Группа специальных проектов (СПТ):
позволяет быстро импортировать новые специализированные источники данных. Эти источники данных не доступны обычным пользователям IDW, а вместо этого предоставляются небольшой группе пользователей, которым продемонстрирована «необходимость знать». Система SPT по своим функциям аналогична системе IDW-S, но основным отличием является другой набор источников данных. Система SPT предоставляет своим пользователям доступ не только к стандартному хранилищу данных IDW, но и к специализированному хранилищу данных SPT. [9]
Конфиденциальность
[ редактировать ]Согласно внутренним электронным письмам, ФБР провело несколько оценок воздействия на конфиденциальность (PIA) системы IDW. Они работали с юристами из Отдела закона о национальной безопасности (NSLB), чтобы попытаться убедиться, что их система соответствует различным законам, касающимся обмена информацией и секретности. [10] (например, правило 6e Федеральных правил уголовного судопроизводства относительно секретности материалов Большого жюри). [11] ).
Группа по политике обмена информацией (ISPG) сформировала группу дискреционного контроля доступа (DACT) для работы над «утверждением наборов данных» и «требованиями к контролю доступа» для IDW и DataMart, а также реагированием на запросы других агентств разведывательного сообщества о доступе. [12]
На веб-сайте EFF FOIA IDW говорится: «Несмотря на огромное количество личной информации, содержащейся в IDW, ФБР никогда не публиковало уведомление о Законе о конфиденциальности, описывающее систему или объясняющее способы использования записей». [13]
В 2005 году было также электронное письмо от кого-то из Управления Генерального совета (OGC) о «предварительных размышлениях сотрудников о том, что, возможно, нам следует ограничить требования ФБР PIA системами, не относящимися к NS» (NS - это национальная безопасность). [14] Также было электронное письмо от 2006 года, в котором говорилось, что «системы национальной безопасности освобождены от электронного правительства». [15] очевидно, имеется в виду Закон об электронном правительстве 2002 года , в котором есть раздел, посвященный конфиденциальности.
Источники данных
[ редактировать ]IDW использовала множество источников данных. Документы FOIA от EFF сильно отредактированы, но некоторые из источников следующие:
- Автоматизированная система поддержки дел ФБР (ACS), часть системы электронного делопроизводства (ECF) [16]
- Документы расследований Объединенного разведывательного комитета (JICI), [17] с текстом OCR [18]
- «Новости с открытым исходным кодом» (публичные веб-сайты, такие как Washington Post и другие) [19]
- Безопасная сеть автоматического обмена сообщениями (SAMNet) [17]
- Файл о жестоких бандах и террористических организациях (VGTOF)
- Программа DARPA TIDES («новости с открытым исходным кодом», которые были организованы и собраны)
- Файловые комнаты IntelPlus с текстом OCR [18]
- Национальный центр криминальной информации ФБР (NCIC) [16]
- Отдел управления записями ФБР (RMD), Лаборатория документов (DocLab), FBIHQ
- МиТАП [20] (собирает данные из общедоступных источников, веб-сайтов и т. д.)
- Источники данных, специфичные для SPT (неполный список, в файлах FOIA большая часть отредактирована):
- Выдержки из единого индекса имен (UNI)
- Финансовый центр (ФинСен), [21] включая Закона о банковской тайне данные [22]
- «Различные источники», включая Управление транспортной безопасности. [23]
- Контртеррористический отдел ФБР (CTD)
- Телефонные номера/адреса от АСЦ
- Данные дела от ACS
- Список наблюдения за террористами (TWL) [24]
- «Другие данные NJTTF»
- DoS ... Потеряны/украдены паспортные данные
- Список запрещенных полетов от TSA
- избранных от TSA Список
- ACS/ECF, за исключением некоторых типов случаев
- Технические дискуссии ЦРУ (TD) и отчеты разведывательной информации (IIR) без TS/SCI с 1978 по май 2004 г. [25]
Также шли разговоры о объединении FTTTF «Data Mart» с IDW. [26]
Данные в IDW классифицированы на уровне «Секретно» или ниже. Более высокие категории не допускаются и могут быть удалены. [27]
См. также
[ редактировать ]
- Разведка с открытым исходным кодом
- Индекс ФБР
- DCSNet
- Система загрузки и анализа данных
- Система хранилища данных. Система электронного наблюдения. Система управления данными.
- Проект ШЕМРОК (АНБ)
- Проект МИНАРЕТ (АНБ)
Ссылки
[ редактировать ]- Источники проконсультированы
- ЭФФ. «FOIA: Хранилище данных расследований Министерства юстиции» . Проверено 18 марта 2009 г.
- ЭФФ (17 октября 2006 г.). «EFF подает в суд за информацию об огромной базе данных ФБР с личной информацией: «Хранилище данных расследований» включает сотни миллионов записей» . Проверено 17 марта 2009 г.
- ФБР. «Файлы Закона EFF о свободе информации (FOIA), 8 апреля 2008 г., idw02» (PDF) . Фонд электронных границ . Проверено 17 марта 2009 г. (Содержит различные электронные письма из ФБР относительно IDW)
- ФБР. «Файлы Закона EFF о свободе информации (FOIA), 8 апреля 2008 г., idw01» (PDF) . Фонд электронных границ . Проверено 18 марта 2009 г. (Содержит различные электронные письма из ФБР относительно IDW)
- ФБР. «Файлы Закона EFF о свободе информации (FOIA), 9 июня 2008 г., idw04» (PDF) . Фонд электронных границ . Проверено 18 марта 2009 г. (Содержит различные электронные письма из ФБР относительно IDW)
- ФБР (6 сентября 2006 г.). «В цифрах: трансформация ФБР с 2001 года» . Проверено 17 марта 2009 г.
- Отдел информационных ресурсов ФБР (IRD) (3 декабря 2003 г.). «Хранилище данных расследований-СЕКРЕТНО (IDW-S), План обеспечения безопасности системы» (PDF) . Фонд электронных границ. п. 58 . Проверено 17 марта 2009 г.
- Отдел информационных ресурсов ФБР, Секция управления данными и информацией (24 января 2005 г.). «Хранилище данных расследований — секрет (IDW-S), план обеспечения безопасности системы» (PDF) . Фонд электронных границ. п. 13 . Проверено 18 марта 2009 г.
- Отдел информационных ресурсов ФБР, Секция управления данными (01 декабря 2004 г.). «Хранилище данных расследований, Руководство для привилегированных пользователей» (PDF) . Фонд электронных границ. п. 9 . Проверено 18 марта 2009 г.
- Управление ФБР по управлению программой (29 ноября 2004 г.). «Концепция безопасности операций (S-CONOPS), программа хранилища данных расследований (IDW)» (PDF) . Фонд электронных границ. п. 50.
- Гросс, Грант (17 октября 2006 г.). «EFF подает иск с целью получить информацию о базе данных ФБР» . Сетевой мир (перепечатка статьи службы новостей IDG) . Архивировано из оригинала 24 января 2007 года . Проверено 3 октября 2007 г.
- Морхарт, Майкл Ф.А. (26 мая 2005 г.). «Заявление Майкла Ф.А. Морхарта, начальника отдела операций по финансированию терроризма, контртеррористического отдела Федерального бюро расследований, перед комитетом Палаты представителей по финансовым услугам» . Проверено 17 марта 2009 г.
- Накашима, Эллен (30 августа 2006 г.). «ФБР демонстрирует базу данных по борьбе с терроризмом» . Вашингтон Пост .
- Сноски
- ^ Морхарт 2005, соч. цит.
- ^ «Пример Чилиада» (PDF) . Архивировано из оригинала (PDF) 24 мая 2012 г. Проверено 18 марта 2009 г.
- ^ Дэвид Гарднер (30 августа 2006 г.). «ФБР демонстрирует базу данных по борьбе с терроризмом» . Информационная неделя . Архивировано из оригинала 13 июня 2011 г. Проверено 18 марта 2009 г.
- ^ Файлы EFF FOIA, 8 апреля 2008 г., idw01. Архивировано 4 марта 2016 г. в Wayback Machine , страница 28 связанного PDF-файла.
- ^ Файлы EFF FOIA, 8 апреля 2008 г., idw01, страница 27 связанного PDF-файла.
- ^ ФБР, План безопасности системы IDW-S, 24 января 2005 г.
- ^ Файлы EFF FOIA, 8 апреля 2008 г. idw02. Архивировано 4 марта 2016 г. в Wayback Machine , стр. 13 связанного PDF-файла.
- ^ ФБР, План безопасности системы IDW-S, 24 января 2005 г. Из документов FOIA неясно, в чем разница между IDW-S и IDW и, следовательно, находятся ли Core SPT и DOCLAB-S под IDW или IDW-S.
- ^ ФБР, S-CONOPS IDW, 29 ноября 2004 г. Архивировано 4 марта 2016 г. на Wayback Machine, страница 52 связанного PDF-файла.
- ^ Файлы EFF FOIA, 8 апреля 2008 г. idw02. Архивировано 4 марта 2016 г. в Wayback Machine . Большая часть этого релиза FOIA представляет собой электронные письма ФБР, касающиеся PIA.
- ^ Файлы EFF FOIA, 8 апреля 2008 г. idw02. Архивировано 4 марта 2016 г. в Wayback Machine , страница 73 связанного PDF-файла. Правило 6e см. https://www.law.cornell.edu/rules/frcrmp/Rule6.htm. Архивировано 4 ноября 2011 г. в Wayback Machine Cornell.
- ^ Файлы EFF FOIA, 8 апреля 2008 г., idw02. Архивировано 4 марта 2016 г. в Wayback Machine , стр. 74, 75 связанного PDF-файла.
- ^ «Веб-сайт EFF, FOIA: Хранилище данных расследований Министерства юстиции » . Архивировано из оригинала 28 марта 2009 г. Проверено 18 марта 2009 г.
- ^ Файлы EFF FOIA, 8 апреля 2008 г. idw02. Архивировано 4 марта 2016 г. в Wayback Machine , страница 10 связанного PDF-файла. В этом конкретном письме также упоминается система VCF (которая позже была отменена), в которой говорится, что PIA для VCF может «повлечь за собой существенные затраты».
- ^ Файлы EFF FOIA, 9 июня 2008 г. idw04. Архивировано 4 марта 2016 г. в Wayback Machine , страница 35 связанного PDF-файла.
- ^ Перейти обратно: а б ФБР, Руководство для привилегированных пользователей IDW, 1 декабря 2004 г.
- ^ Перейти обратно: а б ФБР, План обеспечения безопасности системы IDW-S, 3 декабря 2003 г.
- ^ Перейти обратно: а б Обновление статуса ФБР IDW, 21 сентября 2005 г.
- ^ Обновление статуса ФБР IDW, 21 сентября 2005 г. «Новости с открытым исходным кодом» в других документах упоминаются наряду с MiTAP и / или DARPA TIDES.
- ^ Примечание. В некоторых документах ФБР указано DARPA TIDES, в некоторых — MiTAP, в некоторых просто написано «Новости с открытым исходным кодом». Это связанные проекты, если не одно и то же.
- ^ Сеть по борьбе с финансовыми преступлениями
- ^ Файлы EFF FOIA, 8 апреля 2008 г., idw02. Архивировано 4 марта 2016 г. в Wayback Machine , стр. 8/9 связанного PDF-файла.
- ^ ФБР S-CONOPS IDW 2004, 29 ноября. Архивировано 4 марта 2016 г. на Wayback Machine, страница 53 связанного PDF-файла.
- ^ Файлы EFF FOIA, 8 апреля 2008 г., idw02. Архивировано 4 марта 2016 г. на странице 83 Wayback Machine связанного PDF-файла.
- ^ Файлы EFF FOIA, 8 апреля 2008 г., idw01. Архивировано 4 марта 2016 г. в Wayback Machine , страница 33 связанного PDF-файла.
- ^ Файлы EFF FOIA, 8 апреля 2008 г., idw02. Архивировано 4 марта 2016 г. на Wayback Machine . Страница 37 связанного PDF-файла
- ^ Файлы EFF FOIA, 2 апреля 2008 г., idw01. Архивировано 3 марта 2016 г. на Wayback Machine , стр. 43.