Jump to content

Проблема немецкого танка

Во время Второй мировой войны производство немецких танков, таких как « Пантера», было точно оценено разведкой союзников с использованием статистических методов.

В статистической теории оценки путем задача немецкого танка состоит в оценке максимума дискретного равномерного распределения выборки без замены . Проще говоря, предположим, что существует неизвестное количество элементов, которые последовательно пронумерованы от 1 N. до Берется случайная выборка этих элементов и наблюдаются их порядковые номера; проблема состоит в том, чтобы оценить N на основе этих наблюдаемых чисел.

К проблеме можно подойти, используя либо частотный вывод , либо байесовский вывод , что приводит к разным результатам. Оценка максимума совокупности на основе одной выборки дает разные результаты, тогда как оценка на основе нескольких выборок представляет собой практический вопрос оценки, ответ на который прост (особенно в частотной настройке), но не очевиден (особенно в байесовской настройке).

Проблема названа в честь ее исторического применения союзными войсками во Второй мировой войне для оценки ежемесячного темпа производства немецких танков на основе очень ограниченных данных. При этом использовалась производственная практика присвоения и прикрепления возрастающих последовательностей серийных номеров к компонентам танка (шасси, коробке передач, двигателю, колесам), при этом некоторые танки в конечном итоге были захвачены в бою союзными войсками.

Предположения

[ редактировать ]

Предполагается, что противник изготовил серию танков, отмеченных последовательными целыми номерами, начиная с серийного номера 1. Кроме того, независимо от даты изготовления танка, истории службы или серийного номера, который он носит, распределение по серийным номерам становится выявляемая при анализе, является однородной до момента проведения анализа.

Предполагаемая численность населения (N). Количество наблюдений в выборке равно k . Самый большой серийный номер образца — m . Частотный анализ показан пунктирными линиями. Байесовский анализ имеет сплошные желтые линии со средним значением и штриховкой, чтобы показать диапазон от минимально возможного значения до среднего плюс 1 стандартное отклонение). В примере показано, что если наблюдаются четыре резервуара и наибольший серийный номер равен «60», частотный анализ предсказывает 74, тогда как байесовский анализ предсказывает среднее значение 88,5 и стандартное отклонение 138,72 - 88,5 = 50,22 и минимум 60 резервуаров. В файле SVG наведите указатель мыши на график, чтобы выделить его.

Предполагая, что танкам присвоены последовательные серийные номера, начинающиеся с 1, предположим, что захвачено четыре танка, которые имеют серийные номера: 19, 40, 42 и 60.

Частотный ) предсказывает , подход (с использованием несмещенной оценки с минимальной дисперсией что общее количество произведенных танков будет:

Байесовский в подход (использование равномерного априора над целыми числами для любого достаточно большого ) предсказывает, что среднее количество произведенных танков будет очень похоже на предсказание частоты:

тогда как байесовское среднее предсказывает, что количество произведенных танков будет:

Пусть N равно общему количеству танков, которые, по прогнозам, будут произведены, m равно наибольшему наблюдаемому серийному номеру, а k равно количеству захваченных танков.

Частотный прогноз рассчитывается как:

Байесовская медиана рассчитывается как:

Байесовское среднее рассчитывается как:

Эти байесовские величины получены из байесовского апостериорного распределения:

Эта функция вероятностной массы имеет положительную асимметрию , связанную с тем, что имеется не менее 60 танков. Из-за этой асимметрии среднее значение может оказаться не самой значимой оценкой. Медиана в этом примере равна 74,5, что близко соответствует частотной формуле. Используя приближение Стирлинга , апостериорную величину можно аппроксимировать экспоненциально убывающей функцией n ,

что приводит к следующему приближению для медианы:

и следующие приближения для среднего и стандартного отклонения:

Исторический пример проблемы

[ редактировать ]
Танки «Пантера» загружаются для отправки в строевые части, 1943 год.

В ходе Второй мировой войны западные союзники прилагали постоянные усилия по определению масштабов немецкого производства и подходили к этому двумя основными способами: обычным сбором разведданных и статистической оценкой. Во многих случаях статистический анализ существенно превосходил обычный интеллект. В некоторых случаях традиционные разведывательные данные использовались в сочетании со статистическими методами, как это было в случае с оценкой производства танков «Пантера» незадолго до дня «Д» .

Командование союзников считало, что танки Panzer V («Пантера»), замеченные в Италии, с их высокоскоростными длинноствольными 75-мм/L70 орудиями, были необычными тяжелыми танками и их можно будет увидеть только на севере Франции в небольшом количестве, почти так же. кстати как Тигра меня видели в Тунисе. Армия США была уверена, что танк «Шерман» продолжит показывать хорошие результаты, как и в случае с танками Panzer III и Panzer IV в Северной Африке и на Сицилии. [а] Незадолго до дня «Д» ходили слухи, что используется большое количество танков Panzer V.

Чтобы определить, правда ли это, союзники попытались оценить количество производимых танков. Для этого они использовали серийные номера трофейных или уничтоженных танков. Основными используемыми числами были номера коробок передач, поскольку они располагались в двух непрерывных последовательностях. Также использовались номера шасси и двигателя, хотя их использование было более сложным. Для перекрестной проверки анализа использовались различные другие компоненты. Аналогичный анализ был проведен на колесах, которые были пронумерованы последовательно (т.е. 1, 2, 3, ..., N ). [2] [б] [3] [4]

Анализ колес цистерн позволил оценить количество использовавшихся форм для колес. Затем в ходе дискуссии с британскими производителями опорных катков было оценено количество колес, которые можно было бы изготовить из такого количества форм, что дало количество танков, производившихся каждый месяц. Анализ колес двух танков (по 32 опорных катка каждый, всего 64 опорных катка) позволил оценить, что в феврале 1944 года было произведено 270 танков, что значительно больше, чем предполагалось ранее. [5]

Немецкие записи после войны показали, что производство за февраль 1944 года составило 276 штук. [6] [с] Статистический подход оказался гораздо более точным, чем традиционные методы разведки, и фраза «проблема немецких танков» стала использоваться в качестве описания этого типа статистического анализа.

Оценка производства была не единственным применением анализа серийных номеров. Он также использовался для более общего понимания немецкого производства, включая количество заводов, относительную важность заводов, длину цепочки поставок (основанную на задержке между производством и использованием), изменения в производстве и использование ресурсов, таких как каучук.

Конкретные данные

[ редактировать ]

По общепринятым оценкам разведки союзников, с июня 1940 года по сентябрь 1942 года немцы производили около 1400 танков в месяц. Применяя приведенную ниже формулу к серийным номерам трофейных танков, это число было рассчитано как 246 в месяц. После войны данные по захваченному немецкому производству из министерства Альберта Шпеера показали, что фактическое число составляло 245. [3]

Оценки за некоторые конкретные месяцы даны следующим образом: [7]

Месяц Статистическая оценка Оценка интеллекта Немецкие рекорды
июнь 1940 г. 169 1,000 122
июнь 1941 г. 244 1,550 271
август 1942 г. 327 1,550 342

Подобные анализы

[ редактировать ]
Производство ракет Фау-2 было точно оценено статистическими методами.

Подобный анализ серийных номеров использовался для другой военной техники во время Второй мировой войны, наиболее успешно для ракеты Фау-2 . [8]

Заводская маркировка на советской военной технике анализировалась во время Корейской войны , а немецкая разведка — во время Второй мировой войны. [9]

В 1980-е годы некоторым американцам был предоставлен доступ к линии производства израильских танков «Меркава» . Производственные номера были засекречены, но танки имели серийные номера, позволяющие оценить объем производства. [10]

Формула использовалась в невоенном контексте, например, для оценки количества построенных компьютеров Commodore 64 , где результат (12,5 миллионов) соответствует нижней оценке. [11]

Контрмеры

[ редактировать ]

Чтобы затруднить анализ серийных номеров, серийные номера можно исключить или уменьшить полезную вспомогательную информацию. В качестве альтернативы можно использовать серийные номера, устойчивые к криптоанализу, наиболее эффективно путем случайного выбора чисел без замены из списка, который намного превышает количество созданных объектов, или путем создания случайных чисел и проверки их по списку уже присвоенных номеров; коллизии вероятны, если только количество возможных цифр не превышает более чем в два раза количество цифр в количестве произведенных объектов (где серийный номер может быть в любой базе); см . проблему с днем ​​рождения . [д] Для этого криптографически безопасный генератор псевдослучайных чисел может быть использован . Все эти методы требуют таблицы поиска (или взлома шифра) для возврата от серийного номера к производственному заказу, что усложняет использование серийных номеров: например, невозможно вспомнить диапазон серийных номеров, но каждый из них необходимо искать индивидуально. или созданный список.

Альтернативно, последовательные серийные номера могут быть зашифрованы с помощью простого шифра замены , который позволяет легко декодировать, но также легко взламывается с помощью частотного анализа : даже если начинать с произвольной точки, открытый текст имеет шаблон (а именно, числа идут последовательно). Один из примеров приведен в Кена Фоллетта романе «Код до нуля» , где шифрование серийных номеров ракеты «Юпитер-С» представлено следующим образом:

ЧАС В Н Т С V я л И Х
1 2 3 4 5 6 7 8 9 0

Кодовое слово здесь — Хантсвилл (без повторяющихся букв), чтобы получить 10-буквенный ключ. [12] Таким образом, ракета номер 13 была «HN», а ракета номер 24 — «UT».

Частотный анализ

[ редактировать ]

Несмещенная оценка с минимальной дисперсией

[ редактировать ]

Для точечной оценки (оценка одного значения суммы, ), несмещенная оценка минимальной дисперсии (оценка MVUE или UMVU) определяется следующим образом: [и]

где m — наибольший наблюдаемый серийный номер ( максимум выборки ), а k — количество наблюдаемых резервуаров ( размер выборки ). [10] [13] Обратите внимание: как только серийный номер будет обнаружен, он больше не будет находиться в пуле и больше не будет наблюдаться.

Это имеет дисперсию [10]

таким образом, стандартное отклонение составляет примерно N / k , ожидаемый размер разрыва между отсортированными наблюдениями в выборке.

Формулу можно интуитивно понимать как выборочный максимум плюс средний разрыв между наблюдениями в выборке, при этом выборочный максимум выбирается в качестве начальной оценки, поскольку он является оценкой максимального правдоподобия . [ф] с добавлением разрыва для компенсации отрицательного смещения максимума выборки в качестве оценки максимума совокупности, [г] и написано как

Это можно визуализировать, представив, что наблюдения в выборке равномерно распределены по всему диапазону, а дополнительные наблюдения находятся сразу за пределами диапазона при 0 и N + 1. Если начать с начального разрыва между 0 и самым низким наблюдением в выборке ( минимум выборки), средний разрыв между последовательными наблюдениями в выборке равен ; тот потому что сами наблюдения не учитываются при вычислении разрыва между наблюдениями. [час] . Вывод ожидаемого значения и дисперсии выборочного максимума показаны на странице дискретного равномерного распределения .

Эта философия формализована и обобщена в методе оценки максимального расстояния ; аналогичная эвристика используется для отрисовка положения на графике Q–Q , отрисовка точек выборки в точке k /( n + 1) , которая находится равномерно на равномерном распределении, с пробелом в конце.

Доверительные интервалы

[ редактировать ]

Вместо точечной оценки интервальную оценку или в дополнение к ней можно выполнять , например доверительные интервалы .Их легко вычислить, основываясь на наблюдении, что вероятность того, что k наблюдений в выборке попадут в интервал, охватывающий p диапазона (0 ≤ p ≤ 1), равна p к (в этом разделе предполагается, что розыгрыши производятся с заменой, чтобы упростить вычисления; если розыгрыши проводятся без замены, это завышает вероятность, и интервалы будут слишком консервативными).

Таким образом, выборочное распределение квантиля выборочного максимума представляет собой график x 1/ к от 0 до 1: от p -го до q -го квантиля максимума выборки m — это интервал [ p 1/ к Н , д 1/ к Н ]. Инвертирование этого значения дает соответствующий доверительный интервал для максимума совокупности [ m / q 1/ к , м / п 1/ к ].

Например, если взять симметричный 95%-ный интервал p = 2,5% и q = 97,5% для k = 5, получим 0,025. 1/5 ≈ 0.48, 0.975 1/5 ≈ 0,995, поэтому доверительный интервал составляет примерно [1,005 м , 2,08 м ]. Нижняя граница очень близка к m , поэтому более информативным является асимметричный доверительный интервал от p = 5% до 100%; для k = 5 это дает 0,05 1/5 ≈ 0,55 и интервал [ м , 1,82 м ].

В более общем плане (смещенный вниз) 95% доверительный интервал равен [ m , m /0,05] . 1/ к ] = [ м , м ·20 1/к ]. Для диапазона значений k , используя для справки точечную оценку UMVU (плюс 1 для разборчивости), это дает:

к Точечная оценка Доверительный интервал
1 2[ м , 20 м ]
2 1,5 м [ м , 4,5 м ]
5 1.21,2 м [ м , 1,82 м ]
10 1,1 м [ м , 1,35 м ]
20 1,05 м [ м , 1,16 м ]

Непосредственные наблюдения:

  • Для небольших размеров выборки доверительный интервал очень широк, что отражает большую неопределенность оценки.
  • Диапазон быстро сужается, отражая экспоненциально убывающую вероятность того, что все наблюдения в выборке будут значительно ниже максимума.
  • Доверительный интервал имеет положительную асимметрию, поскольку N никогда не может быть ниже максимума выборки, но потенциально может быть сколь угодно выше его.

Обратите внимание, что m / k нельзя использовать просто так (или, скорее, ( m + m / k − 1)/ k ) в качестве оценки стандартной ошибки SE , поскольку стандартная ошибка оценщика основана на максимуме совокупности (параметре) и использование оценки для оценки ошибки в этой самой оценке является круговым рассуждением .

Байесовский анализ

[ редактировать ]

Байесовский подход к проблеме немецких танков [14] заключается в рассмотрении апостериорной вероятности что количество вражеских танков является , когда количество наблюдаемых танков является и максимальный наблюдаемый серийный номер является .

Ответ на эту задачу зависит от выбора априора для . Можно продолжить, используя правильное априорное распределение по положительным целым числам, например, распределение Пуассона или отрицательное биномиальное распределение, где можно получить замкнутую формулу для апостериорного среднего и апостериорной дисперсии. [15] Ниже мы вместо этого примем ограниченный равномерный априор.

Для краткости в дальнейшем написано .

Условная вероятность

[ редактировать ]

Правило условной вероятности дает

Вероятность того, что M знает N и K

[ редактировать ]

Выражение

- условная вероятность того, что наблюдается максимальный серийный номер, , равно , когда количество танков противника, , как известно, равен , и количество замеченных танков противника, , как известно, равен .

Это

где представляет собой биномиальный коэффициент и представляет собой скобку Айверсона .

Выражение можно получить следующим образом: отвечает на вопрос: «Какова вероятность того, что конкретный серийный номер является наибольшим числом, наблюдаемым в выборке танки, при наличии танки в общей сложности?"

Можно подумать о выборке размером быть результатом индивидуальные розыгрыши без замены. Предполагать наблюдается по номеру тиража . Вероятность этого события равна:

Как видно из правой части, это выражение не зависит от и поэтому одинаково для каждого . Как можно нарисовать на разные розыгрыши, вероятность какого-либо конкретного самый большой из наблюдаемых умножить вышеуказанную вероятность:

Вероятность того, что M знает только K

[ редактировать ]

Выражение - вероятность того, что максимальный серийный номер равен один раз танки наблюдались, но до того, как были фактически обнаружены серийные номера.

Выражение можно переписать через другие величины, исключив все возможные значения. .

Априорная вероятность того, что N знает только K

[ редактировать ]

Мы предполагаем, что фиксировано заранее, поэтому нам не нужно учитывать какое-либо распределение по . Таким образом, наш априор может зависеть от .

Выражение

является достоверность того, что общее количество танков, , равно когда число наблюдаемые танки, как известно, , но до того, как были замечены серийные номера. Предположим, что это некоторое дискретное равномерное распределение

Верхний предел должна быть конечной, поскольку функция

не является функцией распределения массы. Наш результат ниже не будет зависеть от .

Апостериорная вероятность того, что N знает M и K

[ редактировать ]

При условии, что , так что априорное значение согласуется с наблюдаемыми данными:

Как , суммирование приближается (что конечно, если k ≥ 2). Таким образом, для достаточно больших , у нас есть

При k ≥ 1 режим распределения количества танков противника m .

При k ≥ 2 достоверность того, что количество танков противника равно , является

Достоверность того, что количество вражеских танков N больше n , равна

Среднее значение и стандартное отклонение

[ редактировать ]

Для k ≥ 3 N имеет конечное среднее значение :

Для k ≥ 4 N имеет конечное стандартное отклонение :

Эти формулы выведены ниже.

Формула суммирования

[ редактировать ]

Следующее тождество с биномиальным коэффициентом используется ниже для упрощения ряда, относящегося к проблеме немецких танков.

Эта формула суммы в некоторой степени аналогична интегральной формуле

Эти формулы применимы для k > 1.

Один танк

[ редактировать ]

Случайное наблюдение за одним танком из популяции из n танков дает серийный номер m с вероятностью 1/ n для m n и нулевой вероятностью для m > n . Используя обозначение скобок Айверсона, это записывается

Это условная функция распределения вероятности по массе .

Если рассматривать функцию n при фиксированном m, то это функция правдоподобия.

Оценка максимального правдоподобия для общего количества резервуаров равна N 0 = m , что явно является необъективной оценкой, поскольку истинное число может быть больше, потенциально намного больше, но не может быть меньше.

Предельная вероятность (т. е. маргинальная по всем моделям) бесконечна и является хвостом гармонического ряда .

но

где это номер гармоники .

Функция распределения массы доверия зависит от априорного предела :

Среднее значение является

Два танка

[ редактировать ]

Если наблюдаются два танка, а не один, то вероятность того, что больший из двух наблюдаемых серийных номеров равен m , равна

Если рассматривать функцию n при фиксированном m, то это функция правдоподобия.

Общая вероятность равна

а функция распределения по массе доверия равна

Медиана удовлетворяет

так

и поэтому медиана

но среднее значение бесконечен

Много танков

[ редактировать ]

Функция распределения массы доверия

[ редактировать ]

Условная вероятность того, что наибольшее из k наблюдений, взятых из порядковых номеров {1,..., n }, равно m , равна

Функция правдоподобия n — это то же выражение

Полная вероятность конечна для k ≥ 2:

Функция распределения массы доверия равна

Дополнительная кумулятивная функция распределения — это вероятность того, что N > x

Кумулятивная функция распределения – это вероятность того, что N x

Порядок величины

[ редактировать ]

Порядок количества танков противника равен

Статистическая неопределенность

[ редактировать ]

Статистическая неопределенность – это стандартное отклонение. , удовлетворяющий уравнению

Так

и

Отношение дисперсии к среднему просто

См. также

[ редактировать ]

Дальнейшее чтение

[ редактировать ]
  • Гудман, Луизиана (1954). «Некоторые практические методы анализа серийных номеров». Журнал Американской статистической ассоциации . 49 (265). Американская статистическая ассоциация: 97–112. дои : 10.2307/2281038 . JSTOR   2281038 .

Примечания

[ редактировать ]
  1. В заявлении о политике Сухопутных бронетанковых войск от ноября 1943 года делается вывод: «Рекомендация об ограничении количества танков с 90-мм пушкой не поддерживается по следующим причинам: Танк М4 широко провозглашается лучшим танком на поле боя сегодня. ...Похоже, что наши войска не боятся немецкого танка Mark VI (Тигр). Для танка Т26 не может быть иного основания, кроме концепции дуэли танк против танка, которая. считается необоснованным и ненужным». [1]
  2. ^ Нижняя граница была неизвестна, но для упрощения обсуждения эта деталь обычно опускается, считая нижнюю границу известной равной 1.
  3. ^ Ruggles & Brodie - это в основном практический анализ и резюме, а не математический - проблема оценки упоминается только в сноске 3 на странице 82, где они оценивают максимум как «выборочный максимум + средний разрыв».
  4. ^ Как обсуждалось в разделе «Атака дня рождения» , можно ожидать столкновения после чисел 1,25 H , если выбирать из H возможных выходов. Этот квадратный корень соответствует половине цифр. Например, в любой системе счисления квадратный корень из 100-значного числа примерно равен 50-значному числу.
  5. ^ В непрерывном распределении нет члена -1.
  6. ^ Учитывая определенный набор наблюдений, этот набор, скорее всего, произойдет, если максимум совокупности является максимумом выборки, а не более высоким значением (оно не может быть ниже).
  7. ^ Максимум выборки никогда не превышает максимум совокупности, но может быть меньше, следовательно, это смещенная оценка : она имеет тенденцию недооценивать максимум совокупности.
  8. ^ Например, разрыв между 2 и 7 составляет (7 - 2) - 1 = 4, состоящий из 3, 4, 5 и 6.
  1. ^ Заявление о политике AGF. Начальник штаба АГФ. Ноябрь 1943 года. МХИ.
  2. ^ Рагглс и Броди, 1947 , стр. 73–74.
  3. ^ Jump up to: а б «Гэвин Дэвис занимается математикой – Как статистическая формула выиграла войну» . Хранитель . 20 июля 2006 г. Проверено 6 июля 2014 г.
  4. ^ Мэтьюз, Роберт (23 мая 1998 г.), «Сыщики данных идут на войну, боковая панель в статье «Скрытые истины» » , New Scientist , заархивировано из оригинала 18 апреля 2001 г.
  5. ^ Боб Каррутерс (1 марта 2012 г.). Пантера V в бою . Книги Коды. стр. 94–. ISBN  978-1-908538-15-4 .
  6. ^ Рагглс и Броди, 1947 , стр. 82–83.
  7. ^ Рагглс и Броди, 1947 , с. 89.
  8. ^ Рагглс и Броди, 1947 , стр. 90–91.
  9. ^ Волц 2008 .
  10. ^ Jump up to: а б с Джонсон 1994 .
  11. ^ «Сколько компьютеров Commodore 64 было продано на самом деле?» . pagetable.com . 1 февраля 2011 года. Архивировано из оригинала 6 марта 2016 года . Проверено 6 июля 2014 г.
  12. ^ «Ракеты и ракеты» . www.spaceline.org .
  13. ^ Джойс, Смарт. «Немецкая танковая проблема» . Средняя школа Логана . Архивировано из оригинала 24 апреля 2012 года . Проверено 8 июля 2014 г.
  14. ^ Саймон, Кори (2023). «Байесовский подход к проблеме немецких танков» . Математический интеллект . arXiv : 2301.00046 . дои : 10.1007/s00283-023-10274-6 .
  15. ^ Хёле, М.; Хелд, Л. (2006). «Байесовская оценка численности населения» (PDF) . Технический отчет SFB 386, № 399, Статистический факультет Мюнхенского университета . Проверено 17 апреля 2016 г.

Цитируемые работы

[ редактировать ]
Arc.Ask3.Ru: конец переведенного документа.
Arc.Ask3.Ru
Номер скриншота №: ff43875b2a5d360676d1bb65ba139c46__1704354000
URL1:https://arc.ask3.ru/arc/aa/ff/46/ff43875b2a5d360676d1bb65ba139c46.html
Заголовок, (Title) документа по адресу, URL1:
German tank problem - Wikipedia
Данный printscreen веб страницы (снимок веб страницы, скриншот веб страницы), визуально-программная копия документа расположенного по адресу URL1 и сохраненная в файл, имеет: квалифицированную, усовершенствованную (подтверждены: метки времени, валидность сертификата), открепленную ЭЦП (приложена к данному файлу), что может быть использовано для подтверждения содержания и факта существования документа в этот момент времени. Права на данный скриншот принадлежат администрации Ask3.ru, использование в качестве доказательства только с письменного разрешения правообладателя скриншота. Администрация Ask3.ru не несет ответственности за информацию размещенную на данном скриншоте. Права на прочие зарегистрированные элементы любого права, изображенные на снимках принадлежат их владельцам. Качество перевода предоставляется как есть. Любые претензии, иски не могут быть предъявлены. Если вы не согласны с любым пунктом перечисленным выше, вы не можете использовать данный сайт и информация размещенную на нем (сайте/странице), немедленно покиньте данный сайт. В случае нарушения любого пункта перечисленного выше, штраф 55! (Пятьдесят пять факториал, Денежную единицу (имеющую самостоятельную стоимость) можете выбрать самостоятельно, выплаичвается товарами в течение 7 дней с момента нарушения.)