Случайная величина

Случайная величина (также называемая случайной величиной , алеаторной переменной или стохастической переменной ) — это математическая формализация величины или объекта, которая зависит от случайных событий. ^[1] Термин «случайная величина» в своем математическом определении не относится ни к случайности, ни к изменчивости. ^[2] но вместо этого представляет собой математическую функцию , в которой

домен – это набор возможных результатов в пространстве выборки (например, набор $\{H,T\}$ каковы возможные верхние стороны перевернутой монеты $H$ или решка $T$ в результате подбрасывания монеты); и
диапазон набором представляет собой измеримое пространство (например, соответствующий домену, указанному выше, диапазон может быть $\{-1,1\}$ если скажем орел $H$ отображается в -1 и $T$ отображается в 1). Обычно диапазон случайной величины представляет собой набор действительных чисел .

Неофициально случайность обычно представляет собой некий фундаментальный элемент случайности, например, при броске игральной кости ; это также может отражать неопределенность, например, ошибку измерения . ^[1] Однако интерпретация вероятности сложна с философской точки зрения и даже в конкретных случаях не всегда однозначна. Чисто математический анализ случайных величин не зависит от подобных трудностей интерпретации и может основываться на строгой аксиоматической установке.

На формальном математическом языке теории меры случайная величина определяется как измеримая функция из пространства вероятностной меры (называемого выборочным пространством ) в измеримое пространство . Это позволяет рассмотреть меру прямого действия , которая называется распределением случайной величины; Таким образом, распределение является вероятностной мерой на множестве всех возможных значений случайной величины. Две случайные величины могут иметь одинаковое распределение, но существенно различаться; например, они могут быть независимыми .

Обычно рассматривают частные случаи дискретных случайных величин и абсолютно непрерывных случайных величин , соответствующие тому, оценивается ли случайная величина в счетном подмножестве или в интервале действительных чисел . Есть и другие важные возможности, особенно в теории случайных процессов , где естественно рассматривать случайные последовательности или случайные функции . Иногда считается, что случайная величина автоматически оценивается в действительных числах, а более общие случайные величины вместо этого называются случайными элементами .

По словам Джорджа Макки , Пафнутий Чебышев был первым человеком, который «систематически мыслил в терминах случайных величин». ^[3]

Определение

величина Случайная $X$ это измеримая функция $X\colon \Omega \to E$ из выборочного пространства $\Omega$ как набор возможных результатов в измеримом пространстве $E$ . Техническое аксиоматическое определение требует пространства выборки. $\Omega$ быть выборочным пространством тройки вероятностей $(\Omega ,{\mathcal {F}},\operatorname {P} )$ (см. теоретико-мерное определение ). Случайную величину часто обозначают заглавными латинскими буквами, например: $X,Y,Z,T$ . ^[4]

Вероятность того, что $X$ принимает значение в измеримом множестве $S\subseteq E$ написано как

\operatorname {P} (X\in S)=\operatorname {P} (\{\omega \in \Omega \mid X(\omega )\in S\})

.

Стандартный корпус

Во многих случаях $X$ имеет действительное значение , т.е. $E=\mathbb {R}$ . В некоторых контекстах термин случайный элемент (см. расширения ) используется для обозначения случайной величины не этой формы.

Когда изображение (или диапазон) $X$ конечно или бесконечно счетна , случайная величина называется дискретной случайной величиной. ^[5]^: 399 и его распределение является дискретным распределением вероятностей , т.е. может быть описано функцией вероятностной массы , которая присваивает вероятность каждому значению в изображении $X$ . Если изображение несчетно бесконечно (обычно интервал ), то $X$ называется непрерывной случайной величиной . ^[6]^[7] В особом случае, когда он абсолютно непрерывен , его распределение может быть описано функцией плотности вероятности , которая присваивает вероятности интервалам; в частности, каждая отдельная точка обязательно должна иметь нулевую вероятность абсолютно непрерывной случайной величины. Не все непрерывные случайные величины абсолютно непрерывны. ^[8]

Любую случайную величину можно описать ее кумулятивной функцией распределения , которая описывает вероятность того, что случайная величина будет меньше или равна определенному значению.

Расширения

Термин «случайная величина» в статистике традиционно ограничивается случаем с действительным значением ( $E=\mathbb {R}$ ). В этом случае структура действительных чисел позволяет определить такие величины, как ожидаемое значение и дисперсия случайной величины, ее кумулятивную функцию распределения и моменты ее распределения.

Однако приведенное выше определение справедливо для любого измеримого пространства. $E$ ценностей. Таким образом, можно рассматривать случайные элементы других множеств. $E$ , такие как случайные логические значения , категориальные значения , комплексные числа , векторы , матрицы , последовательности , деревья , множества , формы , многообразия и функции . Тогда можно конкретно обратиться к случайной величине типа $E$ или $E$ -значная случайная величина .

Эта более общая концепция случайного элемента особенно полезна в таких дисциплинах, как теория графов , машинное обучение , обработка естественного языка и других областях дискретной математики и информатики , где часто интересуются моделированием случайных изменений нечисловых данных. структуры . Тем не менее в некоторых случаях удобно представить каждый элемент $E$ , используя одно или несколько действительных чисел. В этом случае случайный элемент может опционально быть представлен как вектор действительных случайных величин (все они определены в одном и том же базовом вероятностном пространстве). $\Omega$ , что позволяет различным случайным величинам ковариироваться ). Например:

Случайное слово может быть представлено как случайное целое число, которое служит индексом словаря возможных слов. В качестве альтернативы его можно представить как случайный вектор-индикатор, длина которого равна размеру словаря, где единственными значениями положительной вероятности являются $(1\ 0\ 0\ 0\ \cdots )$ , $(0\ 1\ 0\ 0\ \cdots )$ , $(0\ 0\ 1\ 0\ \cdots )$ а позиция 1 указывает на слово.
Случайное предложение заданной длины $N$ можно представить в виде вектора $N$ случайные слова.
график Случайный на $N$ данные вершины могут быть представлены в виде $N\times N$ матрица случайных величин, значения которой задают матрицу смежности случайного графа.
функция Случайная $F$ можно представить как набор случайных величин $F(x)$ , давая значения функции в различных точках $x$ в области определения функции. $F(x)$ являются обычными вещественными случайными величинами при условии, что функция имеет действительное значение. Например, случайный процесс — это случайная функция времени, случайный вектор — это случайная функция некоторого набора индексов, такого как $1,2,\ldots ,n$ , а случайное поле — это случайная функция на любом наборе (обычно времени, пространстве или дискретном наборе).

Функции распределения

Если случайная величина $X\colon \Omega \to \mathbb {R}$ определенное в вероятностном пространстве $(\Omega ,{\mathcal {F}},\operatorname {P} )$ задано, мы можем задать вопросы типа: «Насколько вероятно, что значение $X$ равна 2?". Это то же самое, что и вероятность события $\{\omega :X(\omega )=2\}\,\!$ который часто пишут как $P(X=2)\,\!$ или $p_{X}(2)$ короче.

Запись всех этих вероятностей выходных значений случайной величины $X$ дает вероятностей распределение $X$ . Распределение вероятностей «забывает» о конкретном вероятностном пространстве, используемом для определения $X$ и записывает только вероятности различных выходных значений $X$ . Такое распределение вероятностей, если $X$ имеет действительное значение, всегда может быть отражено с помощью его кумулятивной функции распределения

F_{X}(x)=\operatorname {P} (X\leq x)

а иногда также используя функцию плотности вероятности , $f_{X}$ . В терминах теории меры мы используем случайную величину $X$ «продвинуть» меру $P$ на $\Omega$ в меру $p_{X}$ на $\mathbb {R}$ . Мера $p_{X}$ называется «распределением (вероятностей) $X$ или «закон $X$ ". ^[9] Плотность $f_{X}=dp_{X}/d\mu$ , Радона–Никодима производная $p_{X}$ относительно некоторой эталонной меры $\mu$ на $\mathbb {R}$ (часто этой эталонной мерой является мера Лебега в случае непрерывных случайных величин или считающая мера в случае дискретных случайных величин).Базовое вероятностное пространство $\Omega$ Это техническое устройство, используемое для обеспечения существования случайных величин, иногда для их построения, а также для определения таких понятий, как корреляция, зависимость или независимость, основанных на совместном распределении двух или более случайных величин в одном и том же вероятностном пространстве. На практике часто приходится распоряжаться пространством $\Omega$ в целом и просто устанавливает меру $\mathbb {R}$ который присваивает меру 1 всей вещественной линии, т. е. работает с распределениями вероятностей вместо случайных величин. См. статью о квантильных функциях для более полного изучения.

Примеры

Дискретная случайная величина

Рассмотрим эксперимент, в котором наугад выбирают человека. Примером случайной величины может быть рост человека. Математически случайная величина интерпретируется как функция, которая отображает рост человека. Со случайной величиной связано распределение вероятностей, которое позволяет вычислить вероятность того, что рост находится в любом подмножестве возможных значений, например, вероятность того, что рост находится в диапазоне от 180 до 190 см, или вероятность того, что рост либо меньше более 150 или более 200 см.

Другой случайной величиной может быть количество детей у человека; это дискретная случайная величина с неотрицательными целочисленными значениями. Он позволяет вычислять вероятности для отдельных целочисленных значений (функцию массы вероятности (PMF)) или для наборов значений, включая бесконечные наборы. Например, интересующим событием может быть «четное количество детей». Как для конечных, так и для бесконечных наборов событий их вероятности можно найти путем сложения PMF элементов; то есть вероятность четного числа детей равна бесконечной сумме $\operatorname {PMF} (0)+\operatorname {PMF} (2)+\operatorname {PMF} (4)+\cdots$ .

В таких примерах пространство выборки часто подавляется, поскольку его математически трудно описать, а возможные значения случайных величин затем рассматриваются как пространство выборки. Но когда две случайные величины измеряются в одной и той же выборке результатов, например, рост и количество детей рассчитываются для одних и тех же случайных людей, их взаимосвязь легче проследить, если признать, что и рост, и количество детей зависят от от одного и того же случайного человека, например, чтобы можно было задать вопросы о том, коррелируют ли такие случайные величины или нет.

Если ${\textstyle \{a_{n}\},\{b_{n}\}}$ являются счетными множествами действительных чисел, ${\textstyle b_{n}>0}$ и ${\textstyle \sum _{n}b_{n}=1}$ , затем ${\textstyle F=\sum _{n}b_{n}\delta _{a_{n}}(x)}$ — дискретная функция распределения. Здесь $\delta _{t}(x)=0$ для $x<t$ , $\delta _{t}(x)=1$ для $x\geq t$ . Взяв, к примеру, перечисление всех рациональных чисел как $\{a_{n}\}$ , получается дискретная функция, которая не обязательно является ступенчатой (кусочно-постоянной).

Подбрасывание монеты

Возможные результаты одного подбрасывания монеты можно описать пространством выборки $\Omega =\{{\text{heads}},{\text{tails}}\}$ . Мы можем ввести вещественную случайную величину $Y$ который моделирует выплату в 1 доллар за успешную ставку на орла следующим образом: $Y(\omega )={\begin{cases}1,&{\text{if }}\omega ={\text{heads}},\\[6pt]0,&{\text{if }}\omega ={\text{tails}}.\end{cases}}$

Если монета честная , Y имеет функцию массы вероятности. $f_{Y}$ предоставлено: $f_{Y}(y)={\begin{cases}{\tfrac {1}{2}},&{\text{if }}y=1,\\[6pt]{\tfrac {1}{2}},&{\text{if }}y=0,\end{cases}}$

Бросок кубиков

Случайную величину также можно использовать для описания процесса броска игральной кости и возможных результатов. Наиболее очевидным представлением для случая двух игральных костей является взятие в качестве выборки набора пар чисел n ₁ и n ₂ из {1, 2, 3, 4, 5, 6} (представляющих числа на двух игральных костях). космос. Общее число выпавших чисел (сумма чисел в каждой паре) тогда является случайной величиной X, заданной функцией, которая отображает пару в сумму: $X((n_{1},n_{2}))=n_{1}+n_{2}$ и (если игральные кости честные ) имеет функцию вероятностной массы f _X, определяемую следующим образом: $f_{X}(S)={\frac {\min(S-1,13-S)}{36}},{\text{ for }}S\in \{2,3,4,5,6,7,8,9,10,11,12\}$

Непрерывная случайная величина

Формально непрерывная случайная величина — это случайная величина, функция распределения которой непрерывна кумулятивная всюду. ^[10] Не существует « пробелов », которые соответствовали бы числам, вероятность появления которых ограничена . Вместо этого непрерывные случайные величины почти никогда не принимают точное заданное значение c (формально ${\textstyle \forall c\in \mathbb {R} :\;\Pr(X=c)=0}$ ), но существует положительная вероятность того, что его значение будет лежать в определенных интервалах , которые могут быть сколь угодно малыми . Непрерывные случайные величины обычно допускают функции плотности вероятности (PDF), которые характеризуют их CDF и вероятностные меры ; такие распределения называются также абсолютно непрерывными ; но некоторые непрерывные распределения являются сингулярными или представляют собой смесь абсолютно непрерывной и сингулярной частей.

Примером непрерывной случайной величины может служить вращатель, который может выбирать горизонтальное направление. Тогда значения, принимаемые случайной величиной, являются направлениями. Мы могли бы представить эти направления как север, запад, восток, юг, юго-восток и т. д. Однако обычно удобнее сопоставить пространство выборки со случайной величиной, которая принимает значения, которые являются действительными числами. Это можно сделать, например, путем сопоставления направления с азимутом в градусах по часовой стрелке от севера. Затем случайная величина принимает значения, которые являются действительными числами из интервала [0, 360), причем все части диапазона являются «одинакововероятными». В данном случае X = угол поворота. Любое действительное число имеет нулевую вероятность быть выбранным, но положительная вероятность может быть присвоена любому диапазону значений. Например, вероятность выбора числа из [0, 180] равна 1 ⁄ 2 . чтобы говорить о функции вероятностной массы, мы говорим, что плотность вероятности X Вместо того , равна 1/360. Вероятность подмножества [0, 360) можно вычислить, умножив меру набора на 1/360. В общем, вероятность набора для данной непрерывной случайной величины можно вычислить путем интегрирования плотности по данному набору.

Более формально, если задан любой интервал ${\textstyle I=[a,b]=\{x\in \mathbb {R} :a\leq x\leq b\}}$ , случайная величина $X_{I}\sim \operatorname {U} (I)=\operatorname {U} [a,b]$ называется « непрерывной равномерной случайной величиной» (CURV), если вероятность того, что она примет значение в подинтервале, зависит только от длины подинтервала. Это означает, что вероятность $X_{I}$ попадание в любой подинтервал $[c,d]\subseteq [a,b]$ пропорционален если длине ≤ подинтервала, то есть, $\leq c, d \leq b a$ имеем

$\Pr \left(X_{I}\in [c,d]\right)={\frac {d-c}{b-a}}$

где последнее равенство следует из аксиомы унитарности вероятности. Функция плотности вероятности CURV $X\sim \operatorname {U} [a,b]$ задается индикаторной функцией его интервала поддержки , нормированной на длину интервала: $f_{X}(x)={\begin{cases}\displaystyle {1 \over b-a},&a\leq x\leq b\\0,&{\text{otherwise}}.\end{cases}}$ Особый интерес представляет равномерное распределение на единичном интервале $[0,1]$ . Образцы любого желаемого распределения вероятностей $\operatorname {D}$ может быть получена путем вычисления функции квантильной $\operatorname {D}$ на случайно сгенерированном числе, равномерно распределенном на единичном интервале. При этом используются свойства кумулятивных функций распределения , которые являются объединяющей основой для всех случайных величин.

Смешанный тип

Смешанная случайная величина — это случайная величина, кумулятивная функция распределения которой не является ни дискретной , ни всюду непрерывной . ^[10] Его можно реализовать как смесь дискретной случайной величины и непрерывной случайной величины; в этом случае CDF будет средневзвешенным CDF составляющих переменных. ^[10]

Пример случайной величины смешанного типа может быть основан на эксперименте, в котором монета подбрасывается и вращается спиннер только в том случае, если результатом подбрасывания монеты является орел. Если результат — решка, X = −1; в противном случае X = значение счетчика, как в предыдущем примере. Существует вероятность 1 ⁄ 2 , что эта случайная величина будет иметь значение −1. Другие диапазоны значений будут иметь вдвое меньшую вероятность, чем в последнем примере.

В общем случае каждое распределение вероятностей на действительной линии представляет собой смесь дискретной части, сингулярной части и абсолютно непрерывной части; см. теорему Лебега о разложении § Уточнение . Дискретная часть сосредоточена на счетном множестве, но это множество может быть плотным (как и множество всех рациональных чисел).

Теоретико-мерное определение

Наиболее формальное, аксиоматическое определение случайной величины основано на теории меры . Непрерывные случайные величины определяются в терминах наборов чисел, а также функций, которые отображают такие наборы в вероятности. Из-за различных трудностей (например, парадокса Банаха-Тарского ), которые возникают, если такие множества недостаточно ограничены, необходимо ввести так называемую сигма-алгебру , чтобы ограничить возможные множества, над которыми могут быть определены вероятности. Обычно используется такая сигма-алгебра, борелевская σ-алгебра , которая позволяет определять вероятности над любыми множествами, которые могут быть получены либо непосредственно из непрерывных интервалов чисел, либо с помощью конечного или счетного числа объединений и/ или пересечения таких интервалов. ^[11]

Теоретико-мерное определение состоит в следующем.

Позволять $(\Omega ,{\mathcal {F}},P)$ быть вероятностным пространством и $(E,{\mathcal {E}})$ пространство измеримое . Затем $(E,{\mathcal {E}})$ -значная случайная величина является измеримой функцией $X\colon \Omega \to E$ , что означает, что для каждого подмножества $B\in {\mathcal {E}}$ , прообраз его ${\mathcal {F}}$ -измеримый; $X^{-1}(B)\in {\mathcal {F}}$ , где $X^{-1}(B)=\{\omega :X(\omega )\in B\}$ . ^[12] Это определение позволяет нам измерить любое подмножество $B\in {\mathcal {E}}$ в целевом пространстве, глядя на его прообраз, который по предположению измерим.

Говоря более интуитивным языком, член $\Omega$ является возможным результатом, членом ${\mathcal {F}}$ представляет собой измеримое подмножество возможных результатов, функция $P$ дает вероятность каждого такого измеримого подмножества, $E$ представляет набор значений, которые может принимать случайная величина (например, набор действительных чисел), и член ${\mathcal {E}}$ является «хорошим» (измеримым) подмножеством $E$ (те, для которых можно определить вероятность). Тогда случайная переменная является функцией любого результата от величины, так что результаты, ведущие к любому полезному подмножеству величин для случайной величины, имеют четко определенную вероятность.

Когда $E$ является топологическим пространством , то наиболее распространенным выбором является σ-алгебра ${\mathcal {E}}$ есть борелевская σ-алгебра ${\mathcal {B}}(E)$ , которая представляет собой σ-алгебру, порожденную совокупностью всех открытых множеств в $E$ . В таком случае $(E,{\mathcal {E}})$ -значная случайная величина называется $E$ -значная случайная величина . Более того, когда пространство $E$ это настоящая линия $\mathbb {R}$ , то такая вещественная случайная величина называется просто случайной величиной .

Действительные случайные величины

В этом случае пространство наблюдения представляет собой набор действительных чисел. Отзывать, $(\Omega ,{\mathcal {F}},P)$ это вероятностное пространство. Для реального пространства наблюдения функция $X\colon \Omega \rightarrow \mathbb {R}$ является вещественной случайной величиной, если

\{\omega :X(\omega )\leq r\}\in {\mathcal {F}}\qquad \forall r\in \mathbb {R} .

Это определение является частным случаем предыдущего, поскольку множество $\{(-\infty ,r]:r\in \mathbb {R} \}$ порождает борелевскую σ-алгебру на множестве действительных чисел, и достаточно проверить измеримость на любом порождающем множестве. Здесь мы можем доказать измеримость на этом порождающем наборе, используя тот факт, что $\{\omega :X(\omega )\leq r\}=X^{-1}((-\infty ,r])$ .

Моменты

Распределение вероятностей случайной величины часто характеризуется небольшим количеством параметров, которые также имеют практическую интерпретацию. Например, зачастую достаточно знать, каково его «среднее значение». Это отражается в математической концепции ожидаемого значения случайной величины, обозначаемой $\operatorname {E} [X]$ , а также называемый первым моментом . В общем, $\operatorname {E} [f(X)]$ не равен $f(\operatorname {E} [X])$ . Как только «среднее значение» станет известно, можно будет задаться вопросом, насколько далеки от этого среднего значения значения $X$ обычно это вопрос, на который отвечает дисперсия и стандартное отклонение случайной величины. $\operatorname {E} [X]$ можно интуитивно рассматривать как среднее значение, полученное из бесконечной совокупности, члены которой имеют определенные оценки $X$ .

Математически это известно как (обобщенная) проблема моментов : для данного класса случайных величин $X$ , найти коллекцию $\{f_{i}\}$ функций таких, что средние значения $\operatorname {E} [f_{i}(X)]$ полностью охарактеризовать распределение случайной величины $X$ .

Моменты можно определять только для вещественных функций случайных величин (или комплексных и т. д.). Если случайная величина сама по себе вещественная, то можно взять моменты самой переменной, эквивалентные моментам тождественной функции. $f(X)=X$ случайной величины. Однако даже для недействительных случайных величин можно взять моменты вещественных функций этих переменных. Например, для категориальной случайной величины X , которая может принимать номинальные значения «красный», «синий» или «зеленый», действительная функция $[X={\text{green}}]$ можно построить; здесь используется скобка Айверсона и имеет значение 1, если $X$ имеет значение «зеленый», в противном случае — 0. Затем можно определить математическое ожидание и другие моменты этой функции.

Функции случайных величин

Новую случайную величину Y можно определить, применив действительную измеримую по Борелю функцию. $g\colon \mathbb {R} \rightarrow \mathbb {R}$ к результатам действительной случайной величины $X$ . То есть, $Y=g(X)$ . Кумулятивная распределения функция $Y$ тогда

F_{Y}(y)=\operatorname {P} (g(X)\leq y).

Если функция $g$ обратима (т.е. $h=g^{-1}$ существует, где $h$ является $g$ ) обратная функция и либо возрастает, либо убывает , то предыдущее соотношение можно расширить и получить

F_{Y}(y)=\operatorname {P} (g(X)\leq y)={\begin{cases}\operatorname {P} (X\leq h(y))=F_{X}(h(y)),&{\text{if }}h=g^{-1}{\text{ increasing}},\\\\\operatorname {P} (X\geq h(y))=1-F_{X}(h(y)),&{\text{if }}h=g^{-1}{\text{ decreasing}}.\end{cases}}

При тех же гипотезах обратимости $g$ , предполагая также дифференцируемость , связь между функциями плотности вероятности может быть найдена путем дифференцирования обеих частей приведенного выше выражения по $y$ , чтобы получить ^[10]

f_{Y}(y)=f_{X}{\bigl (}h(y){\bigr )}\left|{\frac {dh(y)}{dy}}\right|.

Если нет обратимости $g$ но каждый $y$ допускает не более счетного числа корней (т. е. конечного или счетного числа корней). $x_{i}$ такой, что $y=g(x_{i})$ ) то предыдущее соотношение между функциями плотности вероятности можно обобщить с помощью

f_{Y}(y)=\sum _{i}f_{X}(g_{i}^{-1}(y))\left|{\frac {dg_{i}^{-1}(y)}{dy}}\right|

где $x_{i}=g_{i}^{-1}(y)$ , согласно теореме об обратной функции . Формулы плотностей не требуют $g$ увеличиваться.

В теоретико-мерном аксиоматическом подходе к вероятности, если случайная величина $X$ на $\Omega$ и измеримая по Борелю функция $g\colon \mathbb {R} \rightarrow \mathbb {R}$ , затем $Y=g(X)$ также является случайной величиной $\Omega$ композиция измеримых функций , поскольку измерима и . (Однако это не обязательно верно, если $g$ измерима ли по Лебегу . ^{[ нужна ссылка ]}) Та же процедура, которая позволяла выйти из вероятностного пространства $(\Omega ,P)$ к $(\mathbb {R} ,dF_{X})$ можно использовать для получения распределения $Y$ .

Пример 1

Позволять $X$ быть действительной непрерывной случайной величиной и пусть $Y=X^{2}$ .

F_{Y}(y)=\operatorname {P} (X^{2}\leq y).

Если $y<0$ , затем $P(X^{2}\leq y)=0$ , так

F_{Y}(y)=0\qquad {\hbox{if}}\quad y<0.

Если $y\geq 0$ , затем

\operatorname {P} (X^{2}\leq y)=\operatorname {P} (|X|\leq {\sqrt {y}})=\operatorname {P} (-{\sqrt {y}}\leq X\leq {\sqrt {y}}),

так

F_{Y}(y)=F_{X}({\sqrt {y}})-F_{X}(-{\sqrt {y}})\qquad {\hbox{if}}\quad y\geq 0.

Пример 2

Предполагать $X$ это случайная величина с кумулятивным распределением

F_{X}(x)=P(X\leq x)={\frac {1}{(1+e^{-x})^{\theta }}}

где $\theta >0$ является фиксированным параметром. Рассмотрим случайную величину $Y=\mathrm {log} (1+e^{-X}).$ Затем,

F_{Y}(y)=P(Y\leq y)=P(\mathrm {log} (1+e^{-X})\leq y)=P(X\geq -\mathrm {log} (e^{y}-1)).\,

Последнее выражение можно рассчитать с точки зрения кумулятивного распределения $X,$ так

{\begin{aligned}F_{Y}(y)&=1-F_{X}(-\log(e^{y}-1))\\[5pt]&=1-{\frac {1}{(1+e^{\log(e^{y}-1)})^{\theta }}}\\[5pt]&=1-{\frac {1}{(1+e^{y}-1)^{\theta }}}\\[5pt]&=1-e^{-y\theta }.\end{aligned}}

которая представляет собой кумулятивную функцию распределения (CDF) экспоненциального распределения .

Пример 3

Предполагать $X$ — случайная величина со стандартным нормальным распределением , плотность которой равна

f_{X}(x)={\frac {1}{\sqrt {2\pi }}}e^{-x^{2}/2}.

Рассмотрим случайную величину $Y=X^{2}.$ Мы можем найти плотность, используя приведенную выше формулу для замены переменных:

f_{Y}(y)=\sum _{i}f_{X}(g_{i}^{-1}(y))\left|{\frac {dg_{i}^{-1}(y)}{dy}}\right|.

В этом случае изменение не является монотонным , поскольку каждое значение $Y$ имеет два соответствующих значения $X$ (один положительный и отрицательный). Однако из-за симметрии обе половины преобразуются одинаково, т.е.

f_{Y}(y)=2f_{X}(g^{-1}(y))\left|{\frac {dg^{-1}(y)}{dy}}\right|.

Обратное преобразование

x=g^{-1}(y)={\sqrt {y}}

и его производная

{\frac {dg^{-1}(y)}{dy}}={\frac {1}{2{\sqrt {y}}}}.

Затем,

f_{Y}(y)=2{\frac {1}{\sqrt {2\pi }}}e^{-y/2}{\frac {1}{2{\sqrt {y}}}}={\frac {1}{\sqrt {2\pi y}}}e^{-y/2}.

Это распределение хи-квадрат с одной степенью свободы .

Пример 4

Предполагать $X$ — случайная величина с нормальным распределением , плотность которой равна

f_{X}(x)={\frac {1}{\sqrt {2\pi \sigma ^{2}}}}e^{-(x-\mu )^{2}/(2\sigma ^{2})}.

Рассмотрим случайную величину $Y=X^{2}.$ Мы можем найти плотность, используя приведенную выше формулу для замены переменных:

f_{Y}(y)=\sum _{i}f_{X}(g_{i}^{-1}(y))\left|{\frac {dg_{i}^{-1}(y)}{dy}}\right|.

В этом случае изменение не является монотонным , поскольку каждое значение $Y$ имеет два соответствующих значения $X$ (один положительный и отрицательный). Однако, в отличие от предыдущего примера, в этом случае симметрии нет, и нам нужно вычислить два разных члена:

f_{Y}(y)=f_{X}(g_{1}^{-1}(y))\left|{\frac {dg_{1}^{-1}(y)}{dy}}\right|+f_{X}(g_{2}^{-1}(y))\left|{\frac {dg_{2}^{-1}(y)}{dy}}\right|.

Обратное преобразование

x=g_{1,2}^{-1}(y)=\pm {\sqrt {y}}

и его производная

{\frac {dg_{1,2}^{-1}(y)}{dy}}=\pm {\frac {1}{2{\sqrt {y}}}}.

Затем,

f_{Y}(y)={\frac {1}{\sqrt {2\pi \sigma ^{2}}}}{\frac {1}{2{\sqrt {y}}}}(e^{-({\sqrt {y}}-\mu )^{2}/(2\sigma ^{2})}+e^{-(-{\sqrt {y}}-\mu )^{2}/(2\sigma ^{2})}).

Это нецентральное распределение хи-квадрат с одной степенью свободы .

Некоторые свойства

Распределение вероятностей суммы двух независимых случайных величин представляет собой свертку каждого из их распределений.
Распределения вероятностей не являются векторным пространством — они не замкнуты относительно линейных комбинаций , поскольку они не сохраняют неотрицательность или полный интеграл 1 — но они замкнуты относительно выпуклой комбинации , таким образом образуя выпуклое подмножество пространства функций (или мер). ).

Эквивалентность случайных величин

Существует несколько разных смыслов, в которых случайные величины можно считать эквивалентными. Две случайные величины могут быть равны, почти наверняка равны или равны по распределению.

Ниже приводится точное определение этих понятий эквивалентности в порядке возрастания силы.

Равенство в распределении

Если пространство выборки является подмножеством реальной линии, случайные величины X и Y равны по распределению (обозначаются $X{\stackrel {d}{=}}Y$ ), если они имеют одинаковые функции распределения:

\operatorname {P} (X\leq x)=\operatorname {P} (Y\leq x)\quad {\text{for all }}x.

Чтобы быть равными по распределению, случайные величины не обязательно должны определяться в одном и том же вероятностном пространстве. Две случайные величины, имеющие равные производящие функции момента, имеют одинаковое распределение. Это обеспечивает, например, полезный метод проверки равенства определенных функций независимых одинаково распределенных (IID) случайных величин . Однако производящая функция момента существует только для распределений, которые имеют определенное преобразование Лапласа .

Почти наверняка равенство

Две случайные величины X и Y ( равны почти наверняка обозначаются $X\;{\stackrel {\text{a.s.}}{=}}\;Y$ ) тогда и только тогда, когда вероятность того, что они различны, равна нулю :

\operatorname {P} (X\neq Y)=0.

Для всех практических целей теории вероятностей это понятие эквивалентности так же сильно, как и фактическое равенство. Это связано со следующим расстоянием:

d_{\infty }(X,Y)=\operatorname {ess} \sup _{\omega }|X(\omega )-Y(\omega )|,

где «ess sup» представляет собой существенную верхнюю границу в смысле теории меры .

Равенство

Наконец, две случайные величины X и Y равны , если они равны как функции в своем измеримом пространстве:

X(\omega )=Y(\omega )\qquad {\hbox{for all }}\omega .

Это понятие, как правило, наименее полезно в теории вероятностей, поскольку на практике и в теории лежащее в основе пространство эксперимента измерения редко явно охарактеризовано или даже охарактеризовано.

Конвергенция

Важной темой математической статистики является получение результатов сходимости для определенных последовательностей случайных величин; например, закон больших чисел и центральная предельная теорема .

Существуют различные смыслы, в которых последовательность $X_{n}$ случайных величин могут сходиться к случайной величине $X$ . Это объясняется в статье о сходимости случайных величин .

См. также

Ссылки

Встроенные цитаты

^ Перейти обратно: ^а ^б Блицштейн, Джо; Хван, Джессика (2014). Введение в вероятность . ЦРК Пресс. ISBN 9781466575592 .
^ Дейзенрот, Марк Питер (2020). Математика для машинного обучения . А. Альдо Фейсал, Ченг Сун Онг. Кембридж, Соединенное Королевство: Издательство Кембриджского университета. ISBN 978-1-108-47004-9 . OCLC 1104219401 .
^ Джордж Макки (июль 1980 г.). «Гармонический анализ как использование симметрии - исторический обзор». Бюллетень Американского математического общества . Новая серия. 3 (1).
^ «Случайные переменные» . www.mathsisfun.com . Проверено 21 августа 2020 г.
^ Йейтс, Дэниел С.; Мур, Дэвид С; Старнс, Дарен С. (2003). Практика статистики (2-е изд.). Нью-Йорк: Фриман . ISBN 978-0-7167-4773-4 . Архивировано из оригинала 9 февраля 2005 г.
^ «Случайные переменные» . www.stat.yale.edu . Проверено 21 августа 2020 г.
^ Декинг, Фредерик Мишель; Краайкамп, Корнелис; Лопухаа, Хендрик Пауль; Местер, Людольф Эрвин (2005). «Современное введение в теорию вероятности и статистику » Спрингеровские тексты в статистике . дои : 10.1007/ 1-84628-168-7 ISBN 978-1-85233-896-1 . ISSN 1431-875X .
^ Л. Кастаньеда; В. Аруначалам и С. Дхармараджа (2012). Введение в теорию вероятности и случайные процессы с приложениями . Уайли. п. 67. ИСБН 9781118344941 .
^ Биллингсли, Патрик (1995). Вероятность и мера (3-е изд.). Уайли. п. 187. ИСБН 9781466575592 .
^ Перейти обратно: ^а ^б ^с ^д Берцекас, Дмитрий П. (2002). Введение в вероятность . Цициклис, Джон Н., Цициклис, Яннис Н. Бельмонт, Массачусетс: Athena Scientific. ISBN 188652940X . OCLC 51441829 .
^ Штайгервальд, Дуглас Г. «Экономика 245A – Введение в теорию меры» (PDF) . Калифорнийский университет, Санта-Барбара . Проверено 26 апреля 2013 г.
^ Фристедт и Грей (1996 , стр. 11)

Литература

Фристедт, Берт; Грей, Лоуренс (1996). Современный подход к теории вероятностей . Бостон: Биркхойзер. ISBN 3-7643-3807-5 .
Биллингсли, Патрик (1995). Вероятность и мера . Нью-Йорк: Уайли. ISBN 8126517719 .
Калленберг, Олав (1986). Случайные меры (4-е изд.). Берлин: Академия Верлаг . ISBN 0-12-394960-2 . МР 0854102 .
Калленберг, Олав (2001). Основы современной вероятности (2-е изд.). Берлин: Springer Verlag . ISBN 0-387-95313-2 .
Папулис, Афанасиос (1965). Вероятность, случайные величины и случайные процессы (9-е изд.). Токио: МакГроу – Хилл . ISBN 0-07-119981-0 .

Внешние ссылки

«Случайная величина» , Математическая энциклопедия , EMS Press , 2001 [1994]
Цукерман, Моше (2014), Введение в теорию массового обслуживания и стохастические модели телетрафика (PDF) , arXiv : 1307.2968
Цукерман, Моше (2014), Основные темы вероятности (PDF)

[:2-1] Перейти обратно: ^а ^б Блицштейн, Джо; Хван, Джессика (2014). Введение в вероятность . ЦРК Пресс. ISBN 9781466575592 .

[2] Дейзенрот, Марк Питер (2020). Математика для машинного обучения . А. Альдо Фейсал, Ченг Сун Онг. Кембридж, Соединенное Королевство: Издательство Кембриджского университета. ISBN 978-1-108-47004-9 . OCLC 1104219401 .

[:3-3] Джордж Макки (июль 1980 г.). «Гармонический анализ как использование симметрии - исторический обзор». Бюллетень Американского математического общества . Новая серия. 3 (1).

[4] «Случайные переменные» . www.mathsisfun.com . Проверено 21 августа 2020 г.

[Yates-5] Йейтс, Дэниел С.; Мур, Дэвид С; Старнс, Дарен С. (2003). Практика статистики (2-е изд.). Нью-Йорк: Фриман . ISBN 978-0-7167-4773-4 . Архивировано из оригинала 9 февраля 2005 г.

[6] «Случайные переменные» . www.stat.yale.edu . Проверено 21 августа 2020 г.

[7] Декинг, Фредерик Мишель; Краайкамп, Корнелис; Лопухаа, Хендрик Пауль; Местер, Людольф Эрвин (2005). «Современное введение в теорию вероятности и статистику » Спрингеровские тексты в статистике . дои : 10.1007/ 1-84628-168-7 ISBN 978-1-85233-896-1 . ISSN 1431-875X .

[8] Л. Кастаньеда; В. Аруначалам и С. Дхармараджа (2012). Введение в теорию вероятности и случайные процессы с приложениями . Уайли. п. 67. ИСБН 9781118344941 .

[:Billingsley-9] Биллингсли, Патрик (1995). Вероятность и мера (3-е изд.). Уайли. п. 187. ИСБН 9781466575592 .

[:0-10] Перейти обратно: ^а ^б ^с ^д Берцекас, Дмитрий П. (2002). Введение в вероятность . Цициклис, Джон Н., Цициклис, Яннис Н. Бельмонт, Массачусетс: Athena Scientific. ISBN 188652940X . OCLC 51441829 .

[UCSB-11] Штайгервальд, Дуглас Г. «Экономика 245A – Введение в теорию меры» (PDF) . Калифорнийский университет, Санта-Барбара . Проверено 26 апреля 2013 г.

[12] Фристедт и Грей (1996 , стр. 11)

[1]

[2]

[3]

[4]

[5]

[6]

[7]

[8]

[9]

[10]

[11]

[12]