確率密度関数

任意の単峰性確率密度関数の最頻値 中央値、 平均の幾何学的視覚化。 [ 1
任意の単峰性確率密度関数の最頻値中央値平均の幾何学的視覚化[1]

確率論において確率密度関数PDF)、密度関数、または絶対連続確率変数密度は標本空間(確率変数が取る可能性のある値の集合)内の任意の標本(または点)におけるその値が、確率変数の値がその標本と等しくなる相対的な尤度を提供すると解釈できる関数です。 [2] [3]言い換えれば、確率密度は単位長さあたりの確率です。連続確率変数が特定の値を取る絶対尤度はゼロですが、そもそも取り得る値は無限にあります。したがって、2つの異なる標本におけるPDFの値を使用して、確率変数の特定の抽出において、確率変数が一方の標本に、もう一方の標本と比較してどれだけ近づく可能性が高いかを推測することができます

より正確には、PDFは、ランダム変数が特定の値を取るのではなく、特定の値の範囲内に収まる確率を指定するために使用されます。この確率は、連続変数のPDFをその範囲で積分することによって与えられます。ここで、積分は、範囲の最小値と最大値の間の密度関数の下の非負の領域です。PDFはどこでも非負であり、曲線全体の下面積は1に等しいため、ランダム変数が可能な値の集合内に収まる確率は100%です

確率分布関数および確率関数という用語は、確率密度関数を指すこともあります。しかし、この用法は確率論者や統計学者の間では標準的ではありません。他の情報源では、「確率分布関数」は、確率分布が一般的な値の集合に対する関数として定義されている場合に使用される場合や、累積分布関数(CDF)を指す場合、あるいは密度ではなく確率質量関数(PMF)を指す場合もあります。密度関数自体も確率質量関数に使用されるため、さらに混乱が生じます。[4]一般に、PMFは離散確率変数(可算集合上の値を取る確率変数)の文脈で使用され、PDFは連続確率変数の文脈で使用されます。

4つの連続確率密度関数の例

ある種の細菌が通常20~30時間生きると仮定します。細菌がちょうど5時間生きる確率はゼロです。多くの細菌は約5時間生きますが、特定の細菌がちょうど5.00時間で死ぬ可能性はありません。しかし、細菌が5時間から5.01時間の間に死ぬ確率は定量化可能です。答えが0.02(つまり2%)だとします。すると、細菌が5時間から5.001時間の間に死ぬ確率は約0.002になるはずです。なぜなら、この時間間隔は前の10分の1だからです。細菌が5時間から5.0001時間の間に死ぬ確率は約0.0002になるはずです。以下同様に続きます

この例では、(区間中の生存確率)/(区間の持続時間)の比率はほぼ一定で、1時間あたり2(または2時間-1)に等しくなります。例えば、5時間から5.01時間までの0.01時間区間で死亡する確率は0.02であり、(0.02確率/0.01時間)=2時間-1です。この2時間-1という量は、約5時間で死亡する確率密度と呼ばれます。したがって、細菌が5時間で死亡する確率は、(2時間-1dtと表すことができます。これは、細菌が約5時間の微小な時間枠内で死亡する確率であり、dtはこの時間枠の持続時間です。例えば、細菌が5時間より長く、(5時間 + 1ナノ秒)より短く生存する確率は、(2時間-1)×(1ナノ秒)≈です6 × 10 −13単位変換を使用) 3.6 × 10 12ナノ秒 = 1時間)

f (5時間) = 2時間−1となる確率密度関数fが存在する。任意の時間枠(微小時間枠だけでなく、大きな時間枠も含む)にわたるf積分は、その時間枠内で細菌が死ぬ確率である。

絶対連続単変量分布

確率密度関数は、絶対連続 単変量分布に最もよく関連付けられている確率変数の 密度は でありは非負のルベーグ積分関数である場合、次の 条件を満たす

したがって、が の累積分布関数である場合、 となり、(が で連続である場合

直感的には、 は無限小区間内に入る確率と考えることができます

正式な定義

(この定義は、確率の測度論的定義を用いて任意の確率分布に拡張することができる

測定空間(通常、測定可能な部分集合としてボレル集合を持つ)に値を持つ確率変数 、確率分布として、上のプッシュフォワード測度X P持つ。上の参照測度に関する密度は、ラドン・ニコディム微分である

つまり、fは、任意の測定可能な集合に対して、以下の性質を持つ任意の測定可能な関数である。

考察

上記の連続一変数の場合、参照測度はルベーグ測度である。離散確率変数確率質量関数は、標本空間(通常は整数の集合、またはその部分集合) 上の計数測度に関する密度である。

任意の測度を参照して密度を定義することはできません(例えば、連続確率変数の基準として計数測度を選択することはできません)。さらに、密度が存在する場合、その密度はほぼ一意であり、任意の2つの密度はほぼすべての場所で一致することを意味します。

詳細

確率とは異なり、確率密度関数は1より大きい値を取ることができます。例えば、区間[0, 1/2]上の連続一様分布は、 0 ≤ x ≤ 1/2の場合に確率密度f ( x ) = 2を持ち、それ以外の場合はf ( x ) = 0 を持ちます。

標準正規分布の確率密度は

確率変数Xが与えられ、その分布が確率密度関数fを許容する場合、X期待値(期待値が存在する場合)は次のように計算できます

すべての確率分布が密度関数を持つわけではありません。離散ランダム変数の分布は密度関数を持ちません。また、カントール分布は離散要素を持たない(つまり、個々の点に正の確率を割り当てない)にもかかわらず、密度関数を持ちません。

分布の累積分布関数 F ( x )が絶対的に連続である場合、その分布は密度関数を持ちます[5]この場合、Fほぼすべての点で 微分可能であり、その導関数は確率密度として使用できます

確率分布が密度を許容する場合、すべての1点集合{ a }の確率は0である。有限集合と可算集合についても同様である。

2つの確率密度fgは、ルベーグ測度が0の集合においてのみ異なる場合、正確に同じ確率分布を表す。

統計物理学の分野では、累積分布関数の導関数と確率密度関数の関係を非形式的に再定式化したもの(非公式な定義)が、確率密度関数の定義として一般的に使用される。この代替定義は以下のとおりである。

dt が無限に小さい数である場合、 Xが区間( t , t + dt )内に含まれる確率はf ( t ) dtに等しい。つまり、

ディラックのデルタ関数を用いた一般化確率密度関数では、特定の離散確率変数、および連続部分と離散部分の両方を含む確率変数を表すことができます。(これは、上で定義した意味での確率密度関数では不可能ですが、分布では可能です。)例えば、ラーデマッハ分布、つまり、値が-1または1をとり、それぞれの確率が12である2値の離散確率変数を考えます。この変数に関連付けられた確率密度は次のとおりです。

より一般的には、離散変数が実数の中でn個の異なる値をとることができる場合、関連付けられた確率密度関数は次のとおりです。 ここで、は変数にアクセスできる離散値であり、はこれらの値に関連付けられた確率です

これにより、離散確率分布と連続確率分布の扱いが実質的に統一されます。上記の式により、確率の連続分布に与えられた公式から出発して、そのような離散変数の統計的特性(平均分散尖度など)を決定することができます。

密度族

確率密度関数(および確率質量関数)は、パラメータ化、つまり未指定のパラメータによって特徴付けられることが一般的です。例えば、正規分布は平均分散でパラメータ化され、それぞれとで表され密度族を与えます。パラメータの異なる値は、同じ標本空間(変数のすべての可能な値の同じ集合)上の異なる確率変数の異なる分布を記述します。この標本空間は、この分布族が記述する確率変数族の定義域です。与えられたパラメータの集合は、密度の関数形を共有する族内の単一の分布を記述します。与えられた分布の観点から見ると、パラメータは定数であり、密度関数においてパラメータのみを含み変数を含まない項は、分布の正規化係数(密度の下の面積(定義域内で何かが発生する確率)が1になることを保証する乗法係数)の一部です。この正規化係数は、分布のの外側にあります

パラメータは定数であるため、族内の異なる確率変数の特性を与えるために、異なるパラメータで密度を再パラメータ化することは、単に新しいパラメータ値を古い値の代わりに式に代入することを意味します。

複数の変数に関連付けられた密度

連続確率変数 X 1 , ..., X nに対して、集合全体に関連する確率密度関数を定義することも可能であり、これはしばしば結合確率密度関数と呼ばれる。この密度関数はn個の変数の関数として定義され変数X 1 , ..., X nの値のn次元空間内の任意の領域Dについて、集合変数の実現が領域D内に含まれる確率は、

F ( x 1 , ..., x n ) = Pr( X 1x 1 , ..., X nx n )がベクトル( X 1 , ..., X n )の累積分布関数である場合、結合確率密度関数は偏微分として計算できます。

周辺密度

i = 1, 2, ..., n に対して、f X i ( x i ) を変数 X i のみに関連付けられた確率密度関数とします。これは周辺密度関数と呼ばれ、確率変数 X 1 , ..., X n関連付けられ確率密度からn 1変数のすべての値にわたって積分することで導出できます。

独立性

結合密度を許容する連続確率変数X 1 , ..., X n は、次の条件を満たす場合、すべて互いに独立です。

n個の確率変数のベクトルの結合確率密度関数が、1変数のn個の関数の積に因数分解できる場合(各f i は必ずしも密度関数ではない)、その集合内のn個の変数はすべて互いに独立しており、それぞれの周辺確率密度関数は次のように与えられます。

この基本的な例は、2変数の集合の関数という単純なケースにおける多次元確率密度関数の定義を示しています。座標( X , Y )の2次元ランダムベクトルを次のように呼びます。正のxyの1/4平面で得られる確率は

確率変数の

確率変数(またはベクトル) Xの確率密度関数がf X ( x )と与えられた場合、ある変数Y = g ( X )の確率密度関数を計算することが可能です(ただし、多くの場合、計算は不要です。下記参照) 。これは「変数変換」とも呼ばれ、実際には既知の(例えば、一様)乱数生成器を用いて 任意の形状の確率変数f g ( X ) = f Yを生成するために使用されます。

期待値E( g ( X ))を求めるには、まず新しい確率変数Y = g ( X )の確率密度f g ( X )を求めなければならないと考えがちです。しかし、計算する代わりに、

The values of the two integrals are the same in all cases in which both X and g(X) actually have probability density functions. It is not necessary that g be a one-to-one function. In some cases the latter integral is computed much more easily than the former. See Law of the unconscious statistician.

Scalar to scalar

Let be a monotonic function, then the resulting density function is[6]

Here g−1 denotes the inverse function.

This follows from the fact that the probability contained in a differential area must be invariant under change of variables. That is,or

For functions that are not monotonic, the probability density function for y iswhere n(y) is the number of solutions in x for the equation , and are these solutions.

Vector to vector

x がn次元確率変数で、結合密度がfであるとする。y = G ( x ) (ただしG全単射で微分可能な関数)とするy の密度はp Y : となる。ここで、微分はG (⋅)の逆関数のヤコビアンとして扱われ、 yで評価される[7]

例えば、2 次元の場合、x = ( x 1 , x 2 )で、変換Gがy 1 = G 1 ( x 1 , x 2 )y 2 = G 2 ( x 1 , x 2 )と与えられ、逆関数がx 1 = G 1 −1 ( y 1 , y 2 )x 2 = G 2 −1 ( y 1 , y 2 )であるとする。y  = ( y 1 , y 2 )の結合分布の密度は[8]となる

ベクトルからスカラーへ

微分可能関数、を に値を取るランダムベクトルを の確率密度関数、をディラックのデルタ関数 とします。上記の式を用いて を決定することができ、 の確率密度関数は次のように与えられます。

この結果は、無意識の統計学者の法則につながります。

証明:

を確率密度関数(つまり、定数がゼロ)を持つ崩壊したランダム変数としますランダムベクトルと変換を次のように定義します

は全単射写像であることは明らかであり、 のヤコビアンは次のように与えられます。これは主対角線上に1を持つ上三角行列であるため、その行列式は1です。前のセクションの変数変換定理を適用すると、 が得られ、これを 上で周辺化すると、目的の確率密度関数が得られます。

独立確率変数の和

それぞれ確率密度関数を持つ2つの独立確率変数UV の和の確率密度関数は、それらの個別の密度関数の畳み込みです。

前述の関係を、密度がU 1、…、U Nである N 個の独立確率変数の和に一般化することができます。

これは、独立確率変数の商に関する以下の例と同様に、 Y = U + VZ = Vを含む双方向変数変換から導くことができます。

独立確率変数の積と商

それぞれ確率密度関数を持つ2つの独立した確率変数UVが与えられた場合、積Y = UVと商Y = U / Vの密度は変数変換によって計算できます。

例:商分布

2つの独立した確率変数UVの商Y = U / Vを計算するには、次の変換を定義します。

次に、結合密度p ( y , z )は、変数をUVからYZ変換することで計算でき、結合密度からZを周辺化することでY を導出できます

逆変換は

この変換のヤコビ行列の絶対値は次の通りです。

したがって、

Yの分布はZを周辺化する ことで計算できます

この方法では、 UVからYZへの変換が全単調であることが決定的に重要です。上記の変換は、 ZをVに直接写像でき、与えられたVに対してU / Vが単調であるため、この要件を満たしています。これは、和U + V、差U - V、積UVについても同様に当てはまります

全く同じ方法を使用して、複数の独立した確率変数を持つ他の関数の分布を計算することもできます

例:2つの標準正規分布の商

2つの標準正規分布変数UVが与えられた場合、商は次のように計算できます。まず、変数は次の密度関数を持ちます。

上記のように変換します。

これは次のようになります。

これは標準コーシー分布の密度です

参照

参考文献

  1. ^ 「AP統計レビュー - 密度曲線と正規分布」。2015年4月2日時点のオリジナルからアーカイブ。 2015年3月16日閲覧
  2. ^ Grinstead, Charles M.; Snell, J. Laurie (2009). 「条件付き確率 - 離散条件付き」(PDF) . Grinstead & Snell's Introduction to Probability . Orange Grove Texts. ISBN 978-16161004692003年4月25日時点のオリジナルからアーカイブ(PDF) . 2019年7月25日閲覧
  3. ^ 「確率 - 実数直線上の一様乱数は有効な分布か?」。Cross Validated . 2021年10月6日閲覧
  4. ^ Ord, JK (1972)頻度分布の族、グリフィン。ISBN   0-85264-137-0(例えば、表5.1と例5.4)
  5. ^ Scalas, Enrico (2025). 経済学者のための確率論入門(PDF) . 自費出版. p. 28. 2024年12月10日時点のオリジナルからアーカイブ(PDF) . 2025年7月30日閲覧.
  6. ^ Siegrist, Kyle (2020年5月5日). 「確率変数の変換」. LibreTexts Statistics . 2023年12月22日閲覧.
  7. ^ Devore, Jay L.; Berk, Kenneth N. (2007). 現代数理統計とその応用. Cengage. p. 263. ISBN 978-0-534-40473-4
  8. ^ David, Stirzaker (2007-01-01). Elementary Probability . Cambridge University Press. ISBN 978-0521534284 OCLC  851313783.

参考文献

Retrieved from "https://en.wikipedia.org/w/index.php?title=Probability_density_function&oldid=1315344756"