確率密度関数

正規分布 N (0,  σ2 )のボックスプロットと確率密度関数
任意の単峰性確率密度関数の最頻値中央値平均の幾何学的視覚化。 [1]

確率論において確率密度関数( PDF )、密度関数、または絶対連続ランダム変数密度はサンプル空間(ランダム変数が取る可能性のある値の集合)内の任意のサンプル (またはポイント) でのその値が、ランダム変数の値がそのサンプルに等しい相対的な尤度を提供すると解釈できる関数です。 [2] [3]言い換えれば、確率密度は単位長さあたりの確率です。連続ランダム変数が特定の値を取る絶対尤度は、そもそも取り得る値が無限にあるとすればゼロです。したがって、2 つの異なるサンプルにおける PDF の値を使用して、ランダム変数の任意の特定の抽出において、ランダム変数がもう一方のサンプルと比較して 1 つのサンプルに近くなる可能性がどれだけ高いかを推測できます。

より正確には、PDFは、ランダム変数が特定の値の範囲に収まる確率を指定するために使用されます。これは、特定の値を取る確率とは対照的です。この確率は、連続変数のPDFをその範囲で積分することによって与えられます。ここで、積分とは、範囲の最小値と最大値の間の密度関数の下の非負の領域です。PDFはどこでも非負であり、曲線全体の下面積は1に等しいため、ランダム変数が可能な値の集合に収まる確率は100%です。

確率分布関数および確率関数という用語は、確率密度関数を指すこともあります。しかし、この用法は確率論者や統計学者の間では標準的ではありません。他の文献では、「確率分布関数」は、確率分布が一般的な値の集合に対する関数として定義されている場合に使用されることもあれば、累積分布関数(CDF)を指す場合や、密度ではなく確率質量関数(PMF)を指す場合もあります。密度関数自体も確率質量関数を指すために使用され、さらなる混乱を招いています。[4]一般的に、PMFは離散確率変数(可算集合上の値を取る確率変数)の文脈で使用され、PDFは連続確率変数の文脈で使用されます。

4 つの連続確率密度関数の例。

ある種の細菌が通常20~30時間生存するとします。細菌がちょうど5時間生存する確率はゼロです。多くの細菌は約5時間生存しますが、特定の細菌がちょうど5.00時間で死ぬ可能性はありません。しかし、細菌が5時間から5.01時間の間に死亡する確率は定量化できます。答えが0.02(つまり2%)だとします。すると、細菌が5時間から5.001時間の間に死亡する確率は約0.002になります。この時間間隔は前の10分の1だからです。細菌が5時間から5.0001時間の間に死亡する確率は約0.0002になるはずです。以下同様に続きます。

この例では、比率(間隔中に生存する確率)/(間隔の長さ)はほぼ一定で、1時間あたり2(または2時間-1)に等しくなります。たとえば、5時間と5.01時間の間の0.01時間間隔で死亡する確率は0.02であり、(0.02の確率/ 0.01時間)= 2時間-1です。この量2時間-1は、約5時間で死亡する確率密度と呼ばれます。したがって、細菌が5時間で死亡する確率は、(2時間-1dtと表すことができます。これは、細菌が5時間周辺の無限小の時間枠内で死亡する確率であり、dtはこの時間枠の長さです。たとえば、細菌が5時間より長く生存するが、(5時間+1ナノ秒)より短く生存する確率は、(2時間-1)×(1ナノ秒)≈です。6 × 10 −13単位変換を使用) 3.6 × 10 12ナノ秒 = 1 時間)。

確率密度関数ff (5 時間) = 2 時間−1となる。任意の時間枠(微小時間枠だけでなく、大きな時間枠も含む)にわたるf積分は、その時間枠内で細菌が死滅する確率である。

絶対連続一変量分布

確率密度関数は、絶対連続な 一変量分布に最もよく関連付けられます。確率変数の 密度は でありは非負のルベーグ積分関数である場合、次の式が成り立ちます。

したがって、が の累積分布関数である場合、次の式 が成り立ちます。 また、が で微分可能である場合、

直感的には、 は無限小間隔内に入る確率であると考えることができます

正式な定義

(この定義は、測度論的な確率の定義を使用して任意の確率分布に拡張できます

測定可能な空間(通常は測定可能な部分集合としてボレル集合を持つに値を持つ確率変数は、 確率分布としてにおけるプッシュフォワード測度X P持つ。における参照測度に関する密度はラドン・ニコディム導関数である

つまり、fは、以下の性質を持つ任意の測定可能な関数である:任意の測定可能な集合に対して

議論

上記の連続一変数の場合、参照測度はルベーグ測度です。離散確率変数確率質量関数は、標本空間(通常は整数の集合、またはその部分集合) 上の計数測度に関する密度です。

任意の測度を参照して密度を定義することは不可能である(例えば、連続確率変数の参照として計数測度を選択することはできない)。さらに、密度が存在する場合、その密度はほぼ一意であり、任意の2つの密度はほぼすべての点で一致する。

詳細情報

確率とは異なり、確率密度関数は 1 より大きい値を取ることができます。たとえば、区間[0, 1/2]上の連続均一分布では、 0 ≤ x ≤ 1/2の場合に確率密度f ( x ) = 2となり、それ以外の場合にはf ( x ) = 0 となります。

標準正規分布の確率密度は

確率変数Xが与えられ、その分布が確率密度関数fを許容する場合、X期待値(期待値が存在する場合)は次のように計算できる。

すべての確率分布が密度関数を持つわけではありません。離散ランダム変数の分布は密度関数を持ちません。また、カントール分布は離散要素を持たない(つまり、個々の点に正の確率を割り当てない)にもかかわらず、密度関数を持ちません。

分布が密度関数を持つとは、その累積分布関数 F ( x )が絶対的に連続している場合である[5]この場合、Fほぼどこでも 微分可能であり、その導関数は確率密度として使用できる。

確率分布が密度を許容する場合、すべての 1 点集合{ a }の確率は0 です。有限集合と可算集合についても同様です。

2 つの確率密度fg は、ルベーグ測度 0の集合上でのみ異なる場合、まったく同じ確率分布を表します。

統計物理学の分野では、累積分布関数の導関数と確率密度関数の関係を非形式的に再定式化したものが、確率密度関数の定義として一般的に用いられています。この別の定義は以下のとおりです。

dtが無限に小さい数である場合、 Xが区間( tt + dt )内に含まれる確率はf ( t ) dtに等しくなります。つまり、

ディラックのデルタ関数を用いた一般化確率密度関数では、特定の離散確率変数や、連続部分と離散部分の両方を含む確率変数を表すことができます(これは、上で定義した意味での確率密度関数では不可能ですが、分布を用いることで可能です。)例えば、ラデマッハ分布に従う2値離散確率変数(つまり、値が-1または1で、それぞれの確率が12 )を考える。この変数に関連付けられた確率密度は、次の式で表されます。

より一般的には、離散変数が実数の中でn個の異なる値をとることができる場合、関連する確率密度関数は次のようになります。 ここで、は変数にアクセスできる離散値であり、はこれらの値に関連付けられた確率です。

これにより、離散確率分布と連続確率分布の扱いが実質的に統一されます。上記の式により、確率の連続分布に与えられた公式から出発して、離散変数の統計的特性(平均分散尖度など)を決定することができます。

密度のファミリー

確率密度関数(および確率質量関数)は、パラメータ化されること、つまり、指定されていないパラメータによって特徴付けられることが一般的です。たとえば、正規分布は平均分散でパラメータ化され、それぞれ、および で表され、密度族 が得られます。パラメータの異なる値は、同じ標本空間(変数のすべての可能な値の同じ集合)上の異なる確率変数の異なる分布を表します。この標本空間は、この分布族が表す確率変数族の領域です。特定のパラメータ集合は、密度の関数形式を共有する族内の単一の分布を表します。特定の分布の観点からは、パラメータは定数であり、密度関数の項でパラメータのみを含み変数を含まない項は、分布の正規化係数(密度の下の領域(領域で何かが発生する確率)が 1 に等しくなるようにする乗法係数)の一部です。この正規化係数は、分布のカーネルの外側にあります。

パラメータは定数であるため、異なるパラメータに関して密度を再パラメータ化し、ファミリ内の異なるランダム変数の特性を与えることは、単に新しいパラメータ値を古い値の代わりに式に代入することを意味します。

複数の変数に関連する密度

連続確率変数 X 1 , ..., X nに対して、集合全体に関連する確率密度関数を定義することも可能であり、これはしばしば結合確率密度関数と呼ばれる。この密度関数はn個の変数の関数として定義され変数X 1 , ..., X nの値のn次元空間内の任意の領域Dについて、集合変数の実現が領域D内に含まれる確率は、

F ( x 1 , ..., x n ) = Pr( X 1x 1 , ..., X nx n )がベクトル( X 1 , ..., X n )の累積分布関数である場合、結合確率密度関数は偏微分として計算できます。

限界密度

i = 1, 2, ..., nに対して、変数X iのみに関連する確率密度関数をf X i ( x i )とする。これは周辺密度関数と呼ばれ、確率変数X 1 , ..., X nに関連する確率密度から、他のn − 1 個の変数の値すべてにわたって積分することで導出される。

独立

結合密度を許容する連続確率変数X 1 , ... , X n は

推論

n個の確率変数のベクトルの結合確率密度関数が、1変数のn個の関数の積に因数分解できる場合(各f i は必ずしも密度ではない) 、その集合内のn個の変数はすべて互いに独立しており、それぞれの周辺確率密度関数は次のように与えられる。

この基本的な例は、2変数関数という単純なケースにおける多次元確率密度関数の定義を示しています。2次元のランダムベクトルを座標( X , Y )と呼びましょう。正のxyの1/4平面において、次の式が得られる確率は

確率変数の関数と確率密度関数における変数の変化

確率変数(またはベクトル) Xの確率密度関数がf X ( x )と与えられた場合、ある変数Y = g ( X )の確率密度関数を計算することが可能です(ただし、多くの場合、計算は不要です。下記参照)。これは「変数変換」とも呼ばれ、実際には既知の(例えば一様)乱数生成器を用いて任意の形状の確率変数f g ( X ) = f Yを生成するために使用されます。

期待値E( g ( X ))を求めるには、まず新しい確率変数Y = g ( X )の確率密度f g ( X )を求めなければならないと考えるのは魅力的である。しかし、計算する代わりに

Xg ( X )の両方が実際に確率密度関数を持つ場合、2つの積分の値は必ず同じになります。g1対1関数である必要はありません。場合によっては、後者の積分の方が前者よりもはるかに簡単に計算できます。「無意識の統計学者の法則」を参照してください。

スカラーからスカラー

を単調関数とすると結果として得られる密度関数は[6]

ここでg −1は逆関数を表す

これは、微分領域に含まれる確率は変数変換に対して不変でなければならないという事実から導かれる。つまり

単調でない関数の場合、 yの確率密度関数は、 n ( y )が方程式 のxの解の数でありこれらの解です。

ベクトルからベクトルへ

x がn次元確率変数で、共分散密度がfであるとする。y = G ( x ) (ただしG全単射かつ微分可能な関数)とするとy の密度はp Y : となる。ここで、微分はG (⋅)の逆関数のヤコビアンをyで評価したものとみなされる[7]

例えば、2次元の場合x = ( x 1 , x 2 )において、変換Gがy 1 = G 1 ( x 1 , x 2 ) , y 2 = G 2 ( x 1 , x 2 )と与えられ、逆変換x 1 = G 1 −1 ( y 1 , y 2 ) , x 2 = G 2 −1 ( y 1 , y 2 )があるとする。 y  = ( y 1 , y 2 )の結合分布は密度[8]を持つ。

ベクトルからスカラー

微分可能関数、を に値を取るランダムベクトルとしを の確率密度関数、をディラックのデルタ関数 とします。上記の式を用いての確率密度関数 を求めることができ、これは次のように与えられます 。

この結果は、無意識の統計学者の法則につながります。

証拠:

を確率密度関数(つまり定数がゼロ)を持つ縮退した確率変数とする。乱数ベクトルと変換を次のように定義する。

は全単射であることは明らかであり、 のヤコビアンは次のように与えられます。 これは主対角線上に 1 を持つ三角行列であるため、その行列式は 1 です。前のセクションの変数変換定理を適用すると、 が得られ、これを について周辺化すると、目的の確率密度関数が得られます。

独立確率変数の合計

それぞれ確率密度関数を持つ 2 つの独立した確率変数UVの合計の確率密度関数は、それらの個別の密度関数の畳み込みです。

前述の関係を、密度がU 1 , ..., U NであるN個の独立した確率変数の合計に一般化することができます

これは、以下の独立確率変数の商の例と同様に、 Y = U + VおよびZ = Vを含む変数の双方向の変更から導き出すことができます。

独立確率変数の積と商

それぞれ確率密度関数を持つ2 つの独立したランダム変数UVが与えられた場合、積Y = UVと商Y = U / Vの密度は変数の変更によって計算できます。

例: 商分布

2つの独立したランダム変数UVの商Y = U / Vを計算するには、次の変換を定義します。

次に、変数をUVからYZに変更することで結合密度p ( yz )を計算し結合密度からZを除外することでYを導出できます。

逆変換は

この変換のヤコビ行列の絶対値は次のとおりです。

したがって:

Yの分布はZを周辺化する ことで計算できます

この手法では、 U , VからY , Zへの変換が全単射であることが極めて重要です。上記の変換は、Z をVに直接写像でき、与えられたVに対して商U / Vが単調であるため、この要件を満たしています。これは、和U + V、差UV、積UVについても同様です。

まったく同じ方法を使用して、複数の独立したランダム変数の他の関数の分布を計算することもできます。

例: 2つの標準正規分布の商

2つの標準正規分布変数UVが与えられた場合、商は以下のように計算できます。まず、これらの変数は以下の密度関数を持ちます。

上記のように変換します。

この結果、次のようになります。

これは標準コーシー分布の密度です

参照

参考文献

  1. ^ 「AP統計レビュー - 密度曲線と正規分布」。2015年4月2日時点のオリジナルよりアーカイブ2015年3月16日閲覧。
  2. ^ グリンステッド、チャールズ・M.、スネル、J.ローリー (2009). 「条件付き確率 - 離散条件付き」(PDF) .グリンステッド&スネルの確率入門. オレンジグローブ・テキスト. ISBN 978-1616100469. 2003年4月25日時点のオリジナルよりアーカイブ(PDF) . 2019年7月25日閲覧
  3. ^ 「確率 - 実数直線上の一様乱数は有効な分布か?」Cross Validated . 2021年10月6日閲覧
  4. ^ Ord, JK (1972)頻度分布のファミリー、グリフィン。ISBN 0-85264-137-0(例えば、表5.1と例5.4)
  5. ^ Scalas, Enrico (2025). 経済学者のための確率論入門(PDF) . 自費出版. p. 28. 2024年12月10日時点のオリジナルよりアーカイブ(PDF) . 2025年7月30日閲覧
  6. ^ Siegrist, Kyle (2020年5月5日). 「ランダム変数の変換」. LibreTexts Statistics . 2023年12月22日閲覧
  7. ^ Devore, Jay L.; Berk, Kenneth N. (2007). 現代数理統計とその応用. Cengage. p. 263. ISBN 978-0-534-40473-4
  8. ^ デイヴィッド・スターザカー (2007年1月1日). 『初等確率論』. ケンブリッジ大学出版局. ISBN 978-0521534284. OCLC  851313783。

さらに読む

Retrieved from "https://en.wikipedia.org/w/index.php?title=Probability_density_function&oldid=1323969160"