指数分布

指数関数
確率密度関数
指数分布の確率密度関数のプロット
累積分布関数
累積分布関数
パラメータレート、または逆スケール
サポート
PDF
CDF
四分位数
平均
中央値
モード
分散
歪度
過剰尖度
エントロピ
MGF
CF
フィッシャー情報
カルバック・ライブラー距離
予想される不足額

確率論統計学において指数分布または負の指数分布は、ポアソン点過程、すなわち、事象が一定の平均率で連続的かつ独立して発生する過程における事象間の距離の確率分布である。距離パラメータは、製造エラー間の時間や織物製造過程における織物ロールに沿った長さなど、過程の意味のある一次元尺度であればよい。[1]これはガンマ分布の特殊なケースである。これは幾何分布の連続的な類似体であり記憶がないという重要な特性を持つ。[2]ポアソン点過程の解析に使用されることに加えて、他のさまざまな文脈でも見られる。[3]

指数分布は、分布の指数族のクラスとは異なります。これは、指数分布をそのメンバーの一つとして含む確率分布の大きなクラスですが、正規分布、二項分布ガンマ分布ポアソン分布など、他の多くの分布も含みます。[3]

定義

確率密度関数

指数分布の確率密度関数(pdf

ここでλ > 0 は分布のパラメータであり、しばしば速度パラメータと呼ばれます。この分布は区間 [0, ∞)でサポートされます。確率変数 Xがこの分布に従う場合、 X ~ Exp( λ )と書きます 

指数分布は無限に割り切れる性質を示す。

累積分布関数

累積分布関数は次のように与えられる。

代替パラメータ化

指数分布は、尺度パラメータ β = 1/ λ(平均でもある )でパラメータ化されることがあります。

プロパティ

平均、分散、モーメント、中央値

平均は確率質量中心、つまり最初のモーメントです。
中央値は原像 F −1 (1/2)である。

指数分布に従う確率変数Xの平均または期待値は、速度パラメータλで与えられ、

以下の例に照らし合わせると、これは理にかなっています。1 時間あたり平均 2 回の電話を受ける人は、連続した電話の間隔が 0.5 時間、つまり 30 分になると予想できます。

X分散で与えられるため、標準偏差は平均と等しくなります。

Xモーメント次のように与えられる

X中心モーメントは次のように与えられる。ここで、! nnサブファクタリングである。

X中央は次のように与えられます。ここでlnは自然対数を表します。したがって、平均値と中央値の絶対差は

中央値-平均値不等式に従って

指数確率変数の無記憶性

指数分布に従う確率変数Tは次の関係に従う。

これは、相補累積分布関数を考慮するとわかります

T をある初期時刻に対するイベント発生の待機時間として解釈する場合、この関係は、 T が初期時間sにわたってイベントを観測できないことを条件としている場合、残りの待機時間の分布は元の無条件分布と同じになることを意味します。例えば、イベントが30秒経過しても発生していない場合、発生までに少なくとも10秒かかる条件付き確率は、イベントが初期時刻から10秒以上経過した後に観測される無条件確率に等しくなります。

指数分布と幾何分布は、記憶のない唯一の確率分布です

したがって、指数分布は必然的に、一定の故障率を持つ唯一の連続確率分布でもあります。

四分位数

指数確率分布関数の Tukey 異常基準。
異常に対するTukey基準。[要出典]

Exp( λ )の分位関数(逆累積分布関数)

したがって、四分位数は次のようになります。

  • 第一四分位数: ln(4/3)/ λ
  • 中央値:ln(2)/ λ
  • 第三四分位数: ln(4)/ λ

その結果、四分位範囲はln(3)/ λとなる。

条件付きリスク値(期待不足額)

Exp( λ )の期待不足額または超分位値としても知られる条件付きリスク値(CVaR)は次のように導出される:[4]

緩衝超過確率(bPOE)

緩衝超過確率は、CVaRが閾値と等しくなる確率レベルから1を引いた値である。これは以下のように導出される。[4]

カルバック・ライブラー距離

(「近似」分布)と(「真の」分布)NATSにおける有向カルバック・ライブラー分布は次のように与えられる。

最大エントロピー分布

支持 [0, ∞)と平均μを持つすべての連続確率分布の中で、 λ = 1/ μの指数分布は最大の微分エントロピーを持つ。言い換えれば、これは、ゼロ以上の確率変量Xに対して、E[ X ]が固定されたときの最大エントロピー確率分布である。[5]

指数確率変数の最小値の分布

X 1 , ..., X n を、それぞれ速度パラメータλ 1 , ..., λ nを持つ独立した指数分布に従う確率変数する。この場合、もまた指数分布に従う。

これは、相補累積分布関数を考慮するとわかります

最小値を達成する変数のインデックスは、カテゴリ分布に従って分布する。

証明は とすればわかる。すると、

X 1 , ..., X n がすべてパラメータ0を持たない場合、指数分布ではないことに注意してください 。 [6]

IID指数順序統計量の結合モーメント

独立かつ同一分布する指数確率変数とし、速度パラメータλとする対応する順序統計量を とするの場合、順序統計量と の結合モーメント次のように与えられる 。

これは、総期待値の法則と記憶なしの性質を適用することで確認できます。

最初の式は、全期待値 の法則から導かれます。2番目の式は、 を条件とすると が必ず成り立つという事実を利用しています。3番目の式は、を に置き換えるために、無記憶性を利用しています

2つの独立した指数確率変数の合計

2つの独立した確率変数の和の確率分布関数(PDF)は、それぞれのPDFの畳み込みです。とがそれぞれ速度パラメータを持つ独立した指数確率変数である場合の確率密度は次のように与えられます。この分布のエントロピーは閉じた形で得られます。(一般性を失うことなく)と仮定すると、次の ようになります。ここで、オイラー・マスケロニ定数、はディガンマ関数です[7]

等レートパラメータの場合、結果は形状 2 でパラメータを持つアーラン分布となり、これはガンマ分布の特殊なケースになります。

n個の独立したExp( λ)指数確率変数の合計はGamma(n, λ)分布に従います。

  • X ~ Laplace(μ, β −1 )の場合、 | X − μ| ~経験値(β)。[8]
  • X ~ U (0, 1)ならば−log( X ) ~ Exp(1)となる。
  • X ~ Pareto(1, λ)ならばlog( X ) ~ Exp(λ)となる。[8]
  • X ~ SkewLogistic(θ)の場合
  • X i ~ U (0, 1 )ならば
  • 指数分布は、スケールされたベータ分布の極限です
  • 指数分布は、タイプ 3ピアソン分布の特殊なケースです。
  • 指数分布は、形状パラメータが1であるガンマ分布の特殊なケースである。[8]
  • X ~ Exp(λ)かつX i ~ Exp(λ i )の場合:
    • 、正の係数によるスケーリングの下で​​の閉鎖。
    • 1 +  X ~ BenktanderWeibull (λ, 1) となり、これは切り捨て指数分布に近づきます。
    • ke X ~パレート( k ,λ) [8]
    • e −λX ~ U (0, 1)
    • e −X ~ベータ(λ, 1)。[8]
    • 1/e X ~べき乗法則( k , λ)
    • レイリー分布[8]
    • ワイブル分布[8]
    • [8]
    • μ − β log(λ X ) 〜ガンベル(μ, β)
    • 0、1、2、3、... の幾何分布
    • 1、2、3、4、... 上の幾何分布
    • Y ~ Erlang( n , λ)の場合、あるいは
    • λ ~ガンマ( k , θ) (形状、スケールパラメータ化)の場合、 Xの周辺分布はガンマ混合物であるLomax ( k , 1/θ)になります。
    • λ 1 X 1 − λ 2 Y 2 ~ラプラス(0, 1)
    • min{ X 1 , ..., X n } ~ Exp(λ 1 + ... + λ n )。
    • またλ i = λの場合:
      • Erlang ( k ,λ) = Gamma ( k ,λ) で、形状パラメータkは整数、速度パラメータλは整数である。[9]
      • もし なら
      • X iX j ~ ラプラス(0, λ −1 )。
    • X iも独立している場合は次のようになります。
      • ~ U (0, 1)
      • は確率密度関数 を持ちます。これを使用して信頼区間を得ることができます。
    • λ = 1の場合:
      • ロジスティック分布
      • μ − σ log( X ) ~ GEV(μ, σ, 0)
      • さらに、K分布
    • λ = 1/2 の場合もX ∼ χ2
      2
      つまり、Xは自由度2のカイ2乗分布に従う。したがって、
  • および~ポアソン( X )場合 (幾何分布)
  • ホイト分布は指数分布と逆正弦分布から得られる。
  • この場合、指数分布はκ指数分布の極限となります
  • 指数分布は、およびの場合の κ-一般化ガンマ分布の極限です

その他の関連ディストリビューション:

統計的推論

以下では、確率変数Xが速度パラメータ λ で指数分布し、Xからn 個の独立したサンプルがあり、サンプル平均が であると仮定します

パラメータ推定

λ の最大尤度推定値は次のように構築されます

変数から抽出された独立かつ同一に分布するサンプルx = ( x 1 , ..., x n )が与えられた場合のλの尤度関数は次のようになります。

ここで:はサンプル平均です。

尤度関数の対数の導関数は次のようになります。

したがって、レートパラメータの最大尤度推定値は次のようになります。

これは不偏推定値ではないがおよび分布平均不偏[10] MLE [11]推定値である。

のバイアスは に等しく、バイアス補正された最大尤度推定値を与える。

平均二乗誤差(バイアスと分散のトレードオフも参照)のおおよその最小値は、サンプルサイズが2より大きいと仮定し、MLEに補正係数をかけて求めることができる。これは逆ガンマ分布の平均と分散から導かれる[12]

フィッシャー情報

速度パラメータの推定値に対するフィッシャー情報( )は次のように与えられます。

分布を入力して解くと次のようになります。

これは、指数分布の各独立サンプルが未知の速度パラメータについて持つ情報量を決定します

信頼区間

指数分布の速度パラメータの正確な100(1 − α)%信頼区間は次式で与えられる: [13]これは 次式にも等しく、 χ2
pv
自由度vカイ二乗分布100( p ) パーセンタイル、nは観測値の数、xバーは標本平均である。正確な区間の端点への単純な近似は、 χの正規近似を用いて導出することができる。 2
pv
分布。この近似により、95%信頼区間は次の値になります。

この近似値は、少なくとも15~20個の元素を含むサンプルには許容できる可能性がある。[14]

共役事前分布を用いたベイズ推論

指数分布の共役事前分布はガンマ分布です(指数分布はその特殊ケースです)。ガンマ確率密度関数の以下のパラメータ化は有用です。

事後分布 pは、上で定義した尤度関数とガンマ事前分布を使って次のように表すことができます。

事後密度p は、欠落している正規化定数を除いて指定されました。これはガンマ確率密度関数の形をしているので、簡単に埋めることができ、以下の式が得られます。

ここで、ハイパーパラメータ αは事前観測値の数、βは事前観測値の合計として解釈できます。ここでの事後平均は以下です。

較正事前分布を用いたベイズ推論

指数分布は、群構造を持つ統計分布の一つである。群構造の結果として、指数分布にはハール測度が関連付けられる。これは、ベイズ予測においてハール測度を事前分布(ハール事前分布として知られる)として使用すると、任意の真のパラメータ値に対して完全に較正された確率が得られる。 [15] [16] [17]完全に較正された確率は、予測される確率がサンプル外イベントの頻度と正確に一致するという性質を持つ。指数分布の場合、ハール事前分布を用いて生成されたベイズ予測の正確な式が次式で与えられる。

これは事前予測の較正の例であり、事前予測は較正を改善する(そしてこの場合は較正を完璧にする)ように選択される。Haar事前分布を用いた指数関数の事前予測の較正は、Rソフトウェアパッケージfitdistcp[1]に実装されている。

以下の予測セクションで説明するように、他のさまざまな観点からも同じ予測を導き出すことができます。

発生と応用

イベントの発生

指数分布は、均質なポアソン過程における到着間隔の長さを記述するときに自然に発生します

指数分布は、離散過程の状態変化に必要なベルヌーイ試行回数を表す幾何分布の連続版と見なすことができます。これに対し、指数分布は連続過程の状態変化にかかる時間を表します。

現実世界のシナリオでは、一定率(または単位時間あたりの確率)という仮定が満たされることはほとんどありません。例えば、電話の着信率は時間帯によって異なります。しかし、平日の午後2時から4時のように、着信率がほぼ一定である時間帯に焦点を当てると、指数分布は次の電話がかかってくるまでの時間の近似モデルとして適しています。同様の注意事項は、近似的に指数分布に従う変数を生成する以下の例にも当てはまります。

  • 放射性粒子が崩壊するまでの時間、またはガイガーカウンターのクリック間の時間
  • 1回の電話を受けてから次の電話を受けるまでの時間
  • 縮約形信用リスクモデルにおける債務不履行(企業債権者への支払い)までの時間

指数変数は、 DNA鎖上の変異間の距離や、特定の道路上の轢き殺傷者間の距離など、特定のイベントが単位長さあたり一定の確率で発生する状況をモデル化するためにも使用できます。

待ち行列理論では、システム内のエージェントのサービス時間(例えば、銀行の窓口係などが顧客にサービスを提供するのにかかる時間)は、しばしば指数分布変数としてモデル化されます。(例えば、顧客の到着も、到着が独立しており、かつ同一の分布を示す場合、ポアソン分布によってモデル化されます。)複数の独立したタスクのシーケンスとして考えられるプロセスの長さは、アーラン分布(複数の独立した指数分布変数の合計の分布)に従います。

信頼性理論信頼性工学においても、指数分布は広く用いられています。この分布はメモリレス特性を持つため、信頼性理論で使用されるバスタブ曲線の一定ハザード率部分をモデル化するのに適しています。また、信頼性モデルに故障率を簡単に追加できるため、非常に便利です。しかし、指数分布は生物や技術機器の寿命全体をモデル化するには適していません。なぜなら、ここでの「故障率」は一定ではないからです。非常に新しいシステムや非常に古いシステムでは、故障が多く発生します。

CumFreq [18]を使用して年間最大1日降雨量に近似した累積指数分布

物理学では、一定の温度圧力のもとで均一な重力場にある気体を観測すると、様々な分子の高さも近似的に指数分布に従います。これは気圧の公式として知られています。これは、後述するエントロピーの性質によるものです。

水文学では、指数分布は日降水量や河川流量の月間および年間の最大値などの変数の極端な値を分析するために使用されます。[19]

青い図は、年間最大日降水量の順位付けに指数分布を当てはめた例を示しており、二項分布に基づく90%信頼区間も表示しています。降水量データは、累積頻度分析の一環としてプロットされた位置によって表されています

手術室管理において、典型的な作業内容がない手術のカテゴリ(すべての種類の手術を網羅する緊急治療室など)の手術時間の分布。

予測

未知の指数分布からn個のデータ点の標本を観測した後、これらの標本を用いて同じ情報源からの将来のデータについて予測を行うのが一般的な課題である。将来の標本に対する一般的な予測分布は、いわゆるプラグイン分布であり、指数密度関数に速度パラメータλの適切な推定値を代入することによって形成される。推定値としては、最大尤度の原理によって与えられるものが一般的に選択され、これを用いることで、観測標本x = ( x 1 , ..., x n )を 条件とする将来の標本x n +1に対する予測密度は以下のように与えられる。

ベイズアプローチは、推定パラメータの不確実性を考慮した予測分布を提供しますが、これは事前分布の選択に大きく依存する可能性があります。

主観的ベイズアプローチで生じる事前分布の選択の問題を回避した予測分布は

これは次のように考えることができる

  1. 頻度主義的信頼分布は、重要な量の分布から得られる[20]
  2. プロファイル予測尤度は、 x n +1λの結合尤度からパラメータλを最大化によって除去することによって得られる。[21]
  3. 客観的ベイズ予測事後分布。これは、情報を持たないジェフリーズ事前分布1/ λを用いて得られる。これはこの場合、右ハール事前分布に等しい。右ハール事前分布を用いて生成された予測は、完全に較正された確率を与えることが保証されている。[22] [23]
  4. 情報理論的考察に基づく条件付き正規化最大尤度(CNML)予測分布。[24]

予測分布の精度は、真の指数分布(速度パラメータλ 0)と、標本xに基づく予測分布との間の距離または乖離によって測定できる。カルバック・ライブラー・ダイバージェンスは、 2つの分布間の差を測る、パラメータ化を必要としない一般的な指標である。Δ( λ 0 || p )を、速度パラメータλ 0を持つ指数分布と予測分布pとの間のカルバック・ライブラー・ダイバージェンスとすると、次式が成り立つ。

ここで、期待値は速度パラメータλ 0 ∈ (0, ∞)を持つ指数分布に対するものでありψ( · )はディガンマ関数である。すべてのサンプルサイズn > 0において、CNML予測分布は平均カルバック・ライブラー・ダイバージェンスに関して最大​​尤度プラグイン分布よりも明らかに優れていることは明らかである

ランダム変数生成

指数変量を生成する概念的に非常に単純な方法は、逆変換サンプリングに基づいています。単位区間(0, 1)上の一様分布から抽出されたランダム変量Uが与えられた場合、変量

指数分布に従う。ここでF −1は分位関数であり、次のように定義される。

さらに、U が(0, 1) 上で一様であれば、 1 − Uも一様です。これは、次のように指数変数を生成できることを意味します。

指数変数を生成するための他の方法については、Knuth [25]と Devroye [26]によって議論されています。

ソートルーチンを使用せずに、順序付けされた指数変数のセットを高速に生成する方法も利用可能です。[26]

参照

参考文献

  1. ^ “7.2: 指数分布”. Statistics LibreTexts . 2021年7月15日. 2024年10月11日閲覧
  2. ^ 「指数分布 | 数学 | ブリタニカ」www.britannica.com . 2024年10月11日閲覧
  3. ^ ab Weisstein, Eric W. 「指数分布」. mathworld.wolfram.com . 2024年10月11日閲覧
  4. ^ ab Norton, Matthew; Khokhlov, Valentyn; Uryasev, Stan (2019). 「共通確率分布のCVaRとbPOEの計算とポートフォリオ最適化および密度推定への応用」(PDF) . Annals of Operations Research . 299 ( 1– 2). Springer: 1281– 1315. arXiv : 1811.11301 . doi :10.1007/s10479-019-03373-1. オリジナル(PDF)から2023年3月31日にアーカイブ。 2023年2月27日閲覧
  5. ^ Park, Sung Y.; Bera, Anil K. (2009). 「最大エントロピー自己回帰条件付き異分散モデル」(PDF) . Journal of Econometrics . 150 (2). Elsevier: 219– 230. doi :10.1016/j.jeconom.2008.12.014. 2016年3月7日時点のオリジナル(PDF)からアーカイブ。 2011年6月2日閲覧
  6. ^ Michael, Lugo. 「指数関数の最大値の期待値」(PDF) 。 2016年12月20日時点のオリジナル(PDF)からアーカイブ。 2016年12月13日閲覧
  7. ^ Eckford, Andrew W.; Thomas, Peter J. (2016). 「2つの独立した非同一分布指数確率変数の和のエントロピー」arXiv : 1609.02911 [cs.IT].
  8. ^ abcdefghi Leemis, Lawrence M.; McQuestion, Jacquelyn T. (2008年2月). 「単変量分布関係」(PDF) . The American Statistician . 62 (1): 45-53. doi :10.1198/000313008X270448.
  9. ^ イベ、オリバー・C. (2014). 『応用確率過程とランダム過程の基礎』(第2版). アカデミック・プレス. p. 128. ISBN 9780128010358
  10. ^ リチャード・アーノルド・ジョンソン、ディーン・W・ウィチャーン(2007年)『応用多変量統計分析』ピアソン・プレンティス・ホール、ISBN 978-0-13-187715-3. 2012年8月10日閲覧
  11. ^ NIST/SEMATECH 統計手法の電子ハンドブック
  12. ^ Elfessi, Abdulaziz; Reineke, David M. (2001). 「ベイズ的アプローチによる古典的推定:指数分布」. Journal of Statistics Education . 9 (1). doi : 10.1080/10691898.2001.11910648 .
  13. ^ ロス、シェルドン・M. (2009). エンジニアと科学者のための確率統計入門(第4版). Associated Press. p. 267. ISBN 978-0-12-370483-2
  14. ^ Guerriero, V. (2012). 「べき乗分布:マルチスケール推論統計法」. Journal of Modern Mathematics Frontier . 1 : 21–28 .
  15. ^ Severini, TA (2002-12-01). 「右不変事前分布の正確な確率マッチング特性について」 . Biometrika . 89 (4): 952– 957. doi :10.1093/biomet/89.4.952. ISSN  0006-3444.
  16. ^ Gerrard, R.; Tsanakas, A. (2011). 「パラメータの不確実性下における故障確率」 .リスク分析. 31 (5): 727– 744. Bibcode :2011RiskA..31..727G. doi :10.1111/j.1539-6924.2010.01549.x. ISSN  1539-6924. PMID  21175720.
  17. ^ ジューソン, スティーブン; スウィーティング, トレバー; ジューソン, リン (2025-02-20). 「事前検定を用いた極端気象リスク評価における信頼性バイアスの低減」.統計気候学、気象学、海洋学の進歩. 11 (1): 1– 22. Bibcode :2025ASCMO..11....1J. doi : 10.5194/ascmo-11-1-2025 . ISSN  2364-3579.
  18. ^ 「Cumfreq、累積頻度分析用の無料コンピュータプログラム」。
  19. ^ Ritzema, HP編 (1994). 頻度分析と回帰分析. 第6章: 排水の原理と応用, 出版物16, 国際土地改良研究所 (ILRI), ワーゲニンゲン, オランダ. pp. 175–224. ISBN 90-70754-33-9
  20. ^ Lawless, JF; Fredette, M. (2005). 「頻度論的予測区間と予測分布」. Biometrika . 92 (3): 529– 542. doi :10.1093/biomet/92.3.529.
  21. ^ Bjornstad, JF (1990). 「予測尤度:レビュー」. Statist. Sci . 5 (2): 242– 254. doi : 10.1214/ss/1177012175 .
  22. ^ Severini, Thomas A.; Mukerjee, Rahul; Ghosh, Malay (2002-12-01). 「右不変事前分布の正確な確率マッチング特性について」 . Biometrika . 89 (4): 952– 957. doi :10.1093/biomet/89.4.952. ISSN  0006-3444.
  23. ^ ジューソン, スティーブン; スウィーティング, トレバー; ジューソン, リン (2025-02-20). 「事前検定を用いた極端気象リスク評価における信頼性バイアスの低減」.統計気候学、気象学、海洋学の進歩. 11 (1): 1– 22. Bibcode :2025ASCMO..11....1J. doi : 10.5194/ascmo-11-1-2025 . ISSN  2364-3579.
  24. ^ DF SchmidtとE. Makalic、「指数分布の普遍モデル」、IEEE Transactions on Information Theory、第55巻、第7号、pp. 3087–3090、2009年doi :10.1109/TIT.2009.2018331
  25. ^ ドナルド・E・クヌース(1998).『コンピュータプログラミングの芸術』第2巻:半数値アルゴリズム、第3版. ボストン: アディソン・ウェスレー. ISBN 0-201-89684-23.4.1節、133ページを参照
  26. ^ ab Luc Devroye (1986).非一様乱数変量生成法. ニューヨーク: Springer-Verlag. ISBN 0-387-96305-7第9章第2節、392~401ページを参照
Retrieved from "https://en.wikipedia.org/w/index.php?title=Exponential_distribution&oldid=1320816285"