Charakteristická funkcia (teória pravdepodobnosti)

Charakteristická funkcia je v teórii pravdepodobnosti a matematickej štatistike jedna z funkcií náhodnej veličiny. Využíva sa (okrem iného) pri charakterizovaní a určovaní vlastností náhodných veličín a pri skúmaní limitného správania sa a limitných viet náhodných veličín.

Charakteristická funkcia úplne určuje rozdelenie pravdepodobnosti náhodnej veličiny. Ak existuje hustota pravdepodobnosti náhodnej veličiny, tak potom je charakteristická funkcia Fourierova transformácia tejto hustoty.

Každá náhodná veličina má svoju charakteristickú funkciu, teda inak povedané – charakteristická funkcia náhodnej veličiny existuje vždy. V tom sa líši napríklad od momentovej vytvárajúcej funkcie, ktorá nie je definovaná pre všetky náhodné veličiny.

Definícia

Nech $X$ je náhodná premenná a nech $F(x)$ je jej distribučná funkcia. Komplexná funkcia reálnej premennej ${\phi }_X(t):ℝ\to ℂ$, ktorú definujeme nasledujúcim vzťahom:

${\phi }_X(t)=E\left[e^{itX}\right]=\underset{-\mathrm{\infty }}{\overset{\mathrm{\infty }}{\int }}{e}^{itx}dF(x)(=\underset{-\mathrm{\infty }}{\overset{\mathrm{\infty }}{\int }}{e}^{itx}{f}_X(x)dx)$

sa nazýva charakteristická funkcia náhodnej premennej $X$.

V uvedenom vzťahu písmeno $i$ označuje tzv. imaginárnu jednotku komplexného čísla $a+ib$, $ℝ$ je množina reálnych čísel, $ℂ$ je množina komplexných čísel a $t\in ℝ$. Pre imaginárnu jednotku uvedenú v definícii platí známy vzťah: $i^2=-1$. Vo výraze v zátvorke nachádzajúcom sa na konci vzťahu označuje symbol $f_X(x)$ hustotu náhodnej veličiny. Posledná rovnosť však platí len v tom prípade, ak existuje hustota náhodnej veličiny (pokiaľ neexistuje, tak samozrejme nemôžeme charakteristickú funkciu pomocou nej vyjadriť).

Ďalej môžeme definovať vzťah pre $e^{it}$ nasledovne:

$e^{it}=cos(t)+isin(t)$

A vďaka tomuto vzťahu môžeme písať:

${\phi }_X(t)=E\left[e^{itX}\right]=E[cos(tX)]+iE[sin(tX)]=\underset{-\mathrm{\infty }}{\overset{\mathrm{\infty }}{\int }}cos(tx)dF(x)+i\underset{-\mathrm{\infty }}{\overset{\mathrm{\infty }}{\int }}sin(tx)dF(x)$

Pokiaľ je uvažovaná náhodná veličina $X$ diskrétna, tak platí nasledovné:

${\phi }_X(t)=\sum _k{e}^{it{x}_k}P[X=x_k]=\sum _{k}cos(t{x}_k)P[X=x_k]+i\sum _{k}sin(t{x}_k)P[X=x_k]$

Zovšeobecnenie

Predchádzajúca definícia sa dá zovšeobecniť aj pre zložitejšie (iné ako jednorozmerné) náhodné veličiny.

• Pokiaľ uvažujeme nasledovný náhodný vektor $X^T=(X_1,\cdots ,X_n)$, tak jeho charakteristická funkcia je definovaná nasledovne:

${\phi }_X(t_1,\cdots ,t_n)=E\left[e^{i\sum _{i=1}^n{t}_i{X}_i}\right]=E\left[e^{i{t}^{T}X}\right]$
kde $t^T=(t_1,\cdots ,t_n)$.

• Ak $X$ je náhodná matica typu $k\times p$, tak pre $t\in R^{k\times p}$ potom platí:

${\phi }_X(t)=E\left[e^{i\mathrm{tr}(t^{T}X)}\right]$

• V prípade, že $X$ je komplexná náhodná premenná a $t\in ℂ$, tak pre charakteristickú funkciu platí nasledovný vzťah:

${\phi }_X(t)=E\left[e^{i\mathrm{Re}(\bar{t}X)}\right]$

• V prípade, že $X$ je komplexný náhodný vektor a $t\in {ℂ}^k$, tak pre jeho charakteristickú funkciu platí zase nasledovný vzťah:

${\phi }_X(t)=E\left[e^{i\mathrm{Re}(t^{*}X)}\right]$

• A v prípade, že $X$ je stochastický (náhodný) proces, tak pre každú funkciu $t(s)$ takú, že integrál $\underset{ℝ}{\int }t(s)X(s)ds$ konverguje pre takmer všetky realizácie $X$, platí nasledovné:

${\phi }_X(t)=E\left[e^{i\underset{ℝ}{\int }t(s)X(s)ds}\right]$

V predchádzajúcom značení použité symboly vyjadrujú:

• $\{.{\}}^T$ označuje transpozíciu (transponovanú maticu alebo vektor)
• $tr(.)$ označuje stopu matice (skratka z anglického slova trace)
• $Re(.)$ označuje reálnu časť komplexného čísla
• $\overline{z}$ označuje komplexne združené číslo
• $*$ označuje konjugovanú transpozíciu (v tomto prípade komplexného vektora), teda: $z^{*}={\overline{z}}^T$

Označenie charakteristickej funkcie

V závislosti od literatúry sa používa rôzne označenie (rôznymi gréckymi písmenami), napr:

• ${\phi }_X(t)$
• ${\psi }_X(t)$

Vlastnosti charakteristickej funkcie

Charakteristická funkcia má niekoľko dôležitých vlastností. Jednou z týchto vlastností je, že charakteristická funkcia v bode 0 je rovná 1, teda matematicky zapísané: ${\phi }_X(0)=1$.

Platnosť tejto rovnosti sa dá ukázať nasledovným postupom:

${\phi }_X(0)=E\left[e^{i.0.X}\right]=\underset{-\mathrm{\infty }}{\overset{\mathrm{\infty }}{\int }}{e}^{i.0.x}dF(x)=\underset{-\mathrm{\infty }}{\overset{\mathrm{\infty }}{\int }}1.dF(x)=\underset{-\mathrm{\infty }}{\overset{\mathrm{\infty }}{\int }}dF(x)=1$

Ďalšou vlastnosťou je, že charakteristická funkcia je ohraničená, teda: $|{\phi }_X(t)|\le 1$ pre všetky $t\in ℝ$.

Pre charakteristickú funkciu zo záponého argumentu zase platí nasledovné: ${\phi }_X(-t)=\overline{{\phi }_X(t)}$ pre všetky $t\in R$, kde $\overline{{\phi }_X(t)}$ vyjadruje komplexne združené číslo k číslu ${\phi }_X(t)$

Charakteristická funkcia ${\phi }_X(t)$ je rovnomerne spojitá na množine reálnych čísiel $ℝ$

Charakteristická funkcia ${\phi }_X(t)$ je tiež kladne semidefinitná, teda platí:

$\sum _{i=1}^n\sum _{j=1}^n{\lambda }_i\overline{{\lambda }_i}{\phi }_X(t_i-t_j)\ge 0$
pričom nerovnosť platí pre ľubovoľné komplexné čísla ${\lambda }_1,\cdots ,{\lambda }_n$ a ľubovoľné reálne čísla $t_1,\cdots ,t_n$, pre $n\ge 1$. Symbol $\overline{{\lambda }_i}$ označuje komplexne združené číslo k číslu ${\lambda }_i$.

Existuje vzťah medzi charakteristickými funkciami náhodných premenných a distribučnými funkciami náhodných premenných. Teda pokiaľ máme dve náhodné premenné $X_1$ a $X_2$, tak platí nasledovné:

$F_{X_1}=F_{X_2}\iff {\phi }_{X_1}={\phi }_{X_2}$

Pokiaľ existuje hustota $f(x)$ náhodnej veličiny $X$, pričom táto náhodná veličina má distribučnú funkciu $F(x)$, tak potom charakteristická funkcia tejto náhodnej veličiny sa dá vyjadriť aj v nasledujúcom tvare:

${\phi }_X(t)=\underset{-\mathrm{\infty }}{\overset{\mathrm{\infty }}{\int }}{e}^{itx}f(x)dx=\underset{-\mathrm{\infty }}{\overset{\mathrm{\infty }}{\int }}cos(tx)f(x)dx+i\underset{-\mathrm{\infty }}{\overset{\mathrm{\infty }}{\int }}sin(tx)f(x)dx$

Pre charakteristickú funkciu súčtu náhodných veličín, teda pre takú náhodnú veličinu $Y$, ktorá je súčtom $n$ nezávislých náhodných veličín: $Y=\sum _{i=1}^n{X}_i$ platí vzťah:

${\phi }_Y(t)={\phi }_{\sum _{i=1}^n{X}_i}(t)=\prod _{i=1}^n{\phi }_{X_i}(t)$

Pre náhodnú veličinu nasledovného tvaru: $Y=aX+b$ zase platí:

${\phi }_Y(t)=e^{itb}{\phi }_X(at)$

Pomocou charakteristickej funkcie sa dajú pomerne jednoducho vyrátať aj momenty náhodných veličín (pokiaľ tieto samozrejme existujú). Predpokladajme, že pre $k=1,2,\cdots ,j$ , $j\ge 1$ je $E(|X{|}^k)<\mathrm{\infty }$. Potom vieme, že k-te derivácie, ktoré označíme ${\phi }^k$ funkcie $\phi$ existujú a platí pre ne nasledovný vzťah:

${\phi }_X^k(0)=i^{k}E\left(X^k\right)$

Existencia charakteristickej funkcie

Každá náhodná veličina má svoju charakteristickú funkciu, teda inak povedané – charakteristická funkcia náhodnej veličiny existuje vždy. V tom sa líši napríklad od momentovej vytvárajúcej funkcie, ktorá nie je definovaná pre všetky náhodné veličiny.

Pokiaľ teda máme ľubovoľnú náhodnú veličinu $X$ a $t\in ℝ$, tak určite vieme, že pre každé $t\in ℝ$ platí (napr. pre funkciu kosínus), že: $|cos(tx)|\le 1$ (analogicky pre funkciu sínus). Teda určite vieme, že funkcie $e^{itx}$, $cos(tx)$ a $sin(tx)$ sú spojité a ohraničené na množine $ℝ$. Z toho teda dostávame nasledovné:

$E\left[e^{itx}\right]=\underset{-\mathrm{\infty }}{\overset{\mathrm{\infty }}{\int }}{e}^{itx}dF(x)<\mathrm{\infty }$

$E[cos(tx)]=\underset{-\mathrm{\infty }}{\overset{\mathrm{\infty }}{\int }}cos(tx)dF(x)<\mathrm{\infty }$

$E[sin(tx)]=\underset{-\mathrm{\infty }}{\overset{\mathrm{\infty }}{\int }}sin(tx)dF(x)<\mathrm{\infty }$

Teda Lebesgueove-Stieltjesove integrály existujú a sú konečné, ohraničené.

Príklady

Pre konkrétne rozdelenia pravdepodobnosti má charakteristická funkcia nasledovné vyjadrenia:

Rozdelenie pravdepodobnosti	Charakteristická funkcia
Degenerované rozdelenie ${\delta }_a$	$e^{ita}$
Alternatívne rozdelenie $Alt(p)$	$1-p+p{e}^{it}$
Binomické rozdelenie $Bin(n,p)$	$(1-p+p{e}^{it}{)}^n$
Negatívne binomické rozdelenie $NBin(r,p)$	${\left(\frac{1-p}{1-p{e}^{it}}\right)}^r$
Poissonovo rozdelenie $Poi(\lambda )$	$e^{\lambda (e^{it}-1)}$
Rovnomerné rozdelenie $R(a,b)$	$\frac{e^{itb}-e^{ita}}{it(b-a)}$
Laplaceovo rozdelenie $L(\mu ,b)$	$\frac{e^{it\mu }}{1+b^2{t}^2}$
Normálne rozdelenie $N(\mu ,{\sigma }^2)$	$e^{it\mu -\frac{1}{2}{\sigma }^2{t}^2}$
Chí-kvadrát rozdelenie ${\chi }_k^2$	$(1-2it{)}^{-k/2}$
Cauchyho rozdelenie $C(\mu ,\theta )$	$e^{it\mu -\theta |t|}$
Gama rozdelenie $\mathrm{\Gamma }(k,\theta )$	$(1-it\theta {)}^{-k}$
Exponenciálne rozdelenie $Exp(\lambda )$	$(1-it{\lambda }^{-1}{)}^{-1}$
Mnohorozmerné normálne rozdelenie $N(\mu ,\mathrm{\Sigma })$	$e^{i{t}^T\mu -\frac{1}{2}{t}^T\mathrm{\Sigma }t}$
Mnohorozmerné Cauchyho rozdelenie $C(\mu ,\mathrm{\Sigma })$	$e^{i{t}^T\mu -\sqrt{t^T\mathrm{\Sigma }t}}$

Zdroj

• Šablóna:Citácia knihy
• Šablóna:Citácia knihy
• Šablóna:Citácia knihy

• Šablóna:Preklad