7.2. 7.2. Néhány fogalom folytonos esetben

Entrópia, mint várható érték:

7.2. Példa. 1. Exponenciális eloszlásra:

2. Normális eloszlásra:

Együttes entrópia:

7.3. Példa. Normális eloszlásra:

Kölcsönös információmennyiség:

7.4. Példa. Normális eloszlásra:

I-divergencia:

7.2. Megjegyzés.

7.3. Megjegyzés. Transzformáció:

Diszkrét esetben Egyenlőség akkor és csak akkor, ha invertálható.

Folytonos esetben Egyenlőség akkor és csak akkor, ha invertálható.

Bizonyítás. Ha invertálható, akkor a valószínűségi változók transzformációja alapján