K-INFO
HU
EN
Belépés

Információelmélet

Information Theory
A tantárgyleírás hatályossága
Hatályosság kezdete:
Hatályosság vége:
Tantárgy neve (magyarul, angolul)
Információelmélet
Information Theory
Tantárgykód BMEVIMA3209
Tantárgyjelleg
Képzési szint
Kurzustípusok és óraszámok (heti/féléves)
Kurzustípus elmélet gyakorlat laboratóriumi gyakorlat
óraszám (heti) 4 0 0
jelleg (kapcsolt/önálló)
Tanulmányi teljesítmény/értékelés típusa vizsga
Tantárgy kreditértéke 5
Tantárgyfelelős
Dr. Györfi László
beosztás: adjunktus
Tantárgyat gondozó oktatási szervezeti egység
Kar
Tantárgy weboldala
Tantárgy elsődleges mintatantervi jellege
Közvetlen előkövetelmények – Erős előkövetelmény nincs
Közvetlen előkövetelmények – Gyenge előkövetelmény nincs
Közvetlen előkövetelmények – Párhuzamos előkövetelmény nincs
Közvetlen előkövetelmények – Mérföldkő előkövetelmény nincs
Közvetlen előkövetelmények – Kizáró feltétel nincs

Célkitűzés

Tantárgyprogram

Entrópia és tulajdonságai Feltételes entrópia és tulajdonságai. Kölcsönös információ és tulajdonságai. Egyértelmű dekódolhatóság, prefix kód. Jensen-egyenlőtlenség. McMillan-egyenlőtlenség, Kraft-egyenlőtlenség. Üzenet változó szóhosszúságú kódolása. Shannon--Fano-kód. Huffman-kód. Lempel-Ziv algoritmusok. Forrásentrópia. Stacionárius forrás változó szóhosszúságú kódolása. Markov-forrás. Forráskódolás előírt hibavalószínűséggel.
Információstabilitás. Forráskódolás betűnkénti hűségkritériummal (bizonyításvázlat). Egyenletes kvantáló négyzetes hibája, egyenletes kvantáló entrópiája, Lloyd--Max-algoritmus. Kompanderes kvantálás. Vektorkvantálás. Prediktív kvantálás (DPCM, DM). Lineáris becslés. Transzformációs kódolás Hang- és beszédkódolás. Képkódolás, videokódolás. Bayes-döntés. Maximum likelihood döntés bináris szimmetrikus csatorna kimenetén. Optimális detektálás. Emlékezetnélküli csatorna. Csatornakapacitás. Fano-egyenlőtlenség. Csatornakódolási tétel megfordítása. Csatornakódolási tétel (bizonyításvázlat).

A tárgy fő célja az, hogy bemutassa az információ közlésének és feldolgozásának fő törvényszerűségeit, elvi határait, és ezen elvi határokat közelítő eljárásokat (kódok, hozzáférési algoritmusok, döntések, becslések).

Tanulmányi eredmények

Ez a tantárgy a KKK rendeletben meghatározott, következő kompetenciák fejlesztését szolgálja:

Tudás

Nincsenek rögzített tanulási eredmények.

Képességek

Nincsenek rögzített tanulási eredmények.

Attitűd

Nincsenek rögzített tanulási eredmények.

Autonómia és felelősség

Nincsenek rögzített tanulási eredmények.

Oktatási módszertan

Előadás (konzultációval).

Tanulástámogató anyagok

Online források
Györfi László, Győri Sándor, Vajda István: Információelmélet és kódelmélet, Typotex, 2000; Linder Tamás, Lugosi Gábor: Bevezetés az információelméletbe, Tankönyvkiadó 1990

A tantárgy teljesítéséhez ajánlott előzetes ismeretek

Tudás típusú kompetenciák
(azon előzetes ismeretek összessége, amelyek megléte nem kötelező, de a tantárgy eredményes teljesítését nagyban elősegíti)
Valószínüségszámítás, Tömegkiszolgálás
Képesség típusú kompetenciák
(azon előzetes képességek és készségek összessége, amelyek megléte nem kötelező, de a tantárgy eredményes teljesítését nagyban elősegíti)
nincs
Ajánlott (nem kötelező) előzetesen megszerzendő kompetenciák
(azon ajánlott (nem kötelező) előzetesen megszerzendő kompetenciák összessége, amelyek jelentősen hozzájárulnak a tantárgy eredményes teljesítéséhez)
Valószínüségszámítás, Tömegkiszolgálás
Általános szabályok
Követelmények: a. A szorgalmi időszakban: 1 zárthelyi a 9. héten. Javító célú pót-ZH nincs. Az aláírás feltétele: a zárthelyi legalább 40%-os. Az aláírás pótlására a szorgalmi időszak utolsó hetében van lehetőség szóbeli beszámoló formájában. b. A vizsgaidőszakban: szóbeli vizsga c. Elővizsga: nincs
Teljesítményértékelési módszerek
Szorgalmi időszakban végzett teljesítményértékelések részletes leírása

Nincs megadva részletes értékelés.

Szorgalmi időszakban végzett teljesítményértékelések részaránya

Nincs megadva részarány.

Vizsgaidőszakban végzett teljesítményértékelések részletes leírása

Nincs megadva részletes értékelés.

Vizsgarészek részaránya

Nincs megadva részarány.

Érdemjegy megállapítása

Nincs megadva érdemjegy határ.

Jelenléti és részvételi követelmények

Nincs megadva jelenléti követelmény.

Javítás, ismétlés és pótlás különös szabályai

Nincs megadva.

Rövid leírás

Nincs megadva.

Részletes leírás

Nincs megadva.

Ajánlott tantárgyak
Tömegkiszolgálás, kredit
A tantárgy elvégzéséhez szükséges tanulmányi munka

Nincs megadva munkaidő bontás.

Tantárgykövetelmények hatályossága
Tantárgykövetelmények hatályosságának kezdete:
Tantárgykövetelmények hatályosságának vége:
Tantervi elhelyezés

Nincsenek rögzített tantervi elhelyezések ehhez a tárgyverzióhoz.