Babeş-Bolyai Tudományegyetem Kolozsvár
Matematika és Informatika Kar
Képzési szint: alap
Doménium: informatika mérnöki
Szak: információ mérnöki 
Előadás nyelve: Magyar
SYLLABUS

I. Általános adatok
Kód	Tantárgy neve	
MMP0006_153	Információelmélet	

Félév	Órák: C+S+L	Kategória	Típus	
5	2+0+2	szak	kötelező	

II. Főállásban az  Egyetem  oktatói
Név	Tudományos	Oktatói	Tanszék	Tevékenység	
	fokozat	státus		E	Sz	L	
SoóS Anna	Dr.	docens	Numerikus analízis és statisztika	*		*	

Társult oktatók
Név	Tudományos	Intézmény	Állás	Tevékenység 	
	fokozat		Típusa	E	Sz	L	

III. A tantárgy célkituzései
Bevezetés az információelméletbe, az információ továbbítása és feldolgozása	

IV. A tantárgy tartalma
1. Valószínűségszámítás  és sztochasztikus folyamatok elemei  
2. Az információ és tulajdonságai
3. Az információ forrásai
4. Entrópia
5. Az entrópia ergodicitása
6. Kódolás	

V. Könyvészet
1.	Gray R.M., Entropy and Information Theory, Springer, 1999
2.	Blaga, P., Calculul probabilităţilor şi statistică matematică. Vol. II. Curs şi culegere de probleme, UBB, Cluj-Napoca, 1994.
3.	Blaga, P., Statistica... prin Matlab, Presa Universitară Clujeană, Cluj-Napoca, 2002.
4.	Murgan A. T., ”Principiile teoriei Informatiei in ingineria informatiei si a comunicatiilor”, Editura Academiei Romane, Bucuresti, 1998
5.	Soós A., Bevezetés a valószínűségszámításba, Presa Universitara Clujeana, 2001. 	

VI. Az oktatói tevékenység heti tematikája
3	Mértékelméleti ismeretek. Valószínűségi modellek.
4	Valószínűségi változó.Vektorok. Eloszlásfüggvény, sűrűségfüggvény. Numerikus jellemzők.
5	Feltáteles eloszlás és jellemzői.  Cebisev egyenlőtlenség. Konvergencia. Nagy számok törvényei, határeloszlás tételek.
6	 Diszkrét és folytonos sztochasztikus folyamatok.Markov láncok.  Ergodicitás. Konvergencia.
7	 Információ fogalma.  Shannon információ.
8	 Entrópia és tulajdonságai. Relatív entrópia.
9	 Információ diszkrét forrásai Ergodikus és nem ergodikus források
10	    Sticonárius kódok
11	 Ergodicitás. Információ sűrűség ergodicitása
12	 Források kódolása. Lineáris és ciklikus kódok.
13	 Zajos információk.
 Robusztus kódolás
14	 Alkalmazás 	

VII. Alkalmazott didaktikai módszerek
Előadás, felfedeztetés, egyéni munka. Számítástechnikai eszközök használata.	

VIII. Értékelés
3 db laborgyakorlat bemutatása 30%, zárthelyi dolgozat 30%, írásbei vizsga 4o%	

IX. Kiegészíto könyvészet
1.	Shannon, C.E., A mathematical theory of communication. Bell Syst.Tech. J., 27:379–423,623–656, 1948.
2.	Petersen , K, Ergodic Theory. Cambridge University Press, Cambridge,1983.
3.	Roman, S., Introduction to Coding and Information Theory, Springer-Verlag, Berlin/New York, 1997..	

	Dátum 2008.10.21.					Előadás felelőse,
								dr. Soós Anna, docens