Informationstheorie: Unterschied zwischen den Versionen

Version vom 30. Dezember 2022, 19:16 Uhr

Seit den ersten Anfängen der Nachrichtenübertragung als ingenieurwissenschaftliche Disziplin war es das Bestreben vieler Ingenieure und Mathematiker, ein quantitatives Maß zu finden für die

in einer $\rm Nachricht$ $($ hierunter verstehen wir „eine Zusammenstellung von Symbolen und/oder Zuständen“ $)$

enthaltene $\rm Information$ $($ ganz allgemein: „die Kenntnis über irgend etwas“ $)$ .

Die (abstrakte) Information wird durch die (konkrete) Nachricht mitgeteilt und kann als Interpretation einer Nachricht aufgefasst werden.

⇒ Claude Elwood Shannon gelang es 1948, eine in sich konsistente Theorie über den Informationsgehalt von Nachrichten zu begründen, die zu ihrer Zeit revolutionär war und ein neues, bis heute hochaktuelles Wissenschaftsgebiet kreierte: die nach ihm benannte $\text{Shannonsche Informationstheorie}$ .

Der Lehrstoff entspricht einer $\text{Vorlesung mit zwei Semesterwochenstunden (SWS) und einer SWS Übungen}$ .

Hier zunächst eine Inhaltsübersicht anhand der $\text{vier Hauptkapitel}$ mit insgesamt $\text{13 Einzelkapiteln}$ .

$\text{Aufgaben}$

$\text{Lernvideos}$

$\text{Applets}$

$\text{Weitere Links:}$

$(1)$ $\text{Literaturempfehlungen zum Buch}$

$(2)$ $\text{Allgemeine Hinweise zum Buch}$ $($ Autoren, weitere Beteiligte, Materialien als Ausgangspunkt des Buches, Quellenverzeichnis $)$

@@ Zeile 1: / Zeile 1: @@
-Seit den ersten Anfängen der Nachrichtenübertragung als ingenieurwissenschaftliche Disziplin war es das Bestreben vieler Ingenieure und Mathematiker, ein quantitatives Maß zu finden für die
+Seit den ersten Anfängen der Nachrichtenübertragung als ingenieurwissenschaftliche Disziplin war es das Bestreben vieler Ingenieure und Mathematiker,&nbsp; ein quantitatives Maß zu finden für die
-*in einer&nbsp;  $\rm Nachricht$ &nbsp; (hierunter verstehen wir „eine Zusammenstellung von Symbolen und/oder Zuständen“)
+*in einer&nbsp;  $\rm Nachricht$ &nbsp; $($hierunter verstehen wir „eine Zusammenstellung von Symbolen und/oder Zuständen“$)$
-*enthaltene&nbsp; $\rm Information$&nbsp; (ganz allgemein: „die Kenntnis über irgend etwas“).
+*enthaltene&nbsp;  $\rm Information$ &nbsp;  $($ ganz allgemein: „die Kenntnis über irgend etwas“ $)$ .
-Die (abstrakte) Information wird durch die (konkrete) Nachricht mitgeteilt und kann als Interpretation einer Nachricht aufgefasst werden.
-[https://de.wikipedia.org/wiki/Claude_Shannon Claude Elwood Shannon]&nbsp; gelang es 1948, eine in sich konsistente Theorie über den Informationsgehalt von Nachrichten zu begründen, die zu ihrer Zeit revolutionär war und ein neues, bis heute hochaktuelles Wissenschaftsgebiet kreierte:&nbsp; die nach ihm benannte&nbsp;  $\text{Shannonsche Informationstheorie}$ .
+Die&nbsp; (abstrakte)&nbsp; Information wird durch die&nbsp; (konkrete)&nbsp; Nachricht mitgeteilt und kann als Interpretation einer Nachricht aufgefasst werden.
+&rArr; &nbsp; [https://de.wikipedia.org/wiki/Claude_Shannon '''Claude Elwood Shannon''']&nbsp; gelang es 1948,&nbsp; eine in sich konsistente Theorie über den Informationsgehalt von Nachrichten zu begründen,&nbsp; die zu ihrer Zeit revolutionär war und ein neues,&nbsp; bis heute hochaktuelles Wissenschaftsgebiet kreierte:&nbsp; die nach ihm benannte&nbsp;  $\text{Shannonsche Informationstheorie}$ .
 Der Lehrstoff entspricht einer&nbsp;  $\text{Vorlesung mit zwei Semesterwochenstunden (SWS) und einer SWS Übungen}$ .
@@ Zeile 42: / Zeile 43: @@
 {{Collapsible-Fuß}}
-Neben diesen Theorieseiten bieten wir auch Aufgaben und multimediale Module an, die zur Verdeutlichung des Lehrstoffes beitragen könnten:
+Neben diesen Theorieseiten bieten wir auch Aufgaben und multimediale Module an,&nbsp; die zur Verdeutlichung des Lehrstoffes beitragen könnten:
 *[https://www.lntwww.de/Kategorie:Aufgaben_zu_Informationstheorie  $\text{Aufgaben}$ ]
 *[[LNTwww:Lernvideos_zu_Informationstheorie| $\text{Lernvideos}$ ]]
 *[[LNTwww:Applets_zur_Informationstheorie| $\text{Applets}$ ]]
@@ Zeile 52: / Zeile 55: @@
  $(1)$ &nbsp; &nbsp; [[LNTwww:Literaturempfehlung_zu_Informationstheorie| $\text{Literaturempfehlungen zum Buch}$ ]]
- $(2)$ &nbsp; &nbsp; [[LNTwww:Weitere_Hinweise_zum_Buch_Informationstheorie| $\text{Allgemeine Hinweise zum Buch}$ ]] &nbsp; (Autoren,&nbsp; Weitere Beteiligte,&nbsp; Materialien als Ausgangspunkt des Buches,&nbsp; Quellenverzeichnis)
+ $(2)$ &nbsp; &nbsp; [[LNTwww:Weitere_Hinweise_zum_Buch_Informationstheorie| $\text{Allgemeine Hinweise zum Buch}$ ]] &nbsp; $($Autoren,&nbsp; weitere Beteiligte,&nbsp; Materialien als Ausgangspunkt des Buches,&nbsp; Quellenverzeichnis$)$
 <br><br>

Informationstheorie: Unterschied zwischen den Versionen

Version vom 30. Dezember 2022, 19:16 Uhr

Inhalt

Entropie wertdiskreter Nachrichtenquellen

Quellencodierung - Datenkomprimierung

Information zwischen zwei wertdiskreten Zufallsgrößen

Wertkontinuierliche Informationstheorie