Kommunikation (Informationstheorie)
In der Informationstheorie kann der Informationsgehalt einer Nachricht genau beziffert werden und wird mit der dimensionslosen Einheit Shannon gemessen. Dabei ist entscheidend, wieviele Signale (Bits) minimal zur Kodierung eines Zeichens benötigt werden. Des Weiteren ist es möglich, dass die Signale während der Übertragung durch Störungen verfälscht werden. Die Informationstheorie bietet Werkzeuge, mit denen berechnet werden kann, wieviel Redundanz eine Nachricht beinhalten muss, um ein gegebenes Maß an Störungen auszugleichen.