Document ID: /fineweb-2-swissfilter-quality_10-filterrobots/filtered/03250.jsonl.gz/902

Als "Informationstheorie" (in Anführungszeichen) bezeichne ich eine naiv gemeinte "Theorie darüber, was Information sein soll".
Der Ausdruck "Informationstheorie" wird oft quasi synonym zu "Kommunikationstheorie", insbesondere jener von C. Shannon verwendet (obwohl Information und Kommunikation sehr selten synonym aufgefasst wird). "Informationstheorie" bezeichnet dann (keine Theorie i. e S., sondern) eine mathematische oder technische Diziplin, die sich mit der Quantifizierung von Signalübertragung beschäftigt und von C. Shannon eben als "Kommunikationstheorie" bezeichnet wurde. In der "Kommunikationstheorie" von C. Shannon kommt aber der Begriff Information nicht vor, dort wird von einem Informationsgehalt gesprochen.
Und schliesslich gibt es das Fachgebiet, das mit Informatik bezeichnet wird, obwohl es sich insgesamt mit Computern befasst. Informatik heisst das Fach, weil viele Informatiker Computer nur als Medium sehen und sich ausschliesslich mit Daten befassen, die sie als Informationen auffassen, obwohl sie laut dem Informatik-Duden - leider - keine Definition von Information haben.
Es gibt zwei Vorstellungen, die oft als "Theorien über Information" bezeichnet werden, weil "Information" darin als Erklärungsprinzip eine wichtige Rolle spielt:
in gewisser Weise kann man die Texte von G. Bateson als Informationstheorie lesen. Er definiert Information kyberentisch: Ein Unterschied, der einen Unterschied macht
"Auch dort, wo die Informationstheorie zugestehen muss, dass die formalisierte Sprache immer wieder auf die >>natürliche Sprache<< zurückverwiesen werde, um durch die nicht formalisierte Sprache die Sage des technischen Bestandes zur Sprache zu bringen, bezeichnet dieser Umstand für die gängige Selbstauslegung der Informationstheorie nur ein vorläufiges Stadium. Denn die >>natürliche Sprache<<, von der hier die Rede sein muss, wird im voraus als die noch nicht formalisierte, jedoch als in die Formalisierung bestellte Sprache angesetzt. Die Formalisierung, die rechnerische Bestellbarkeit des Sagens, ist das Ziel und die Massgabe. (...) Die Informationstheorie begreift das Natürliche als den Mangel an Formalisierung" (M. Heidegger, 2003:263). [es wäre sehr interessant zu wissen, worauf sich M. Heideger mit Informationstheorie bezieht, am ehesten auf seine eigene Interpretation der Komuikationstheorie von C. Shannon].
Wikipedia - Common sense bunt aufgemischt:

Die Informationstheorie ist eine mathematische Theorie aus dem Bereich der Wahrscheinlichkeitstheorie und Statistik, die auf Claude Shannon zurückgeht. Sie beschäftigt sich mit Begriffen wie Information, Entropie, Informationsübertragung, Datenkompression, Kodierung, Kryptographie, Komplexitätstheorie und verwandten Themen. Neben der Mathematik, Informatik und Nachrichtentechnik wird die theoretische Betrachtung von Kommunikation durch die Informationstheorie auch zur Beschreibung von Kommunikationssystemen in anderen Bereichen (Medien in der Publizistik, Nervensystem in der Neurologie, DNA und Proteinsequenzen in der Molekularbiologie, Wissen in der Informationswissenschaft und Dokumentation) etc. eingesetzt. Die Shannonsche Theorie verwendet den Begriff der Entropie, um die Informationsdichte von Nachrichten zu charakterisieren. Je ungleichförmiger eine Nachricht aufgebaut ist, desto höher ist ihre Entropie.
Geschichte
C. Shannon macht nicht keine Aussagen über den Informationsgehalt, sondern NUR Aussagen über den Informationsgehalt. Im Wikiedia-Artikel verschwimmen die verschiedenen Auffassungen zu Information auf eine ganz typische Weise - eben mangels Theorie.