Entropie

Entropie ist das Maß für Unsicherheit. 

Betrachtet man eine Quelle, die aus einer bestimmten Menge von Symbolen besteht, so gilt: Je unerwarteter (also je geringer die Wahrscheinlichkeit) eine Nachricht aus dieser Quelle ist, desto mehr Information trägt sie. Betrachtet man das Gegenteil, so liegt reine Entropie vor – also völlige Zufälligkeit oder das vollständige Fehlen von Ordnung –, was in der Praxis keinerlei Information vermittelt.

Wenn der Inhalt einer Nachricht sehr vorhersehbar ist (zum Beispiel eine Quelle, die immer die Nachricht „A“ sendet), sagt diese Nachricht dem Empfänger, also Ihnen, nichts Neues; sie enthält also keine Information. Jede eingehende Nachricht ist bereits bekannt. Die Entropie ist hier niedrig.

Wenn der Inhalt der Nachricht hingegen voller seltener oder unerwarteter Symbole steckt, bedeutet dies für Sie neue Information. Diese Nachricht hat einen hohen Informationswert, weil sie unerwartet ist. Solange es sich jedoch nur um ein einzelnes Ereignis handelt, steigt die Gesamtentropie des Systems nicht an. Dies ist lediglich ein kurzzeitiger Informationszuwachs, keine Entropiezunahme.

Wenn die Nachricht jedoch eine völlig zufällige und regellose Abfolge von Symbolen ist (zum Beispiel sinnlose Buchstabenhaufen), trägt auch dies keine nützliche Information. Denn in dieser Zufälligkeit gibt es keine sinnvolle Struktur oder kein Muster. In diesem Fall ist die Entropie auf einem Maximum, aber es gibt keine sinnvolle Information. Eine extrem hohe Entropie, also ein völlig zufälliger und sinnfreier Nachrichtenstrom (zum Beispiel „xy!@#q“), erzeugt keine Information, sondern Rauschen (Noise). Um „Information“ zu erzeugen, bedarf es also einer sinnvollen Überraschung.

Betrachtet man dies aus der Perspektive der Sozialwissenschaften, so herrscht in einem Medienumfeld mit totaler Zensur eine niedrige Entropie. Das bedeutet, die Nachrichten sind zu vorhersehbar. Es gibt wenig Information. Ein Social-Media-Umfeld, in dem jeder zufällige Inhalte produziert, enthält eine sehr hohe Entropie. Es wird schwierig, aus den eingehenden Nachrichten einen Sinn zu ziehen. Dies führt nicht zu Information, sondern zu Chaos. Für einen optimalen Informationsfluss ist eine mittlere Entropie gut. Mit anderen Worten: ein wenig Ordnung, ein wenig Überraschung.

Das Konzept der „Filterblase“ (Filter bubble), dem wir auf Social-Media-Plattformen begegnen, beschreibt beispielsweise das durch Algorithmen verengte Sichtfeld, das durch das Filtern von Inhalten nach den Interessen der Nutzer entsteht. Hier wird die Entropie von der Plattform künstlich gesenkt.

Auf diesen Plattformen herrscht die Logik: „Zeige das, was du siehst.“ Dadurch macht der Algorithmus den Inhalt vorhersehbar und repetitiv. Dies bietet dem Nutzer zwar eine sichere und vertraute Erfahrung, verringert aber gleichzeitig die Entropie, wodurch auch der Informationswert, den man aus dem System zieht, sinkt. Hier entsteht ein Paradoxon: Wenn sich Nutzer langweilen, verlassen sie die Anwendung. Der Algorithmus muss also ein wenig Überraschung hinzufügen.

Genau hier setzt das „Entropie-Management“ an. Insbesondere TikTok und teilweise YouTube Shorts passen ihre Algorithmen nach folgendem Prinzip an: „Zeige dem Nutzer 70 % der Inhalte, die er mag, aber gib ihm auch etwa 30 % zufällige, unvorhersehbare Inhalte.“

Dies weckt beim Nutzer das Gefühl des Entdeckens (also das Empfangen neuer Informationen). Auf diese Weise erhöht der Algorithmus die Entropie kontrolliert. Dieser Anstieg erfolgt jedoch nicht zufällig, sondern durch vorab getestete Überraschungsinhalte. Es handelt sich also nicht um pures Chaos, sondern um gesteuerte Überraschungen, mit denen versucht wird, das Aufmerksamkeitsniveau hoch zu halten. Dies erinnert in der Kommunikationstheorie an den Unterschied zwischen „Rauschen“ und „Information“ nach C. Shannon. Wenn es eine Überraschung gibt, gibt es Information, aber wenn die Überraschung von ihrer Bedeutung (ihrem Kontext) losgelöst ist, wird sie zu „Rauschen“.

Andererseits beeinflusst Entropie nicht nur die individuelle Erfahrung, sondern auch die Art und Weise, wie die Gesellschaft auf Informationen zugreift. Bei einer extrem niedrigen Entropie – wenn man in den Medien immer das Gleiche sieht und hört, wie in zensierten Medienumgebungen – führt dies dazu, dass Individuen nur einseitige und vorhersehbare Inhalte erhalten. Dies erzeugt eine „geistige Ödnis“ in der Gesellschaft. Bei einer extrem hohen Entropie hingegen, etwa durch die Fülle an Desinformation in sozialen Medien, führt dies dazu, dass Individuen keiner Information mehr vertrauen können.

Das Ziel für ein ideales Medienumfeld ist daher eine mittlere Entropie. Eine Struktur, die den Nutzer nicht zu sehr überfordert, aber dennoch genug Abwechslung bietet, um ihn geistig aus seiner Komfortzone herauszuholen.