This connection was first described shortly after the seminal 1948 papers of American applied mathematician Claude E. Shannon introduced today's most widely used measure of information content, now known as Shannon entropy.
Αυτή η σύνδεση περιγράφηκε λίγο μετά τις πρωτοπόρες δημοσιεύσεις το 1948 του μαθηματικού Κλωντ Ε. Σάνον, που εισήγαγαν το ευρύτερα χρησιμοποιούμενο σήμερα μέτρο πληροφοριακού περιεχομένου, που είναι γνωστό και ως εντροπία Shannon.