Penggunaan pendekatan matematik untuk masalah informasi pertama kali dilakukan oleh Claude Shannon. Kemudian bersama dengan Warren Weaver, Shannon menulis buku yang mengembangkan lebih jauh teorinya. Dalam buku itu ditegaskan bahwa untuk memahami informasi kita perlu berasumsi bahwa semua tujuan komunikasi adalah mengatasi ketidakpastian. Teori tersebut menyederhanakan persoalan komunikasi deng…