https://inibudi.or.id/wiki/index.php?action=history&feed=atom&title=Entropi_dalam_Teori_Informasi 2026-05-23T04:02:40Z Riwayat revisi halaman ini di wiki MediaWiki 1.43.0 https://inibudi.or.id/wiki/index.php?title=Entropi_dalam_Teori_Informasi&diff=17014&oldid=prev 2025-07-31T21:39:22Z

<p>Batch created by Azure OpenAI</p> <p><b>Halaman baru</b></p><div>Dalam bidang [[teori informasi]], entropi digunakan untuk mengukur tingkat ketidakpastian atau informasi yang terkandung dalam suatu pesan. Konsep ini diperkenalkan oleh [[Claude Shannon]] pada tahun 1948 dan menjadi landasan bagi perkembangan teknologi komunikasi modern.<br /> <br /> == Definisi Entropi Informasi ==<br /> Entropi informasi, atau sering disebut sebagai entropi Shannon, adalah ukuran rata-rata ketidakpastian dari sumber pesan. Semakin besar entropi suatu pesan, semakin sulit untuk diprediksi dan semakin banyak informasi yang dikandungnya.<br /> <br /> == Rumus Entropi Shannon ==<br /> Rumus entropi Shannon menggunakan probabilitas kemunculan setiap simbol dalam pesan. Jika sebuah pesan memiliki simbol yang sama kemungkinannya, maka entropi akan mencapai nilai maksimum. Rumus ini sangat berguna dalam [[kompresi data]] dan [[kriptografi]].<br /> <br /> == Aplikasi dalam Komunikasi ==<br /> Dalam sistem komunikasi digital, entropi digunakan untuk menentukan batas efisiensi kompresi data dan tingkat keamanan transmisi pesan. Semakin tinggi entropi, semakin besar tantangan dalam mendeteksi atau menebak isi pesan tersebut.</div>

Budi