各種資料と情報源

島根・鳥取・岡山・広島・山口の各種資料と情報源とは

情報源（じょうほうげん）：
情報の提供者、入手元、入手経路、発信源（ソース、英：information source）。マスコミュニケーション マスコミ用語としては「報道ネタの提供元」という意味で用いられる（ニュースソース）。参照：史料（英：historical source）、一次資料（英：primary source）、二次資料（英：secondary source）。
情報理論において、有限個のシンボル（アルファベット）S=\{s_1, ..., s_n\} から、ある一定の確率法則に従って出てくるシンボルの系列のこと。当項で解説。
無記憶情報源とは、各シンボルが統計的に独立性 独立に発生する情報源である。この種の情報源は、各シンボルの生起確率 P(s_1), ..., P(s_n) が与えられることにより一意に定まる。この情報源のシンボルあたりの平均情報量のことをエントロピーという。エントロピーの最大値は、\log_2 n シャノンであり、それは各シンボルの生起確率が等しいとき（ \frac{1}{n} ずつのとき）である。