ポッドキャストクラブJapan Podcast Guide English

Hot Entry! 最新回のゲストは Rol3ert。英語でじっくり語る最新回

ゆるコンピュータ科学ラジオ · テクノロジー

友だちと親しくなる=情報量の期待値が減る【情報理論3】#11

2022-03-13 · 39分

情報理論3本目。「同じ人と飲むのが嫌いな理由はエントロピー」「1bitって何?(ファミコンの絵のことではない)」「友だちと親しくなることは、エントロピーが減ること」など、ポップな話と数式を交互に行き来します。【目次】 【参考文献のリンク】 ○『通信の数学的理論』 →今回のメイン種本…

この回の流れ

  1. 0:00同じ人と飲み続けるのが嫌な理由は「エントロピー」
  2. 0:33情報量を計算してみよう。1bitって何?
  3. 9:12「人が犬を噛んだ」は情報量が大きい(ベタ例文)。あとマクラーレンのイップス。
  4. 13:08エントロピーをざっくり言うと「情報量の期待値」
  5. 18:15最近の赤ちゃんの性別のエントロピーはゼロのことが多い。
  6. 22:57偏っているとエントロピーは小さい
  7. 25:03初代ポケモン四天王誰が好き?のエントロピー
  8. 33:40友だちと親しくなるということは、エントロピーが減ること

番組から(概要欄)

情報理論3本目。「同じ人と飲むのが嫌いな理由はエントロピー」「1bitって何?(ファミコンの絵のことではない)」「友だちと親しくなることは、エントロピーが減ること」など、ポップな話と数式を交互に行き来します。

【目次】

【参考文献のリンク】

○『通信の数学的理論』

→今回のメイン種本。丸ごとシャノンの論文なので難易度は高いが、語り口は意外に堅苦しくない(1940年代の工学論文はそういうトレンドだったらしい)

○『情報理論』

→研究者によるシャノンの論文の解説。今回の参考文献の中では語り口がいちばん面白いのでオススメ。

○『シャノンの情報理論入門』

→雰囲気だけ分かりたい時におなじみのブルーバックス。とはいえ、ブルーバックスの割にはそこそこ数式も出てきてそれなりに理解できる。

○『情報はなぜビットなのか』

→情報理論の本だと思って読んだらそうでもなかった。「コンピュータって何ができるの?」っていうよもやま本。情報理論の話もちょっとだけある。いちばん平易。

○『教養悪口本』

→堀元の著書。シャノンの情報理論も悪口として活用しています。買ってね(ダイレクトマーケティング)

[email protected]

Twitter→https://twitter.com/kenhori2

noteマガジン→https://note.com/kenhori2/m/m125fc4524aca

個人YouTube→https://www.youtube.com/channel/UCYJ335HO_qLZDr7TywpI0Gg

このページの情報は「ゆるコンピュータ科学ラジオ」が公開している RSS から取得したものです。サマリは概要欄の文面をもとに機械的に整えたもので、番組の公式要約ではありません。

この番組の近い回

ゆるコンピュータ科学ラジオの全251回を見る →