2008-06-12から1日間の記事一覧

エントロピー

シャノンエントロピーって難しい。シャノンエントロピーを連続量にすると、∞に発散してしまう。発散を取り除く為に定義を変えると、今度は負の値が出てしまう。一方、熱力学では、熱力学第三の法則により、S≧0になる。確率論的なシャノンエントロピーは自然…