情報理論関連をぐだぐだと

情報理論関係を勉強中の筆者がそれっぽいことを書くブログ

初歩からの検定・推定理論講座

不偏推定量について

今日は、推定理論にもどって、不偏推定量について書こうと思う。 設定 データ集合が与えられているとして、を集合上の確率分布全体のなす集合とする。 また、モデルとして、 を仮定する。 同時独立分布 今回も、データが出てくる順番に関係なく毎回モデル上…

指数型分布族の例(その2)

今日は予告どおり、有限集合上の分布全体について書きたいと思う。 設定と指数型分布族の復習(昨日と同じもの) データ集合が与えられているとして、を集合上の確率分布全体のなす集合とする。 また、モデルとして、 を仮定する。 ここで、は次元ベクトルと…

指数型分布族の例(その1)

今日も昨日に引き続いてそんなに時間がないので、 指数型分布族の例について書きたいと思う。 設定と指数型分布族の復習 データ集合が与えられているとして、を集合上の確率分布全体のなす集合とする。 また、モデルとして、 を仮定する。 ここで、は次元ベ…

指数型分布族について

推定論について書こうと思っていたけれど、 時間がなくなったので 今日は指数型分布族の導入を 設定 データ集合が与えられているとして、を集合上の確率分布全体のなす集合とする。 また、モデルとして、 を仮定する。 ここで、は次元ベクトルとみなせるので…

最尤推定について

推定が難しいときにまずやろう 今回は最尤推定について話をする。 この推定は与えられたモデルが複雑だった場合に有効な(というか唯一使える)推定方法。 以下に理論的な話を書いていくけれども、ひょっとしたら、昨日の推定量の話は(最尤推定だけを語る上…

統計量について

本の紹介 現代数理統計学 (創文社現代経済学選書)作者: 竹村彰通出版社/メーカー: 創文社発売日: 1991/12メディア: 単行本購入: 2人 クリック: 26回この商品を含むブログ (21件) を見る の統計量や十分統計量に関するところを荒く紹介*1。 最も実用的な推定…

推定問題について(簡単なパラメータ推定の設定)

本の紹介 統計学関連での本は日本語の本よりも英語の本のほうが良いものが多い。 と言うわけで、今回は、次を紹介。 Asymptotic Statistics (Cambridge Series in Statistical and Probabilistic Mathematics)作者: A. W. van der Vaart出版社/メーカー: Cam…

推定問題について(問題の背景を何も考えない場合)

本の紹介 今回参考にしているのは、コレ!と言うものはないのだけれど、 たぶん、今回の話を格式高くしたものが 情報幾何学の基礎 (数理情報科学シリーズ)作者: 藤原彰夫出版社/メーカー: 牧野書店発売日: 2015/08/07メディア: 単行本この商品を含むブログを…

異常検知、あるいは二値仮説検定について

本の紹介 今日、夕方から 異常検知と変化検知 (機械学習プロフェッショナルシリーズ)作者: 井手剛,杉山将出版社/メーカー: 講談社発売日: 2015/08/08メディア: 単行本(ソフトカバー)この商品を含むブログを見る の勉強会があるので、予習もかねて。 異常検…