2017-09-20 測度論的相対エントロピー 情報理論 数理統計学 測度論 今回は一般の可測空間上の 2 つの確率測度に対する相対エントロピーおよびそれに関する基本定理について紹介します。 続きを読む
2017-08-13 形態素解析 MeCab(1) ツール データ処理 与えられた任意の文に対して、意味を持つ最小単位の音素(これを形態素と言います)に分解して、音素の品詞を判別する処理を形態素解析と言います。今回は形態素解析を行うツールである MaCab の使い方についての個人的なメモです。 続きを読む
2017-07-08 経験損失を最小化する仮説を導く学習アルゴリズムとその評価 統計的機械学習 機械学習 数理統計学 統計学 今回は経験損失を最小化する学習アルゴリズムとその評価について議論します。 続きを読む
2017-06-03 統計的機械学習と統計的決定理論の関係 統計的機械学習 機械学習 数理統計学 統計学 前回、学習アルゴリズムの評価方法として期待予測損失を用いる方法を紹介しましたが、この方法は統計的決定理論*1の枠組みで書き表すことが出来ます。 *1:統計的決定理論については「数理統計学 7 統計的決定理論 (1)」をご参照下さい。 続きを読む