データサイエンス

統計学

Precisionのパラドックス

何か正式な名前がついているのかは知らないけれど、昔読んだ行動経済学系の何かの本に書いてあったような気がするのと類似の例を考えてみる。 問題:ある病気にかかる確率は1%とします。病気にかかっているときに、正しく病気だと診断され...
機械学習

FFMをxLearnで試す

Field-aware Factorization Machines (FFM) を Python で試すために、xLearn を使ってみた。 環境によってインストールできたりできなかったりして、よく分からない。メンテナンスもされて...
情報幾何

情報幾何に入門した (5): 双対平坦空間とか

『入門 情報幾何―統計的モデルをひもとく微分幾何学―』の復習メモ。 \(M\) を多様体、\(\nabla\) を \(M\) の affine 接続とし、\((U,\varphi)\) を \(M\) の座標近傍とする。\...
情報幾何

情報幾何に入門した (4): 統計多様体とか

『入門 情報幾何―統計的モデルをひもとく微分幾何学―』の復習メモ。 \((M,g)\) を Riemann 多様体、\(\nabla\) を \(M\) の affine 接続とする。各 \(X,Z \in \mathfra...
情報幾何

情報幾何に入門した (3): α-接続

『入門 情報幾何―統計的モデルをひもとく微分幾何学―』の復習メモ。 \(M\) を多様体とし、\( \mathfrak{X}(M) \) を \(M\) 上の \(C^\infty\) 級ベクトル場全体の集合とする。写像 \...
情報幾何

情報幾何に入門した (2): チェンツォフの定理

『入門 情報幾何―統計的モデルをひもとく微分幾何学―』の復習メモ。 記号 $$\begin{align}\Omega_n &= \{ 0, 1, \ldots, n \} \\\Xi_n &= \{ (...
情報幾何

情報幾何に入門した (1)

情報幾何に興味がわいたという話を以前したので、『入門 情報幾何―統計的モデルをひもとく微分幾何学―』を読んでみた。その時に触れた『岩波データサイエンス Vol.3』に書いてあったことはほとんど分からなかったけど。 情報幾何は...
情報幾何

カルバック・ライブラー情報量と情報幾何

情報幾何にちょっと興味がわいたので、前読んだ『岩波データサイエンス Vol.3』に情報幾何が載ってあったことを思い出して、読み返している。 とりあえず何も理解していないが、\(n\) 次正定値対称行列 \(P\) のポテンシ...
機械学習

LightGBMでverbose_evalとかでUserWarningが出る対策

メッセージ通りに対処すればよい。どこかでちゃんとテンプレ化して置いておきたい。 import lightgbm as lgb # いろいろ省略 callbacks = [ lgb.log_evaluation(1...
統計学

Pythonでサンプルサイズと検出力

ABテストで使うやつ from __future__ import annotations import math from typing import Tuple import pandas as pd from scipy....
タイトルとURLをコピーしました