DownloadsDownloadデータサイエンス関連+αのメモmitama統計学・機械学習(+その他の気になった分野)の教科書や論文を読み、自分で理解した範囲の理論と実装をメモしていく場所統計学確率・確率分布・期待値統計的推測相関関係の定量化 / 相関係数確率分布間の距離(っぽいもの)四分位数・パーセンタイル欠測データ漸近理論ベイズ統計学統計学の誤用 / 正しい作法データの可視化価格指数分散安定化変換統計モデリング一般化線形モデル(GLM)順序回帰(ordered regression)構造方程式モデリングテスト理論・項目反応理論ベイズ統計モデリング時系列分析セミ・ノンパラメトリックモデル統計モデルの評価LOWESS一般化加法モデル (GAM)因子分析MMM (marketing mix modeling)メモ:説明性の高いモデルをどう作るかガウス過程回帰分位点回帰生存分析Symbolic Data Analysis計量経済学・因果推論構造推定因果の定義についてルービンの因果モデルSelection Bias実験デザインA/B TestsPearl流の因果推論因果ダイアグラムバイアス回帰分析パネルデータ分析時系列データの因果推論傾向スコアマッチング推定操作変数法RDDDifference In DifferencesChange in Changes (CIC)Synthetic Control一般化モーメント法Quantile Treatment Effects (QTE)経済学におけるベイズ推定の利用例Causal Machine Learning統計的因果探索Uplift Modeling感度分析部分識別Causal Clustering例:クーポンの配布よさそうな文献・サイト都道府県ごとの集計データの扱いチョコレートとノーベル賞なぜ共変量をモデルに入れるのか機械学習統計的学習理論教師なし学習異常検知線形モデルSupport Vector Machineアンサンブル学習trees / GBDTkNN(k最近傍法)ナイーブベイズベイジアンネットワーク不均衡データDistillation確率予測parallelize.ipynb表形式データ(Tabular data)の予測ゼロD 2 メモ予測モデルの評価MLOps過学習と良性の過学習(Double Descent, Grokking)Feature Engineering説明可能なAI(Explainable AI: XAI)予測の不確実性Adversarial Machine Learning:攻撃と防御深層学習生成モデル生成モデルAutoencoderGANDiffusion Models自然言語処理文字コードテキストデータの前処理:表記揺れ、正規化トークン化言語モデル単語の埋め込み言語モデルとRNNLatent Dirichlet Allocation (LDA)非構造化データからの情報抽出Large Language Models画像処理画像処理文書風のサンプル画像の生成コード メモ傾き補正歪み補正・台形補正類似度・hash化輝度変換領域分割処理ノイズ除去推薦システム概要内容ベースフィルタリング協調フィルタリング行列分解に基づく推薦システムFactorization MachinesBayesian Personalized Ranking (BPR)Two-Tower ModelCausal Inference in Recommender Systems推薦システムの評価強化学習強化学習データ分析のビジネス応用データ分析の事例データマネジメントデータサイエンス応用の類型AIのビジネス応用Decision Focused Learning (DFL)マーケティング数学数学の初歩データサイエンスでよく使う数学記号一覧データサイエンスのために最低限必要な数学集合論代数学線形代数学微分積分学数理最適化応用数学確率論離散数学ソフトスキルマインドセット学習方法ライティング(文章作成)プレゼンテーション交渉 / 人を巻き込む『ハーバード流交渉術』アサーションデータ分析業務のTIPSなど研究の進め方会議のデザインタスク管理・仕事の進め方ドキュメント管理ビジネスパーソンとしての成長について成長の方程式思考法論理学リーダーシップピープルマネジメントプロジェクトマネジメント心身の健康管理ビジネス関連知識売上構造やKPI損益分岐点会計データサイエンティスト / MLエンジニアのキャリアDigital Transformation素性ベクトルベース経営学不動産業プロダクト開発プロダクトマネジメントマーケティングヒアリング個人開発ソフトウェア工学アルゴリズムとデータ構造プログラミングシステム開発手法『実践ソフトウェアエンジニアリング』メモソフトウェアプロセスソフトウェアアーキテクチャドメイン駆動設計(DDD)リファクタリングソフトウェア開発フロントエンド開発Ruby on Railsデータストア(ストレージ・RDB)Function as a Service (FaaS)DevOpsソフトウェアのテストサイバーセキュリティ疑似乱数Web最適化Linux外国語English中文経済学経済学概論需要推定ミクロ経済学マクロ経済学Quantitative Economics不動産の経済学金融経済学