Pythonと機械学習(1)数学と基本的なアルゴリズム
Pythonと機械学習
概要
Pythonは、簡単に学べること、読みやすいコードを書けること、広範囲にわたるアプリケーションに使えることなどの、多くの優れた特徴を持つ汎用プログラミング言語となる。...
幾何学:Geometry
Broyden–Fletcher–Goldfarb–Shanno（BFGS）法について
Broyden–Fletcher–Goldfarb–Shanno（BFGS）法について
Broyden–Fletcher–Goldfarb–Shanno (BFGS) 法は、非線形最適化問題を解決するための数値最適化アル...
リーマン最適化のアルゴリズムと実装例について
リーマン最適化
リーマン最適化（Riemannian Optimization）は、通常の最適化手法をリーマン多様体上で行うアプローチとなる。
ここでの多様体とは「局所的には単純だが、全体的には複雑な空間」を表現す...
準ニュートン法について
準ニュートン法について
準ニュートン法（Quasi-Newton Method）は、非線形最適化問題を解決するための反復法の一つとなる。このアルゴリズムは、ニュートン法の一般化であり、高次導関数（ヘッセ行列）を計算せずに...
Limited-memory Broyden–Fletcher–Goldfarb–Shanno（L-BFGS）法について
Limited-memory Broyden–Fletcher–Goldfarb–Shanno（L-BFGS）法について
Limited-memory Broyden–Fletcher–Goldfarb–Shanno（L...
情報幾何とは何か
情報幾何の本質とは
情報幾何（Information Geometry）は、統計学や情報理論、機械学習などで使われる確率分布や統計モデルの幾何学的な構造を研究する分野であり、その本質的な考え方は、確率分布や統計モデルを幾...
ニュートン-ラフソン法（Newton-Raphson Method）について
ニュートン-ラフソン法（Newton-Raphson Method）について
ニュートン-ラフソン法（Newton-Raphson Method）は、非線形方程式の数値解法や関数の根を求めるための反復法の一つであり、この...
トラストリージョン法について
トラストリージョン法について
トラストリージョン法（Trust Region Method）は、非線形最適化問題を解決するための最適化アルゴリズムの一つであり、このアルゴリズムは、目的関数の最小化（または最大化）において...
修正されたニュートン法について
修正されたニュートン法について
修正されたニュートン法（Modified Newton Method）は、"ニュートン-ラフソン法（Newton-Raphson Method）について"で述べている通常のニュートン-ラフ...
Temporal Fusion Transformerの概要とアルゴリズム及び実装例
Temporal Fusion Transformerの概要
Temporal Fusion Transformer (TFT) は、複雑な時系列データを扱うために開発されたディープラーニングモデルで、リッチ...