グラフエンべディングの概要とアルゴリズム及び実装例
グラフエンべディングの概要
グラフ埋め込み（Graph Embedding）は、グラフ構造を低次元のベクトル空間にマッピングすることで、グラフのノードやエッジを密な数値ベクトルで表現して、機械学習アルゴリズムによ...
深層学習:Deep Learning
ReAct(Reasoning and Acting)の概要とその実装例について
ReAct(Reasoning and Acting)の概要
ReActは"プロンプトエンジニアリングの概要とその利用について"で述べているプロンプトエンジニアリングの手法の一つであり、"LangChainにおけるA...
Stable DiffusionとLoRAの活用
Stable Diffusionの概要
Stable Diffusionは、機械学習と生成モデルの分野で使われる手法の1つであり、画像や音声などの生成モデルとして知られる"Diffusion Models（拡散モデル...
ボルツマン分布とソフトマックスアルゴリズム及びバンディット問題
ボルツマン分布について
ボルツマン分布（Boltzmann distribution）は、統計力学や物理学において重要な確率分布の一つであり、この分布は、系の状態がどのようにエネルギーに分布するかを記述するものとな...
大規模言語モデルのファインチューニングとRLHF(Reinforcement Learning from Human Feedback)
イントロダクション
大規模言語モデルのファインチューニングとは、事前に大規模なデータセットで訓練されたモデルに対して、追加の学習を行うもので、汎用性の高いモデルを特定のタスクやドメインに適用することを可能にし、精度や...
グラフニューラルネットワーク
グラフニューラルネットワークの特徴と適用事例
"グラフデータ処理アルゴリズムと機械学習/人工知能タスクへの応用"でも述べているグラフデータとは、頂点（ノード）とそれらを結ぶ辺（エッジ）からなるデータ構造を指す。これ...
SentencePieceの概要とアルゴリズム及び実装例について
SentencePieceについて
SentencePieceは、テキストデータのトークン化（分割）を行うためのオープンソースのライブラリおよびツールキットとなる。SentencePieceは、特に異なる言語や文...
DPRとHugging Face Transformerを用いたRAGの概要と実装
DPRの概要
DPR（Dense Passage Retrieval）は、自然言語処理（NLP）の分野で使用される検索技術の一つで、DPRは、特に大規模な情報源から情報を取得し、その情報源に対する質問に最適な回答を見...
LoRAによるLLMのファインチューニングの概要と実装例について
LoRAによるLLMのファインチューニングの概要
LoRA（Low-Rank Adaptation）は、"大規模言語モデルのファインチューニングとRLHF(Reinforcement Learning from Hu...
Diffusion Models（拡散モデル）の概要とアルゴリズム及び実装例について
Diffusion Models（拡散モデル）の概要
Diffusion Models（拡散モデル）は、画像生成やデータ修復などのタスクにおいて優れた性能を示す生成モデルの一種となる。これらのモデルは、元のデータを一...