全結合層
全結合層は、ニューラルネットワークにおいて前の層のすべてのニューロンと次の層のすべてのニューロンが結合している基本構造です。データの最終的な分類や回帰を行う重要な役割を持ち、多くの深層学習モデルの出力段で広く使われています。
ディープラーニングのAI用語一覧
364件ディープラーニングに関するAI用語を364件掲載しています。意味や使い方、関連用語を一覧から確認できます。
重み行列
重み行列とは、ニューラルネットワークにおいて入力データに対するパラメータ（重み）を2次元の格子状（行列）にまとめた数値データです。層と層の接続強度を数値として保持し、入力値と行列の積を計算することで、特徴量の抽出やデータの変換を行います。学習の過程で最適化され、モデルの予測精度を決定づける重要な要素です。
損失関数
損失関数とは、AIの予測値と正解データのズレを数値化する数学的な関数のことです。この値が小さいほどAIの予測精度が高いと判断され、モデルのパラメータ調整や最適化を行うための基準として機械学習の学習プロセスにおいて不可欠な役割を果たします。
有効受容野
有効受容野とは、ニューラルネットワークの出力層の特定のニューロンが、入力画像やデータのどの範囲から強く影響を受けているかを示す領域です。理論上の受容野よりも狭い範囲に影響が集中する特性があり、モデルの動作理解や性能向上に重要な役割を果たします。
ハイパーパラメータ
ハイパーパラメータとは、機械学習モデルの訓練を開始する前に人間や外部アルゴリズムが事前に設定する調整用パラメータです。モデルの学習プロセスそのものや構造を制御する役割を持ち、学習率やバッチサイズ、エポック数などが代表例です。モデルがデータから自動的に獲得する通常のパラメータとは区別され、予測精度や学習速度を左右する極めて重要な要素です。
ニューラルネットワーク
ニューラルネットワークとは、人間の脳神経系（ニューロン）の構造をモデルにしたAI技術の基盤となる仕組みです。入力データを受け取り、複数の計算層で重み付けや変換処理を行うことで、画像認識や自然言語処理など複雑なパターンの学習と予測を可能にします。現代のディープラーニングを支える中心的な技術として、幅広い分野で活用されています。
スクラッチ学習
スクラッチ学習とは、事前学習済みのモデルを使用せず、初期化された重みを持つニューラルネットワークなどに対して、独自のデータセットを用いてゼロから学習を行う手法です。特定用途への高い適性が期待できる反面、膨大な計算資源とデータ量が必要となります。
パラメータ
パラメータとは、AIや機械学習のモデルがデータから学習する過程で自動的に調整される内部の数値データです。主に重みとバイアスで構成され、入力データから適切な予測や判断を行うための計算式を形作ります。パラメータの数が増えるほどモデルの表現力が高まりますが、膨大な計算資源と広範な学習データが必要になります。
事前学習
事前学習とは、AIモデルに特定のタスクを学習させる前段階として、大量のデータを用いて汎用的な知識やパターンを習得させるプロセスのことです。ディープラーニングや大規模言語モデルの開発において不可欠な手法であり、ゼロから学習させるよりも少ないデータと計算量で高精度なモデルを構築できる転移学習の基礎となっています。
ディープニューラルネットワーク
ディープニューラルネットワーク（DNN）とは、人間の脳の神経回路網を模したニューラルネットワークの隠れ層を多層に重ねた機械学習モデルです。入力層と出力層の間に複数の隠れ層を持つことで、画像処理や自然言語処理などの複雑なデータから高精度な特徴抽出が可能となり、現代のディープラーニング技術の中核を担っています。
エンコーダ
エンコーダとは、入力されたデータをコンピュータが処理しやすい形や別の表現に変換する仕組みのことです。自然言語処理や画像認識などのAI分野で広く活用されており、データの意味や特徴を効率的に抽出する役割を担っています。
転移学習
転移学習とは、ある領域で学習した知識やモデルを別の関連する領域の学習に再利用する技術です。ゼロからモデルを構築する場合に比べて必要なデータ量や計算コストを大幅に削減でき、データが少ない課題でも高精度な予測を実現します。画像認識や自然言語処理などのディープラーニング領域で広く活用されています。
敵対的生成ネットワーク
敵対的生成ネットワーク（GAN）は、生成器と識別器という2つのAIモデルを競い合わせることで、高精度な画像やデータを自動生成するディープラーニングの枠組みです。1人のアーティストと1人の鑑定士が競うように学習し、本物そっくりな偽物を作り出します。
エポック
エポックとは、機械学習やディープラーニングにおいて、訓練用データセット全体をモデルに1回学習させる単位のことです。データが1周学習されると「1エポック」とカウントされます。学習回数を適切に設定することで、AIモデルの予測精度を高めつつ、過学習や未学習を防ぐために重要なハイパーパラメータとして使用されます。
ReLU
ReLU（レルー）は、ディープラーニングのニューラルネットワークで広く用いられる活性化関数の一種です。入力値が0以下の場合は0を出力し、0を超える場合は入力をそのまま出力するという単純な計算ルールを持ちます。計算が非常に高速で、勾配消失問題を緩和できるため、現代の深層学習モデルにおいてデファクトスタンダードとして定着しています。
方策ネットワーク
方策ネットワークとは、強化学習においてエージェントが特定の状態に置かれた際に、次に取るべき行動の確率分布を出力するニューラルネットワークです。深層強化学習の中核技術であり、囲碁AI「AlphaGo」やロボット制御などの高度な意思決定タスクに広く応用されています。
局所的極大解
局所的極大解とは、数理最適化や機械学習において、ある特定の狭い範囲の中で関数の値が最大（スコアが最大）となる状態のことです。全体における真の最大値（大域的極大解）とは限らず、探索の途中でこの状態に陥ると、より優れた最適解に到達できなくなるという課題が存在します。
認識的不確実性
認識的不確実性とは、AIモデルの知識不足や学習データの不足によって生じる不確実性のことです。十分なデータを集めて追加学習を行うことで、この不確実性を減少させることが可能という特徴を持ちます。自動運転の安全性評価や、アクティブラーニングにおいて、モデルが『何を知らないか』を定量化し、信頼性の高い意思決定を行うために極めて重要な指標です。
非自己回帰モデル
非自己回帰モデルとは、テキストや音声などのシーケンスデータを生成する際、各要素を依存関係なく同時に並列出力するニューラルネットワークモデルです。従来の自己回帰モデルが1トークンずつ順番に生成していたのに対し、非自己回帰モデルは並列処理によって推論速度を劇的に向上させられる点が大きな特徴です。
潜在空間
潜在空間とは、画像や文章などの複雑なデータを、AIが意味や特徴を捉えて圧縮・配置した数値表現の空間です。類似したデータが近い位置に集まるため、AIはデータの概念的な類似性を計算したり、滑らかな補間によって新しいデータを生成したりできます。画像生成AIや自然言語処理の基礎となる極めて重要な概念です。
訓練済みモデル
訓練済みモデルとは、機械学習やディープラーニングのアルゴリズムに大量のデータを学習させ、予測や判断ができるようにパラメータを最適化した状態のAIプログラムのことです。
RNN
RNN（Recurrent Neural Network）は、時系列データや自然言語などの順序を持つ情報を処理するために設計されたニューラルネットワークです。過去の出力を記憶しながら処理を進める点が特徴ですが、長距離の依存関係学習には勾配消失問題などの限界があります。
隠れ層
隠れ層（中間層）は、ニューラルネットワークにおいて入力層と出力層の間に配置される層のことです。外部から直接見えない内部で、入力されたデータから複雑なパターンや特徴量を段階的に抽出・変換する役割を持ちます。この層を何重にも重ねることでディープラーニングが実現可能となり、高度な認識タスクに対応します。
勾配クリッピング
勾配クリッピングは、ニューラルネットワークの学習時に発生する勾配爆発を防ぐため、算出された勾配の大きさに閾値を設けて制限する技術です。過度に大きな勾配を切り詰めることで、パラメータの更新を安定させ、学習を正常に収束させることができます。