LLM（大規模言語モデル）

LLM（Large Language Model。大規模言語モデル）は、大量の文章のデータで学習し、文章の続きを予測するしくみで、文章の生成、要約、質問への回答などを行う言語モデルです。

デジタル庁のガイドライン（DS-920）は、LLM を、文章や単語が現れる確率を深層学習で扱う言語モデルのうち、非常に大量の訓練データで作ったものと説明しています。

2017年の論文「Attention Is All You Need」は、再帰や畳み込みを使わず、注意機構（attention）だけで文の並びを扱う Transformer というモデルの構造を示しました。論文は、この構造を機械翻訳の課題で評価しています。

正式な名前

Large Language Model

業界

製造業、教育機関

業務

AI 活用

出典の確認日

2026年10月7日

「気になる」に追加用語集の一覧へ

関係する用語

• 生成 AI：生成 AI は、文章、画像、プログラムなどを新しく作り出す AI の総称です。日本の「AI 事業者ガイドライン」（第1.2版）と…
• トークン：トークンは、LLM が文章を処理するときの最小の単位です。1つのトークンは、単語、単語の一部、1文字、記号などにあたります。入力…
• コンテキストウィンドウ：コンテキストウィンドウは、LLM が回答を作るときに一度に参照できる文章の範囲です。大きさはトークンの数で数え、入力した指示や資…
• ファインチューニング：ファインチューニングは、事前学習済みのモデルに、特定の用途に向けた2回めの学習をさせ、モデルのパラメーターを調整する方法です。パ…

このサイトの関連するページ

• LLM を業務で使う前に、知っておく言葉は何ですか。トークン、ハルシネーションなど
• AI エージェントは、何とつながりますか。ツールの利用、MCP、A2A
• ChatGPT、Claude、Gemini とは何ですか。会社、製品、モデルの関係

出典

• デジタル庁: 行政の進化と革新のための生成 AI の調達・利活用に係るガイドライン（DS-920、2026年6月12日改定）（別のタブで開きます）
• Vaswani ほか「Attention Is All You Need」（arXiv:1706.03762、2017年6月12日）（別のタブで開きます）
• Anthropic: Glossary（LLM、Pretraining）（別のタブで開きます）