テキスト生成AIの基本的構造

 
内容構成
(1) 生成AIにおけるコア技術としてのTransformer
(2) 大規模言語モデル– 非常に巨大なデータセットとディープラーニング技術を用いて構築された言語モデル
(3) 大規模言語モデルを利用したテキストの自動生成
a. 連関「確率」に基づく「新結合」的なテキスト生成-真偽は別として、「もっともらしいテキスト」の作成が可能
b. 「先行著作物の直接引用および間接引用」によるテキスト生成 ― originは既存著作物。それゆえAiが自動生成したテキストにoriginality(創作性)はない。
c. 「先行著作物」利用による生成AIへのtraining ― 「多読」的な学習法。自動生成テキストの質を上げるには、「良質なテキストを、より大量に用いて訓練する」ことや、目的に応じたfine-tuning
(4) 生成データの「質」を規定している主要素
(5) 生成AIの「回答」のOriginality,Creativity/Innovativity問題- 生成AIの基本的構造の理解に基づく対応
 
下記は冒頭ページの画像です。画像をクリックすると、PDFをダウンロードできます。