ファインチューニング

ファインチューニングとは、事前学習を終えたモデルを、特定の用途に合わせて再調整することです。

医療の文書に強くする、自社の言い回しに合わせるといった目的で、その分野のデータを使って追加の学習を行います。ゼロから作るより少ないデータと計算で済みます。

近年は一部のパラメータだけを更新する軽量な手法も広まり、限られた資源でも調整しやすくなっています。