AIがいつ学習したかを探る方法

注意深く作成されたリクエストで最先端のモデルを調査することで、それらがどのように訓練されたかについての隠れた事実を知ることが可能です。モデルが持つパラメータの数は、ニッチな事実に関するスコアを付けることで推定できます。モデルがトークンをどのように分解するかを測定することで、モデルの訓練に使用されたデータセットの混合に関する事実を明らかにできます。訓練のタイムラインは、日付や自己認識に関連する質問でモデルにスコアを付けることで推定できます。