AIが自動で賢くなる工夫

ほとんどの運用中のエージェントは、クローズドなフロンティアモデル上で動作するため、開発者はモデルの重みを更新できません。そのため、ハーネスレベルおよびコンテキストレベルのContinual Learningに注力する必要があります。Replitではこれを実現するため、チームは自然言語の仕様から機能的なアプリ構築の成功を評価するViBenchを、また、運用中の失敗の痕跡を実行可能な問題グループに分類する自動システムTelescopeと共に構築しました。