AIのボトルネック：データ、アルゴリズムではない？

AIは目覚ましい進歩を遂げてきたが、そのペースは鈍化しつつあるように見える。この記事は、過去の主要なAIブレークスルー（DNN、トランスフォーマー、RLHF、推論モデル）は、新しいアルゴリズムではなく、新しいデータソース（ImageNet、ウェブテキスト、人間のフィードバック、検証者）の解禁によるものだったと主張している。著者は、将来のブレークスルーは、アルゴリズムの革新ではなく、ビデオやロボットセンサーなどの新しいデータソースの効果的な活用から生まれる可能性が高いと示唆しており、既存のデータセットは、その知識の限界に近づきつつある可能性があるためだ。