LLM が登場する前は、高次元ベクトルが概念をエンコードし、それらの相対位置のジオメトリが意味を完全に一般的にエンコードすると広く推測されていなかったのは奇妙です。 30%の確率で広く与えられた仮説候補だったと思うでしょう。

@johnmark_taylor 2014年に「ディープラーニングはうまくいくだろう」と考えた人なら誰でも、間違いなくこの権利を持っていました。このより単純で大胆なディープラーニングのコア部分が、議論の中で広くもっともらしいものになったのを聞いたことがありません。