未來是否仍由閉源模型獲勝?

The future of foundation models is closed-source

目前就是由 Meta 帶領開源模型，擁有與 OpenAI/Google 相當數量的 GPU。
但開源畢竟很難賺錢，還白送給其他人賺。
另開源模型的取得成本雖然為零，但自行架設或租用相當等級 模型/GPU 之推理成本也不見得比閉源模型的 API 低。
而超大模型 (如 Llama 3 400B) 根本沒多少公司有本錢拿來推理。
再來，為了取得更多資料，OpenAI/Google 開始花大錢向各來源買...Meta 是否也願意花大錢買呢?
最終，Meta 為 AI 投入更多的成本，就會面對更大股東壓力，要求回收成本。
另開源另一大陣營 Stability AI 面臨出售，Midjourney 應該還沒這問題吧?

Jimmy Apples 🍎/acc on X: "Meta plans to not open the weights for its 400B model. The hope is that we would quietly not notice / let it slide. Don’t let it slide." / X
看到最新流言說 Llama 3 400B 模型將不會公開權重...