马斯克称Grok4.5性能或超越Opus现在一个模型能不能训练好,像迷一样。
你说没啥护城河吧,马斯克赶了这么久,还没赶上,他算力那么多。扎克伯格的模型,自从掉下去之后,直到现在,也没赶上来,他花那么多钱挖人才。
你说有护城河吧,小米之前从来就没有搞过大模型,就搞了一个300多人的新人团队,就训练出一个还不错的大模型。
有些人总喜欢说蒸馏,那马斯克、扎克伯格为什么不能靠蒸馏赶上来?欧洲一个能打的模型都没有,为啥不靠蒸馏赶上来?
显然,这个里面还是有些关键的东西。
马斯克称Grok4.5性能或超越Opus现在一个模型能不能训练好,像迷一样。
你说没啥护城河吧,马斯克赶了这么久,还没赶上,他算力那么多。扎克伯格的模型,自从掉下去之后,直到现在,也没赶上来,他花那么多钱挖人才。
你说有护城河吧,小米之前从来就没有搞过大模型,就搞了一个300多人的新人团队,就训练出一个还不错的大模型。
有些人总喜欢说蒸馏,那马斯克、扎克伯格为什么不能靠蒸馏赶上来?欧洲一个能打的模型都没有,为啥不靠蒸馏赶上来?
显然,这个里面还是有些关键的东西。