定义。
同理,要让ai理解世界,这个步骤也是需要的,你得先让ai理解,苹果的一些基本特性,这也是很多大模型都在做的一个步骤。
接下来的一步便是信息融合,也就是告诉ai一个更加高级的统一语义空间,告诉它,虽然信息的模态不同,但他们描述的都是同一种东西,这就是融合的步骤。
这也是现代多模态大模型能同时处理不同模态信息的原理。
只不过在将不同模态信息纳入这个统一语义空间的语义空间时,现在的方法仍然有很多的不足。
这个问题也是真正实现agi路上的一块绊脚石。