观雪 (@GuanXue)Tr架构能不能诞生一个可塑性极强的小模型呢? 中发帖

如果一个模型的可塑性很强,应该会很有意思,直接把记忆模块内置到模型内部,或者这样说也不贴切,就是用户输入的内容也属于训练集的部分然后这部分模块单独划出来与世界知识部分做切割,诶?这好像不就是rag尿袋吗?啧