-
魔搭社区开源多模态对齐统一框架OneLLM
OneLLM是一种多模态对齐的统一框架,它使用通用编码器和统一的投影模块与LLM对齐多模态输入。OneLLM还通过使用modalitytokens实现了在不同模态之间的切换。OneLLM在视频-文
-
Parrot提出新型多重奖励强化学习框架以改进文本生成图像
在使用强化学习进行文本生成图像时,质量奖励成为一个紧迫问题。尽管观察到通过强化学习RL可能提高图像质量,但多个奖励的聚合可能导致在某些度量中过度优化在其他度量中降
-
中国科学院提出「思维传播」框架 让大模型能够像人类一样类比思考
中国科学院与耶鲁大学的研究人员共同提出了一种名为「思维传播」的全新框架,旨在提升大型神经网络模型的推理能力,使其能够更像人类一样进行类比思考。这个框架的灵感源自
-
蚂蚁集团等发布开源大模型知识抽取框架OneKE
蚂蚁集团和浙江大学合作开发了一个名为OneKE的开源大模型知识抽取框架。该框架旨在帮助处理信息抽取、文本数据结构化和知识图谱构建等任务,为研究人员和开发者提供有力工具