站长之家(ChinaZ.com) 1月4日 消息:微软公司的研究团队最近提出了一种独特且简单的方法，用于生成高质量的文本嵌入。这种新方法仅使用合成数据和极少的训练步骤（少于1，000步），就取得了令人瞩目的成果。相比于现有的方法，该方法不依赖于多阶段的预训练和有限的标记数据微调，避免了繁琐的训练流程和手动收集数据集的问题，这些数据集通常在任务多样性和语言覆盖方面存在问题。
- 在日志语句、错误消息或代码注释中填充空白时，它很聪明。
7️⃣ ScriptGPT 🚀
包括在荣耀Magic6系列产品上的鸿燕卫星通信技术，在做这个方案的时候我们就知道，当解决了非常多的Bug和问题之后，其他厂商都可以用这个平台。
据悉，M2UGen采用了创新的方法，生成了大规模的多模态音乐指导数据集，用于训练模型。这包括MU-LLaMA模型生成的1.2k多小时音乐字幕数据集。模型结合了MU-LLaMA、BLIP图像字幕模型、MPT-7B-Chat模型以及VideoMAE字幕模型，以在各个领域生成对应的指导。