互联网传媒行业周报-周观点：LeCun谢赛宁首发全新视觉多模态模型，Unique3D开源图转3D模型

——互联网传媒行业周报（20240624-20240630） LeCun和谢赛宁共同提出一种全新的SOTAMLLM——Cambrian-1，开创了以视觉为中心的方法来设计多模态模型，同时全面开源了模型权重、代码、数据集，以及详细的指令微调和评估方法。在寒武纪大爆发中，视觉的出现对于早期动物至关重要，捕食、避险、引导进化，穿越时间，组成了多彩的世界。对应到大模型的学习，一方面虽然更大的规模可以增强多模态的能力，但视觉方面的研究和设计似乎没有跟上；另一方面过度依赖语言，则可能会成为多模态学习研究的瓶颈。研究人员基于之前的设计框架，使用了三种参数大小的LLM（LLaMA-3-Instruct-8B、Vicuna-1.5-13B、Hermes-2-Yi-34B） 进 行了 训 练 ， 视 觉 部 分 结 合 了 四 种 模 型 （SigLIP、CLIP、DINOv2和OpenCLIP ConvNeXt），训练过程中采用了250万条适配器数据，以及700万条指令微调数据，训练一个高性能的Cambrian模型。 Unique3D是3D生成圈的一个开源模型，可将一张图30秒高质量转3D，基于该模型打造的产品还即将上线一张图生成3D全景图，一键将视频人物替换为生成角色等功能。Unique3D整个流程分三个主要阶段：多视图生成、高分辨率上采样、3D Mesh重建，主打高保真度、高 一 致 性 、 高 效 率 单 图 转3D。比 起 以 往 基 于Score DistillationSampling（SDS）等方法，Unique3D解决了模型生成需要长时间优化，几何质量差，存在不一致性的问题。而且Unique3D也优化了基于多视图扩散模型方法受限于局部不一致性和生成分辨率，难以产生精细的纹理和复杂的几何细节的问题。 《 周 观 点 ：Runway推 出 视 频 生 成 模 型Gen-3 Alpha，Open-Sora实现全新技术升级》——2024年06月25日 Unique3D关注3D应用场景以及它的下一步，希望通过如做动画及新的交互方式实现4D，让创作者创作出真正有表达力的IP或是数字媒体内容，接下来重点关注作品的艺术性和IP潜力，做好创作者社群。在大语言模型百花齐放阶段，我们认为国内大厂持续投入大语言模型，有望打造出更适合中国的AI生产力工具。目前AIGC行情已有所分化，未来主题性机会有望逐步切换向案例兑现、甚至基本面兑现，龙头及龙头板块需重点关注，持续推荐具备基本面优势的【游戏】板块。 《周观点：GPT-4o加持Siri，复旦推出通用智能体平台AgentGym》——2024年06月17日 《周观点：智谱推出MaaS开放平台2.0，快手版Sora“可灵”开放测试》——2024年06月12日 ◼投资建议 基于我们“大模型+小模型+应用及内容”的研究框架，我们认为从基本面受益的角度上看，需沿着目前成熟大模型模态输出的范围选择标的，重点关注AI+文本/虚拟人板块，其次关注AI+图片（大模型+小模型）；从价值重估的角度上看，需沿着掌握优质数据或内容（多模态数据）的范围选择标的，重点关注AI+内容/IP/版权板块。 AI行情分化趋势下，建议重点关注基本面优异的【游戏】及【出版】板块： 1、AI：建议关注【昆仑万维】；推荐【创业黑马】。 2、MR：推荐【风语筑】。 3、游戏新模式：建议关注【吉比特】；推荐【完美世界】、【三七互娱】。 4、影视新模式：建议关注【上海电影】、【中文在线】、【华策影视】、【掌阅科技】、【光线传媒】。 ◼风险提示 政策边际优化的程度不及预期、AI推进进度不及预期、AIGC商业模式或落地场景效果不及预期、内容监管趋严。 分析师声明 作者具有中国证券业协会授予的证券投资咨询资格或相当的专业胜任能力，以勤勉尽责的职业态度，独立、客观地出具本报告，并保证报告采用的信息均来自合规渠道，力求清晰、准确地反映作者的研究观点，结论不受任何第三方的授意或影响。此外，作者薪酬的任何部分不与本报告中的具体推荐意见或观点直接或间接相关。 公司业务资格说明 本公司具备证券投资咨询业务资格。 投资评级说明： 不同证券研究机构采用不同的评级术语及评级标准，投资者应区分不同机构在相同评级名称下的定义差异。本评级体系采用的是相对评级体系。投资者买卖证券的决定取决于个人的实际情况。投资者应阅读整篇报告，以获取比较完整的观点与信息，投资者不应以分析师的投资评级取代个人的分析与判断。 免责声明 本报告仅供上海证券有限责任公司(以下简称“本公司”）的客户使用。本公司不会因接收人收到本报告而视其为客户。 本报告版权归本公司所有，本公司对本报告保留一切权利。未经书面授权，任何机构和个人均不得对本报告进行任何形式的发布、复制、引用或转载。如经过本公司同意引用、刊发的，须注明出处为上海证券有限责任公司研究所，且不得对本报告进行有悖原意的引用、删节和修改。 在法律许可的情况下，本公司或其关联机构可能会持有报告中涉及的公司所发行的证券或期权并进行交易，也可能为这些公司提供或争取提供多种金融服务。 本报告的信息来源于已公开的资料，本公司对该等信息的准确性、完整性或可靠性不作任何保证。本报告所载的资料、意见和推测仅反映本公司于发布本报告当日的判断，本报告所指的证券或投资标的的价格、价值或投资收入可升可跌。过往表现不应作为日后的表现依据。在不同时期，本公司可发出与本报告所载资料、意见或推测不一致的报告。本公司不保证本报告所含信息保持在最新状态。同时，本公司对本报告所含信息可在不发出通知的情形下做出修改，投资者应当自行关注相应的更新或修改。 本报告中的内容和意见仅供参考，并不构成客户私人咨询建议。在任何情况下，本公司、本公司员工或关联机构不承诺投资者一定获利，不与投资者分享投资收益，也不对任何人因使用本报告中的任何内容所引致的任何损失负责，投资者据此做出的任何投资决策与本公司、本公司员工或关联机构无关。 市场有风险，投资需谨慎。投资者不应将本报告作为投资决策的唯一参考因素，也不应当认为本报告可以取代自己的判断。