智东西11月13日报道,今日,在“From Paper to App”媒体沟通会上,AI技术公司彩云科技正式推出首款基于DCFormer架构开发的通用大模型“云锦天章”,旗下AI RPG平台“彩云小梦”也成为首款基于DCFormer架构开发的AI产品。
与此同时,彩云科技CEO袁行远就AI大模型落地应用难、大模型未来进化之路等行业热点话题与智东西等媒体进行了交流。
袁行远说:“ChatGPT发布近两年,为什么对世界的改变仍然有限?我称之为‘智能没有免费的午餐定理’——做同样一件事,大模型需要消耗的算力要和大脑思考需要消耗的脑力一样多,才能得到和大脑思考同样的效果。”
一、颠覆Transformer架构,性能最高提升2倍
“假设ChatGPT-4每天响应用户约2亿个请求,消耗超过50万千瓦时的电力。假设全球网络都使用ChatGPT作为访问入口,ChatGPT每天消耗多少电力?另外按照这个速度发展下去,到2050年全球人工智能的耗电量会达到目前地球发电能力的多少倍?”
“到2050年,全球人工智能的耗电量可能会达到目前地球发电能力的8倍。”
上面是沟通会现场,袁行远向参会者展示的他与ChatGPT-o1之间的问答;改变AI能源困局也是袁行远主张改善大模型底层架构的出发点。
“Scaling Law告诉我们,随着算力的提升,模型更大、数据更多,模型效果会越来越好,但与之相应的,能耗也会越来越高,在Scaling Law失效、AI实现之前,或许我们地球的能源就已经无法支撑了。”袁行远称,“没有效率的提升,AI就是镜花水月。”
今年年中,彩云科技带来了颠覆Transformer架构的研究成果。在国际机器学习领域的顶级会议ICML(国际机器学习大会)上,彩云科技发布论文《Improving Transformers with Dynamically Composable Multi-Head Attention》及论文核心成果DCFormer架构。
据介绍,彩云科技团队构建DCFormer框架,提出可动态组合的多头注意力(DCMHA),替换Transformer核心组件多头注意力模块(MHA),解除了MHA注意力头的查找选择回路和变换回路的固定绑定,让它们可以根据输入动态组合,从根本上提升了模型的表达能力,由此实现了对Transformer架构1.7—2倍的性能提升。
“我们的工作表明,Transformer架构距离‘理想模型架构’还有很大的提升空间,除了堆算力、堆数据的‘大力出奇迹’路线,模型架构创新同样大有可为。”袁行远补充道:“往小了说,在大模型领域,利用效率更高的模型架构,小公司也可以在与世界顶级AI企业的对抗中取得优势;往大了说,模型效率的提升,可以有效地降低AI升级迭代的成本,加速AI时代的到来。”
二、0提示词按回车键AI续写小说,最高输出10000字
“世界最强的小说续写通用模型。”沟通会上,袁行远带着些中二语气地展示了基于DCFormer架构的通用大模型“云锦天章”。
袁行远介绍,云锦天章可以实现在虚构世界观的基础上,赋予小说人物编程、数学等基础能力,可以高速针对大量文字进行扩写、缩写,针对文章风格进行大容量更换,同时兼具其他模型的问答、数学、编程等基础能力。
根据现场演示,云锦天章目前可以在“写小说”等类似提示词的情境下,实现一轮提示词,按回车键多次自动续写内容;同一轮对话的输出字数在8000至10000字左右。该功能将通过API形式向企业开放,并免费向C端用户开放。
彩云科技旗下AI RPG平台彩云小梦也迎来了基于DCFormer架构的V3.5版本。与之前的版本相比,彩云小梦V3.5整体流畅性和连贯性提升了20%,支持前文长度由2000字提升至10000字,故事背景设定最长长度高达10000字。
这意味着,在故事创作或者AI对话中,AI能够记住之前发生的事情以及故事中的细节;创建的人物也会记得自己明确的目标,并且会根据剧情及时进行反思修正,在做到自主创作的同时,发散性收敛,不会天马行空,人物性格前后一致,故事逻辑性更强。
“深度对话,超长记忆,逻辑清晰。”袁行远总结彩云小梦V3.5的特征。他透露,目前彩云小梦的用户以网文写作者为主,有用户同时更新10部小说,日更10万字,月入5-6万元。
袁行远介绍,公司接下来将继续加大对DCFormer的研究和投入,“一方面有打破‘国外做技术层,国内做应用层’刻板印象的情怀所在,一方面也是为公司自有产品应对市场竞争,实现快速迭代升级和能力领先的现实需要。”
结语:新架构效果有待检验,AI细分赛道仍需开拓
对于当下的AI大模型,谷歌的Transformer架构仿佛成为既定法则,彩云科技从底层架构对其进行颠覆,在理论上对大模型生成效率取得了显著提升,但能否产生行业影响还有待更多企业对DCFormer架构进行体验。
与此同时,在AI陪伴领域挖掘AI写网文、AI RPG等细分赛道,不失为中小型AI创业公司可以参考的思路。有需求才有市场,彩云小梦瞄准了网文创作者,而更广阔的AI应用赛道还有待被发现。
在七猫小说APP中,进入书架页面,长按想要删除的书籍,选择“删除”即可。如果想删除历史记录,可以进入个人中心,点击设置,找到“清除历史记录”选项进行清除。
七猫小说删除书架历史方法
七猫小说是一个提供网络小说阅读服务的平台,用户可以在平台上阅读自己喜欢的小说,并将喜欢的小说添加到书架中方便下次阅读,如果您想要清理或管理您的书架历史,以下是详细的操作步骤。
准备工作
1、确保您的设备已经安装了七猫小说应用或能够通过浏览器访问七猫小说的网页版。
2、登录您的七猫小说账户。
开始删除
通过手机应用删除
步骤一:打开七猫小说应用
1、在您的手机上找到七猫小说应用并点击打开它。
步骤二:进入书架
1、在应用首页,找到“书架”或类似的选项卡,并点击进入。
步骤三:选择要删除的书籍
1、在书架页面,浏览或搜索您想要从历史记录中删除的书籍。
2、点击书籍封面以选中它。
步骤四:删除书籍
1、通常在书籍详情页或者书籍列表页会有“移除书架”或者垃圾桶图标,点击该图标即可将书籍从书架中删除。
通过网页版删除
步骤一:访问七猫小说网站
1、使用浏览器访问七猫小说官方网站。
步骤二:登录账户
1、输入您的账户信息进行登录。
步骤三:进入个人书架
1、导航至个人区域,通常在网页的右上角可以找到入口,并点击“我的书架”或类似选项。
步骤四:选择并删除书籍
1、在书架列表中找到您想要删除的书籍。
2、将鼠标悬停在书籍上,通常会出现一个小叉叉或者“删除”按钮。
3、点击小叉叉或“删除”按钮,确认删除操作。
注意事项
删除书籍只是将其从您的书架历史中移除,并不代表从七猫小说平台彻底删除该书籍。
一旦删除,如果想要再次阅读可能需要重新搜索并加入书架。
小结
以上步骤可以帮助您管理和清理在七猫小说的书架历史记录,如果操作过程中遇到任何问题,可以尝试重新启动应用或刷新网页,或联系七猫小说的客服获取帮助。
4月26日第24个世界知识产权日,“媒体深度融合背景下的版权保护与运营”主题座谈会在广州举行。来自新闻出版行业、版权服务机构、版权社会组织的嘉宾们齐聚一堂,围绕数字时代版权保护的挑战与应对、版权运营的机遇和趋势等话题展开分享和座谈交流,以期推动广东新闻出版业塑造高质量发展新动能新优势。该活动由广东省版权保护联合会、南方出版传媒股份有限公司、南方都市报社共同举办,北京市盈科(广州)律师事务所协办。
南都大数据研究院梳理了嘉宾们的精彩观点,一起来看看,有哪些真知灼见。