澜舟坚持四两拨千斤:ToB场景落地10B参数大模型足矣而大模型的具体落地姿态,周明用自己带领的大模型创业团队澜舟科技身先士卒地做了个表率——利用澜舟“一横N纵”体系,以孟子大模型为基础,面向场景,发布产品。
简单来说,就是抓技术和应用的双轮驱动,在积极研究和掌握前沿技术的同时,致力于确保这些技术的有效应用。
现场,创新工场董事长、零一万物CEO李开复分享,目前世界上最好的大模型智能已经达到人类平均智力水平的3倍,也就是说,100道题普通人只能答对33道,而最好的AI大模型可以答对99道以上。
:最终脱颖而出的应用,属于那些敢于全力投入新技术的先驱者。大语言模型的引入为 AI-First 应用带来了巨大的推动力开云网址·(中国)官方网站。
:跨模态生成技术是实现认知和决策智能的转折点。现实世界的信息是文本、音频、视觉、传感器以及人类各种触觉的综合体系,要更为精准地模拟现实世界,就需要将各种模态能力打通,例如文本-图像、文本-视频等跨模态甚至全模态的综合能力。
去年3月,澜舟发布了孟子GPT V1(MChat);今年1月,孟子大模型GPT V2(含孟子大模型-标准、孟子大模型-轻量、孟子大模型-金融、孟子大模型-编码)对公众开放。
多说一句,孟子大模型训练背后有个大功臣,即总规模3T tokens的Mengzi-3数据集,包含了网页、代码、书籍、论文等高质量数据来源。
实践发现,ToB场景使用频率最高的大模型参数量多为7B、13B开云网址·(中国)官方网站、40B、100B,整体集中在10B-100B之间。
所以很长一段时间内,澜舟的目标都是做好10B-100B参数规模范围内的行业大模型。这就不能理解为什么开源版本选择13B。
“第一,这个大小的大模型已经可以解决80%的问题;第二,对团队来说也比较稳定,不会因为不断扩大的模型规模竞赛而感到焦躁不安。”周明补充说,这样冷静的思考,可以保证良好的成本控制开云网址·(中国)官方网站,避免无谓的GPU算力、数据、人力投入竞赛。
据了解,澜舟目前重点投入到了金融行业,辅助编程等领域,旨在通过更加全面、专业、优质的领域数据,打造更加贴近行业场景的垂直大模型。
以孟子GPT通用大模型的“一横”为基础,澜舟科技合伙人、首席产品官李京梅,介绍了澜舟的应用能力型产品,包括:
他举例,澜舟的定位就是作“大模型技术+企业场景应用”的综合公司,“我们希望能做到站在技术角度最懂应用,站在应用角度最懂技术,同时又希望把技术和应用形成一种生态连接在一起,让两边可以快速迭代。”
今年是大模型落地元年,就遍地是黄金是吗?不是的,我可以负责任地说,很多地方我们都没有开拓出来。
比如大模型如何解决落地的最后一公里?大模型的商业模式是什么?如何加强交付能力?如何提高产品的商业化?