【期刊信息】

Message

刊名:经济科学
主办:北京大学
主管:中华人民共和国教育部
ISSN:1002-5839
CN:11-1564/F
语言:中文
周期:双月
影响因子:1.804688
被引频次:83062
数据库收录:
中文核心期刊(2017);CSSCI中文社科引文索引(2019-2020);统计源期刊(2018);中国人文社会科学核心期刊(2018);期刊分类:理论经济

现在的位置:主页 > 综合新闻 >

独家 | 创新工场首席科学家周明:NLP 与金融「联(2)

来源:经济科学 【在线投稿】 栏目:综合新闻 时间:2022-06-07

作者:网站采编

关键词:

【摘要】AI科技评论:轻量化模型是否更经济实用? 我们共同认为,过去科技企业与金融公司的项目合作模式不够密切。项目制是甲方与乙方,对方拟好一个需求,

AI科技评论:轻量化模型是否更经济实用?

我们共同认为,过去科技企业与金融公司的项目合作模式不够密切。项目制是甲方与乙方,对方拟好一个需求,我围绕需求提供技术、按时间交付,但技术的不断迭代需要科技与场景的紧密结合,所以我和陈一昕最终决定采用「联合实验室」的方式,把大家放在一个篮子里,AI 可以随着市场变化快速迭代,业务也可以更了解 AI。

AI科技评论:在这次NLP与金融的联合中,「孟子」模型的落地如何体现?

AI科技评论:「孟子」模型之所以能够在某些基准上表现优于大模型,是因为其针对特定任务去做训练吗?

周明:我在2020年年底从微软亚洲研究院离开,到创新工场担任首席科学家,去年6月孵化了澜舟科技。澜舟科技的核心技术是自然语言理解,可以用于实现文本的智能理解、搜索、问答、摘要、翻译以及知识图谱等等。但具体落地,要找一个场景。


近两年大模型出现后,NLP 的能力大幅度提升,开始有人尝试基于 NLP 技术创业,但受疫情影响无法推行,很多科研者还在等待机会。也有将 NLP 当应用的公司,例如客服公司,但并非专门研究NLP。

在提供给用户时,用户并没有感知到模型的大和小、快与慢、能力高或低,而只关心解决任务的能力。所以,在跟大模型的比较上,孟子反倒能胜出。

再联想其他能力,NLP 几乎贯穿金融业务的所有环节,所以金融机构都重视 NLP 技术。但如何将NLP能力开发好、部署好,成本极低又能快速便捷地用起来,却是不容易做到的。

另外,也要站在客户的角度考虑问题。在落地时,小模型的成本是最小的。我认为中国公司不能靠烧钱,像谷歌、微软一样,而是应该拼算法、拼智力、拼业务场景,这也是我们的特色,更可能成为我们的优势。

而轻量化模型对用户的压力非常小,一般情况下只用少量GPU,甚至有些任务只用CPU也可以,部署成本可以大幅降低,又快又准。即便性能也许比大模型差了一点,但在大部分用户看来是划算的。也是基于这样的市场,我们在成立澜舟科技时就决定做轻量化模型。

这是继周明在2020年12月离开微软亚洲研究院后的又一个重大动向。

AI科技评论:您一直是轻量化模型的追随者吗?

AI科技评论:能否简单介绍一下澜舟科技跟华夏基金共同成立金融NLP联合实验室的背景?

AI科技评论:「孟子」强调的是小模型,小模型对于处理金融领域的问题是否有独特的优势?

NLP的这些能力在金融领域有很多用处,比如智能信息抽取。几乎所有金融单位都要处理很多无结构、有结构或半结构的文档,如网页有表格、有字段。举个例子,基金的变化,昨天的价格多少、今天的价格多少、基金数量、购买人数、交易量、上升与下降幅度等等,有可能写在年报里,也有可能写在网页里,我们就可以使用智能文档分析技术,将其重要信息抽取出来形成数据库。

AI科技评论:据您观察,目前国内做 NLP 落地、或凭借 NLP 技术进军金融领域的公司多吗?

周明:首先说NLP(自然语言处理)技术。目前 NLP 领域有许多基于互联网的海量数据训练出来的大规模预训练模型,过去几年也在全世界引起了广泛关注。但澜舟科技做的是「孟子」轻量化模型,模型不大、容易落地,同时又具备分析、搜索、翻译、生成等能力。

也因为金融的特殊性,场景过于复杂,需求太多样,到目前为止,还没有 NLP 公司能够在金融领域独霸。

AI科技评论:训练「孟子」大概需要多少算力?

周明:金融领域比较特殊,由于其数据不公开,大模型反倒不那么适用。应用在金融领域的模型最好有出色的适配能力,在拿到数据后能够快速适配,针对其任务特点快速迭代,这样的模型反倒能力强。

周明博士是我国研究自然语言处理(NLP)的先驱者之一:

AI科技评论:项目制是目前?AI/NLP?与其他领域结合的主流合作形式吗?联合实验室是不是相对比较少?

刚创立澜舟科技时,我就首先想到金融。那时候我就想,要进入金融领域,不能隔靴瘙痒,而是要有更紧密的合作。我们要了解金融的需求,金融方也要知道我们的技术长板和短板,所以我就开始寻找能够紧密合作的金融伙伴。


文章来源:《经济科学》 网址: http://www.jjkxzz.cn/zonghexinwen/2022/0607/1019.html


上一篇:首批科学家精神教育基地发布
下一篇:(经济)全国农技中心启动科学安全使用农药培