DeepSeek大模型分享与展望-清华大学_第1页
DeepSeek大模型分享与展望-清华大学_第2页
DeepSeek大模型分享与展望-清华大学_第3页
DeepSeek大模型分享与展望-清华大学_第4页
DeepSeek大模型分享与展望-清华大学_第5页
已阅读5页,还剩77页未读, 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

DeepSeek展望大模型介绍与2025/02/0601

引言概述02

DeepSeek

大模型概述03

DeepSeek

应用场景04

技术创新与突破目录CONTENTS05

挑战与解决方案06

未来发展趋势07

结论与展望目录CONTENTS引言概述大模型定义应用场景广泛技术创新驱动大模型概念介绍具有海量参数和强大能力

的模型涵盖自然语言处理、计算

机视觉等自监督学习等技术推动大

模型发展多领域应用前景在自然语言处理、计算机视觉等多领

域有广泛应用前景DeepSeek

应运而生基于大模型趋势,开发具有独特优势

的大模型DeepSeek

背景简述大模型发展趋势模型规模持续增长,技术创新不断大模型概述DeepSeek模型架构解析深度学习架构采用先进的深度学习框架多层神经网络包含多层神经网络结构模块化设计支持模块化设计,便于扩展与优化训练数据与方法DeepLearning自监督学习结合自监督学习方法提升效果精细调优通过精细调优提升模型性能大规模数据集使用海量数据进行训练泛化能力强具备出色的泛化能力,适应多种场景低资源消耗在保证性能的同时,降低

资源消耗高效处理高效处理大规模数据,响

应迅速特点与优势概述DeepSeek应用场景情感分析精准识别文本情感,助力智能

客服等领域语言翻译支持多语种翻译,提升跨语言

沟通效率文本生成与理解利

用DeepSeek

进行高效文本

生成与理解自然语言处理应用图像识别DeepSeek

在图像识别领域展现出色性能物体检测高效检测图像中物体,提升自动化处理能力视频分析支持视频内容分析,为智能监控等领域提供支持计算机视觉应用图文结合分析结合文本与图像信息,提升信

息分析准确性语音与文本交互实现语音与文本的流畅交互,提升用户体验跨模态检索支持跨文本、图像、语音等多

模态信息的检索多模态应用实例技术创新与突破自监督学习技术提升模型泛化能力增强模型在未标注数据上的表现自监督学习应用DeepSeek

采用自监督学习技术减少标注成本有效降低对大量标注数据的依赖模型压缩与加速可解释性与安全性模型可解释性增强提升模型决策过程的透明度安全性保障加强模型对数据隐私和安全性的保护防范潜在风险有效应对模型偏见与公平性问题挑战与解决方案数据隐私与安

全保护数据隐私保护确保数据收集、存储、

处理合规安全审计机制建立安全审计机制,

监控数据使用数据加密技术采用先进加密技术保

障数据安全模型偏见与公平性透明化决策提高模型决策透明度,

增强公平性减少模型偏见优化训练数据,减少偏

见影响公平性评估引入公平性评估指标,

监控模型输出-amnan1可r4C

a

mrUc出非博

r腿:3mP由M黑高效计算架构采用高效计算架构,减少资源消耗模型压缩技术利用模型压缩技术,降低能耗绿色计算策略实施绿色计算策略,促进可持续发展计算资源与能耗问题未来发展趋势计算能力提升利用更强大的计算资源支持模型

训练数据效率优化通过技术创新提高数据利用效率,促进模型规模增长D

Leaming模型规模持续扩大DeepSeek将不断提升模型参数数量模型规模持续增长多模态技术融合DeepSeek

将融合自然语言、

计算机视觉等多模态技术技术交叉融合推动AI与其他前沿技术如区块

链、物联网的交叉融合跨领域应用拓展拓展至医疗、金融、教育等领域,实现跨领域创新跨领域融合创新智能化应用场景DeepSeek

将应用于智能客服、

智能助手等人机协作场景智能化决策支持为决策提供智能化支持,提高决

策效率和准确性人机协作与智能化结论与展望推动AI技术创新DeepSeek

促进自监督学习等

技术创新广泛应用场景在自然语言处理等多领域展现应用潜力DeepSeek

潜力与影响解决行业挑战针对数据隐私、模型偏见等提

出解决方案人机协作智能化推动人机协作,提升智能化应

用水平跨领域融合创新促进AI与其他领域融合,实现

更多创新应用模型规模持续扩大DeepSeek

将随技术进步持续

扩大规模未来技术发展展望所CN³3HIQ

量子位

insightsAI大模型创业格局报告量子位智库

QbitAlInsights

分析师王昕祎xinyi@qbit微信公众号:零竖质量insights2

0

2

2

年11

月ChatGPT发布,引爆国内百模大战,创业玩家如雨后春笋,互联网巨头也纷纷下场,巅峰时期国内公开大模型数量超越300个。如今一年半过去

…

巨头们依托固有业务,更早形成壁垒,率先晋级。而创业玩家这边,胜局也已锁定,

天模型创业第一梯队仓经形成,目前或许只有少数几家公司拿到了和巨头角逐下半场的门票。创

业

六

小

强

他

们

分

别

是一

智

谱

Al、MiniMax、阶

跃

星

辰

、

百

川

智

能

、

月

之

暗

面

和

零

一

万

物

,

这

六

家公司背后都转起了一个关键飞轮

—

模型、应用和融资飞轮,这使得他们能够与巨头同场竞技。另外,两位值得特别关注的玩家

这

一赛道上还有

面壁智能和

DeepSeek.他们共同组成了国内大模型创业玩家“6+2”格局。许多人认为,继移动互联网之后的Al

时代,新的巨头或将从这八家公司中诞生。而放眼全球,美国大模型行业同样存在类似的阶段性竞争格局变化,像曾经的移动互联网时代一样,中美再次在两个“平行宇宙”中上演新的历史进程

…..在本篇报告中,量子位智库将以一个逐步放大的视角,从国内创业玩家“6+2”格局、国内巨头玩家格局、海外玩家格局三个层次,力求为读者描绘大模型行业格局完整画卷。insights1.0

国内创业玩家“6+2”格局2.0

国内巨头玩家格局3.0

海外玩家格局4.0

新阶段竞速标准微信公众号:零竖质量insights国内创业玩家“6+2”格局微信公众号:零竖质量智谱清言、清影星野、海螺、

TalkieKimi跃问、冒泡鸭百小应、健康厥问APL、云端私有化

本地私有化APIAPIA

金融、

AI

内

容创

作MaaS+AaaS

行

业

解决方案数字人解决方案全行业ToB

解

决方案、

AlIinfra

解决方案约30亿美元约25亿美元约30亿美元约20亿美元*超20亿美元超10亿美元为投前估值●十2创业特别关注分

类学院派青年派大佬派创

始

人唐杰闫俊杰杨植麟姜大昕王小川李开复MINIMAx阶跃星展万

物2020.06.11OpenAI

发

布GPT3doopsook模

型DeepSeek2023.05,16零一万物成立创

始

人梁文锋2023.07.1

7深度求索成立模

型GLMababMoonshotStepBaichuanYi2022.08面壁智能成立国内创业玩家“6+2”格局总览面壁智能创

始

人李大海

刘知远C端产品

B端

产

品

最新估值2022.11OpenAI

发布ChaiGPT,引爆百模大战创业六小强模

型MiniCPMinsights2023.04.0

6阶跃星辰成立2023.04.1

0百川智相成立2021.12MinMax

成立2023.03月之暗面成立2019.06智造A成立在模型维度上,本章将根据各家创业公司特点有侧重地介绍其研发历程、模型能力特点、架构特色、矩阵构成、Benchmark

成

绩

、AGI

路径规划等情况中的一到三项。在应用维度上,本章将根据各家创业公司特点有侧重地介绍其大模型应用矩阵、特色应用、主

力应用、实现功能、用户数据、战珞特点、生态布局、付费模式等情况中的一到三项.在融资维度上,本章将介绍各家创业公司融资历程,具体包括历次融资时间、轮次、金额、估值及投资机构。在团队维度上,本章将介绍各家创业公司核心团队成员情况,具体包括教育背景、学术影响力、

重要头衔、相关工作履历等信息。国内创业玩家核心竞争力四维度竞争力维度

具体内容模

型应

用融资团队insightsinsights创业六小强玩家微信公众号:零竖质量19962015.12

2019.062020.06CpenAI正式成立智港A正式成立

OpenAI发

布GPT-3OpenAl

VS

智谱

GLM-4

模型主流Benchmark

成

绩智谱Al——模型:清华系成果转化,自研底层架构,对标OpenAl

insights脱胎于高校实验室,技术成熟自然转化:智谱A脱胎于清华KEG

实验室,是清华计算机系技术成熟到一定程度的转化成果,于2019年6月正式成立,2022年8月发布自研百亿参数大模型GLM,

彼时GPT-3.5

还未发布。自研底层框架打破垄断,矩阵全面对标OpenA

I:2022年3月,唐杰团队提出了全新自研的通用预训练框架GLM,

打破当时西方垄断主流大模型预训练框架技术路径

的局面。智谱AI在模型和产品矩阵甚至投资策略上均对标OpenAI,最新的GM4

基座大模型能力多方位接近世界领先水平。ModeMMLU

GSM8K

MATH

BBH

GFQA

HamanEvalGPT-4(0314)GPT4

Turto(1106)GPT4Turbo(2024-04-09)Cwde

30pusGkmii1.5Pro86.484.786.786.885.992095.795.695.090.852.964.373.460.167.783.188388286.889235.742.549.350.446.267.083.788.284.984.1GLM-4-9B-ChutGLM-4-Air(0605)GLM-4(0116)GLM-4(0520)72.481.981.583.379.690.987.693.350.657.947.96L376.380.482384.728838.435.739.971875.772078.5ChanGLM智谱清言GLMCogVicwCogVdoo清影CodeGeeXCogVLMbigmodal,ai智诺清言智能体中心面壁智能、生数科技、无问芯育等ChatGPTGPTDALL-

ESaraCodexGPT-40

platlorm.openaigptstore

Helion,Rain

A、Anthropic等应用产品底层框架图像生成视频生成代

码多

模

态MaaS平台Agent开发平台产业投资智谱GLM-4(0520)在GSM8K、MATH、BBH、GPOA、HumanEval等

多个国际主流Benchmark

上成绩超过GPT-4(0314).清华KEG

实检室成立

致力于网络环境下知

识工程理论.方法和应用研究2021智谱百亿参数大梗里GLM发布,采用全新预训练模型框架2024.01智进发布最新一代基

座大模型GU44

性能

达到国际领先水平2022.08智诺发布开源干亿大模GUM1308,

效果对标GPT-3175B2022.12OpenAI

发

布GPT-

3.5,引爆白模大战2023.08智谱上线A助手应用智谐清言2024.07智语发布视烦生

成功能清影信息来源:智谱及公开他息整理AI汽

车售后服务Al手

机生活服务助手智能问诊Al医疗AI营养师其他AI风控智能投顾报告解读请当-A生

程曰t口ssem智进清影A生成视频功能网页端ToB

基因突出,主打MaaS

平台:智谱脱胎的清华KEG

知识工程研究室自90年代就强调工程落地,造就了团队将技术落地到需求中的做事风格。智谱团队以ToB

背景为主,商业化重心在B端,智谱大模型开放平台目前已有超40万的企业用户,主要覆盖金融、教育、互联网、零售、汽车、能源、传统制造业等行业,ToC侧重生产力应用,视频生成功能清影上线:智谱ToC

业务目前仍以免费为主,主力应用“智谱清言”,截至2024年6月历史下载量突破500万,同时智谱清言也

是智能体开发平台,目前已有超过30万个智能体活跃在智谱清言APP

可供使用,2024年7月新上线视频生成功能清影”,对标Sora,免费公开使用不限次。依据量子位智库发布的《

AI

智能助手APP8

月榜单》

,智谱的ToC

主力应用智谱清言下载量突破500万,位列第七。(完整报告数据请查看量

子位智库公众号)API单日调用量

API单日调用tokens

服务企业客户600万+

400亿+

30万+信息来源:智谱及公开他息整理Q智谱Al——应用:工程基因,侧重ToB,

商业化进程身位领先insightsToB

业

务ToC

业

务智能导游

行程规划AI质检

Al供应链智能座舱

市场营销售后服务

研发制造AI

BIAI陪

伴AI导

购AI客服AI旅行Al金融AI营销智谱融资历程时间轮次金额估值投资机构2024/D9B

+

轮数十亿200亿中关村科学城2024/05B+轮约4亿美元约30亿美元Prospery7Venlures2024/03B+轮顺椿基金2024/01B+轮光速光合2023/10B+轮蚂蚁集团2023109B+轮12亿25亿好未来,小米,红杉、美团,调投备、金山软件、阿里巴

巴.顺为资本、高牺资本、联备本2023107B+轮约3亿40亿美团2023/05B

+

轮约4亿4

0

亿今日资本,蚂效金服,光速中国2022109B轮约2亿2

0

亿启明创投,君联资本,华控基金2021/09A轮约1.5亿四灵创投、凌云光、华控基金、将门创投、海南智桥、MO

Venues、达晨财智、北京荣品2021/04天使轮北京创新智科技有限公司2019108种子轮中科创星、华控技术转移有阳公司、清控资管集团

智谱

Al——

融资:融资轮次多、估值领先,全产业链投资积极布局生态

insights融

资

金

额

及

估

值

处

于

第

一

梯

队

:

智

谱

是目

前国

内

估

值

最

高

的

大

模

型

初

创

公

司

之

一

,

最

新

一

轮

融

资

估

值

报

据

传

为

3

0

亿

美

元

,

从团

队

背

景

、

模

型

开

发

进

展

、

商

业

化

方

向

及

资

金

储

备

情

况来

看,公

司

处

于国内Al创

业

公

司

头

部

。积

极

布

局

产

业

生

态,

投

资

多

家

技

术

优

势

公

司

:

为

打

造自己

的A大

模

型

生

态圈,

智

谱

参

与

了

十

多

家A大

模

型

产

业

相

关

创

业

公

司

的

投

资

,

被

投

企

业

多

为

清

华

系

,

且

以

技

术无问芯穹聆心智能面壁智能智

谱基流科技霉律皆能发起总额为10亿人民币的大模型创业基金,支持大模型

原始创新,覆盖大模型算法、底层算子、芯片优化、行业

大模型和超级应用等各方面。分别联合CCF

中国计算机学会、中国中文信息学会社会媒

体处理专委会发起了CCF-智谱大模型基金、SMP-

智谱大

模型交叉学科基金,用于支持大模型理论、算法、模型、应用等相关研究和跨领域交叉创新。成立大模型开源基金,计划累计用1000张

GPU.1000万人民币和1000亿tokens

来支持人工智能开

源社区建设

.智谱产业生态布局智谱投资布局对开源社区对学术界对创业者信息来源:智谱、相关报道及公开信息整理导

向为主

。清程极智生数科技智谱Al—

团队:学院派代表,清华计算机系人才众多

insights依托清华A1

人才资源:截至2024年9月,公司员工共计600余人,其中大模型研发人员接近半数,其余为客户服务落地人员及产品人员。公司借助清华系高校背景,持

续吸引高端人才

.团队具备从研发到落地全栈能力:公司团队源自清华知识工程研究室KEG,

该实验室自90年代成立起就走的是科研+工程化落地路线,团队成员具备深厚技术积累及

综合运营经验;创始人唐杰教授是认知智能领域顶尖专家,具备20余年人工智能领域研究经验。insights微信公众号:零竖质量●巴黎第十一大学计算机硕士、法国梅斯大学计算机硕士●曾任大搜车集团CTO,曾创立元因智能任CEO,

创立妙

计旅行任CEO,是智能技术领域连续创业者●曾在字节,腾讯,搜狗从事技术管理工作张

帆CO0SUNIVERSITE

PARISSUD●20余年技术和政府项目综合经验●清华数据科学研究院科技大数据研究中心副主任●中科院计算所博士,师从高文院士●获得授权发明专利40余项,国际标准一项●清华计算机系本硕博,中国新间信息标准化分会委员●电子学会标准化工作委员会机器人技术委员会委员●在ICML、ISWC

等顶级会议上发表10余篇文章●清华大学计算机科学与技术工学博士、IEEE

Fellow●清华大学计算机系教授,研究方向知识图谱●曾主导开发全球最大万亿级超大规模预训练模型悟道●曾任清华数据科学研究院科技大数据研究中心副主任●凹凸科技北京公司总经理●获得授权发明专利15项,关国发明专利2项唐

杰创始人技术顾问刘德兵

董事长张

鹏CEO王绍兰

总

裁信息来源:智谱及公开他息整理Sicro0MiniMax——

模型:选择混合专家架构技术路径,打造多模态模型

insights国内最早研发MoE

及

Linear

Atent

ion:2023年6月

,MiniMax

在MoE

混合专家架构仍是行业非共识时选择Al

in

MoE,彼时行业大部分公司仍在训练Dense

稠密模

型,2024年1月,MnMax

发布干亿参数MoE

架构模型;4月底,推出万亿参数MoE

架构模型。即将发布的abab7模型将基于MOE+Linear

Atention.围绕产品需求打造全矩阵多模

态

模

型:

截

至

2

024

年9

月,MniMax

已推出视频大模型

、音

乐大模型及语

音大模型

,

最新主

力模型abab6.5在多

项核

心

能

力

上

开

始

接近世界最领先

大

语言模型

水平

。视频大模型abab-video-1压缩宰高

.文本响应好。风格多样,支持原生高分

辨平、高帧率视频音

乐

大

模

型abab-music-1支持多功能端到端音乐生

成,可合成多种音乐形式,支持伴奏人声同时生成语音大模型单日交互次数30亿次日

均

处

理

Tokens3万亿abab6.5与世界领先语言模型在多个开源测试集上的成靖对比FFNSADense稠

密

模

型|FFNFFNFFN

2

3由SAMoE混合专家模型美文院鲁

MT-Bnc中文综音

细眼

他

教

霞字解

辅屋理从AncMMU0SMKwTM864m

FwFbb

15-2024

045B.7774278.T751381176.078.9abab

6.52024

041587.1873067542.674.5683728GPT-48.967594920529811670561-152160670.0ST,134.164.64170.50e

15o89788158584019校Oudo

30pus800*762950610M9Cude

3Soe8476.771.023405829730cude3uk89642*752894697379由自注意力机制层(

SA)

和的馈神经网络层

(FFN)

组

成

,

每一层都与前层直接相

连

。每次前向传播中所有

的参数都被渺活和使

用,需要的计算量和

显存更大。自注意力机制层(SA)

后接了多个前馈神经

网

络

层(FFN).在每次前向传播中,

由路由机制选择性激

活部分FFN,可减少计算量和显存

需求,同时提高模型

在同等条件下的灵活

性和容量。abab-speech-1支持粤语、韩语、西班牙语等多语种,生成语句超拟人,情绪细腻自然abab

6.5

系列包含两个模型

:abab6.5和

abab6.5s,

在各类核心能力测

试中,abab

6.5开始接近

GPT-4

、Claude-3、Gemin-1.5

等世界上最领

先的大语言模型。模型架构对比模型矩阵主流测试集成绩·····信息来源:MniMax

及公开他息整理Cut

ClingCard

Gest国内星野:星子于2023年9月上线,用户可以在星野上通

过简单描述定制Al

智能体的形象,声音、人设、技能,井

在后续对话中不断调整强化。也可以选择首页推荐的数百万款由用户创腱的智能体进行多模态沉浸式互动。此外,星野还探素了订阅制和抽卡制的付费模式,以宝石为主的经济体系

和以星念为中心的用户共创激励体系依据量子位智库发布

的《

AI

陪

伴

8

月APP

榜

单

》,

星

野APP

下载总量

超1400万,月新增下载及DAU

均位列国内同类A

产品第

一

.海

外

Talk

ie:Talk

io于2023年6月上线,主要面向北美

市场。产品玩法与星野类似,用户可以定制AI

智能体的形

象,声音、人设、技能,并进行卡牌抽取及交易。根

据

Sensor

Tower

数

据

,Talkie2024年H1在美国市场累计下载量380万次,位列美国同类

AI

产品排名第一

,超过

CharacterAL,目

前

Talkie

全球月活数据已达到1100万,

一

半以上用户来自美国,与

Character.ai月活数据1700万的差距逐渐缩小。MiniMax——应用:以娱乐陪伴方向为主,专注打造超级应用

insightsToC

打造超级应用工厂:Mr

iMax

是国内创业公司里做应用产品最早、最多的公司,2022年早于ChatGPT一个月上线Glow,

又陆续推出了A

内容平台应用星野

Talkie,

以及生产力助手海螺A,8

月最新发布海螺Al

创意视频平台,可调用最新视频生成模型,视频生成能力尤其是人物表情生成方面受到海内外好评。ToB

布局开放平台:ToB

方向布局API

开放平台,目前已接入3万余家企业客户,主要落地场景包含零售、教育、办公、智能硬件、招聘、客服、聊天等。◎海螺AI#oa附落地场景角

色

Al

智能Al扮

演

客

服

硬

件

教育聊

天

AlAlAl问

答

招聘

办

公

零

售国内外AI

内容平台应用海

螺A

I:

海螺A

I于2024年5月上线,支持多种

交互方式:可以发送文字消息、上传图片、PDF、PPT、TXT、DOCX

等格式文件,支持语音通话。8

月下句最新开放音乐创作与视频创作入口,可由此进入海生产力应用螺音乐及海螺AI

创意视场平台,调用海螺视频生成大模型能

力

,A

P

1

开

放

平

台信息来源:MriMax、SensorTower及公开他息整理不.融资历程时间轮次金

额估值投资机构2024/03A轮6亿美元25亿美元阿里巴巴、红杉中国、高

瓴投资、经纬创投2023/06A轮2.5亿美元12亿美元腾讯投资、绿洲资本、小

红书、顺为资本、高瓴投

资、IDG资本202207202201A轮天使轮超2000万美元IDG资本、明势资本、高

瓴创投、米哈游云启资本估值高、投资门槛高、融资金额高:MiniMax作为国内大模型创业六小强中唯二在ChatGPT

爆火之前就成立的大模型公司,很早就吸引了头部机构注意,目前已集齐

阿里、红衫、高瓴、经纬、IDG、顺为、明势、云启一众头部机构,估值约25亿美元,人才技术实力强,产品经验丰富:创始人兼CEO

闫俊杰具备丰富的技术、产品和商业化管理经验,核心技术团队拥有世界顶尖自然语言处理、语音、计算机视觉、计

算机图形学等工业和学术经验。闫俊杰创始人、CEO●中科院自动化所博士,在人工智能顶会及核心期刊发表论文200余篇,谷歌学术被引用超3万次●曾任商汤集团副总裁,从零打造通用计算机视觉模型、深度学习工具链和人脸识别相关的技术体系●获得多项重要奖项和荣营,包括超过10次重要国际学术克赛的冠军,广东省技术发明一等奖,两次吴文俊

人工智能二等奖等MiniMax——融资&团队:率先晋升独角兽,Under

35创始人带队毕业于约翰霍普金斯大学,主修电子计算机工程、数学和经济,主研深度学习在医疗影像领域的技术和应用●普任商汤科技投融资经理、战略国际化总监、创新业务总经理,负责集团多项业务孵化、国际化探索,参与团队成员魏

伟合伙人开放平台业务负责人负

烨

祎联合创始人、

COO●涉足技术和业务两大领域,早在2011年就开始使用GPU

驱动深应学习,支持算力平台的发展●

曾任云副总裁,百度技术总监,中国云计算领域的早期贡献者insights信息来源:MniMax

及公开他息整理集团多轮融资月之暗面——模型:明确主打长文本能力,专注迭代文本模型

insights主打长文本,专注

迭

代

唯

一

模

型

:

月

之

暗

面

成

立

于

2

0

2

3

年

3

月,

同

年1

0

月

首

次

发

布

支

持

1

2

8k上

下

文

长

度

的

模

型

时

处

于

业

界

领

先

地

位,目

前

2

0

0

万

文

本

长

度

功能内

测中,

仅

发

布

唯

—

—

款

干

亿

参

数

大

语

言

模

型,

下

阶

段

即

将

发

力多

模

态

。AGI路

径

战

珞

有

一

定

前

瞻

性

:

多

次

在

行

业

非

共

识

阶

段

提出

公

司

的AGI战

略

思

路,

如

长

文

本

是

必

经

之

路、

通

过ToC

产品实现数据

Scaing

、

专

注

迭

代

文

本

能力、

在

智力密

集

场

景

打

造

超

级

应

用

转

动

数

据

飞

轮

反

哺

模

型

等

观

念

。-*senee⁷.

mn,n*1m*r.MWL.Tim**innnnnn,Dnn,Nen.2023.10推出Kimi智能助手,支持20万字上下文输入X支

持

2

0

0

万

字

上

下

文

了Longwniong200万字是什么?和亲密的人十年的聊天对话.…量先糜的全部古

…申清M

入202402Kiml开放平台公测根据月之暗面

提供的信息,

对于中文文本,

1个Token

大

约相当于1.5-2

个汉字,如果

按1

.

75的比例

换算,200万字

相

当

于

1

1

4

万

tokens.

(Kimi

智能助

手

2

0

0

万

字

上

下文目前未对

公众开放,只

能通过申请内

测使用。)2023.03月之瑞面成立申请内测Kimi智能助手200万字上下文功能上传英伟达2016-2024年财报后进行长文本分析。2024.07Kimi

开放平台引入上下文缓存功能,加快模型响应速度2024.03Kimi智能助手200万字上下文功能内测二百万字长文本2024.08正式发布企业级API信息来源:月之暗面Kimi

及公开信息整理KimiK.流量领跑创业玩家,积极探索变现路径:2023年10月推出kimi智能助手,2024年3月爆火,带涨kimi概念股;6月网页端点击量超越百度文小言;2024年5月,率先上线六档打赏功能,强调灵活性和趣味性,持续积极探索变现路径。营销能力突出,获客成本高引争议:营销年轻化、网感好,获客手段之一是投流,据传CPA

高达30元,虽然在业内引起争议,但也投出了一个早期爆款应用

.

开始通过API建设生态,加码B端业务:2024年2月正式面向企业和开发者开放企业级API服务,在增加B端服务的同时也开始布局产业生态W00ong国有200万字无报土下文绿力的(麻康太:(Longcontext電子Al卿重重地赏!短3打常项目价格高峰期使用权限平均每天价格送Kimi一朵花5.2元4天1.30元给Kimi加鸡腿9.9元8天1.23元请Kimi喝啦啡28.8元23天1.25元给Kimi充充电49.9元40天1.24元请Kimi吃顿饭99元93天1.06元和Kimi一起登月399元365天1.09元AI应用月报

·AI智能助手rWeb

端月访问量」Kim

智E

手2000x

心

-根

据量子位智库《AI

智

能

助

手

APP8

月榜单

》及

《AI

智

能

助

手

8

月Web

端榜单》,

Kimi

智能助手截

至

2

0

2

4

年

8

月APP

端历史总下载量近3000万,位列国内第二,仅次于豆包

A;Web

端月访问量超

2000万,位列国内第

一

.

(完整报告请查看量子位

智库公众号)Kimi

智能助手积极探索变现路径,首发打赏制,相比传统订阅制度更

加灵活机动,强调趣味互动,营造

智能助手伙伴感,提供的高峰期不

限速服务平均日价格约12元天海外竞品OpenAI

订阅价格为20美

元

月(

约

人

民

币

1

4

0

元

月

)

,

国

内

宽品大多为免费制。Kimi

智能助手打赏价格Kimi

智能助手用户流量月之暗面——应用:高成本获客打造爆款应用,网感营销风格突出博定社交平台网感营销准的Qinsights信息来源:量子位智库、月之暗面Kml

及公开信息整理存人

无

敌JK用之面rkimi.n@时间轮次金额估值投资机构20241062024/02B+超10亿美元腾讯.高榕创投阿里、红杉中国、小红

书、美团、砺思资本2023/072023/06A超2乙

美元美团龙珠真格基金、红杉中国、

今日资本融资估值高、金额高、门槛高:截至2024年7月月之暗面已进行4轮融资,估值高达30亿美元,融资金额均为上亿美元,资方全部为头部机构。很大程度由于创始人杨植麟在求学之路早期就开始闪耀天才星光,符合资本投人小天才画像,早早吸引投资人押注,其中部分资方与杨植麟在创办循环智能时就已结缘。创始团队为清华计算机系四同门:主要团队是清华计算机系本科同学。灵魂人物杨植麟标签包括但不限于“天才学霸、“连续创业、顶尖计算机学府”、“懂艺术”、情

智

双

高

"。●

高中竞赛保送清华大学,大二转去计算机系师从

IEEE

Follow唐杰,2015年以年级第

一名成绩毕

业,本科期间普组建摇滚乐队

Splay

Tree,任

鼓

手和词曲作者●

博士就读于卡内基梅隆大学,在语言技术研究

所LTI

深造,师从苹果AI

研

究

负

责

人

RuslanSalakhutdinov、

谷

歌

Al首

席

科

学

家William

Cohen,博士期间,

一作身份论文引用次数破

万,顶会发表论文20余篇,和众多学术明星

如Yoshua

Bengio.Yann

LeCun,QuocV.

Le

等合著论文●

博二时和张宇铝创办循环智能●

博士毕业后任清华大学交叉信息研究院助理教

授●

清华大学计算机系本科毕业,后到卡耐基梅隆大学深造,研究方向为计

算机视觉中的检测和识别问题,谷歌学术被引超过1

.9万次●

2018年获欧洲计算机视觉会议ECCV

最佳论文提名。同年在GeekPwn国际安全极客大赛上成为唯一破解人脸识别算法的参赛团队●

曾

在

Meta

人

工

智

始

实

验

室FAIR,与队员何恺明共同提出组归

一

化

Group

Normalizaion

方法。期间还创建了

Delectron2,是

Meta最

受

欢

迎

的A项目

之

一●

清华大学计算机系本科,本科曹与杨植麟共同组建乐队Splay

Tree●

在旷视科技从事算法量产工作,与旷视研究院基础科研负责人张祥雨合

作在CVPR

发

表ShufleNet

论文,后影响包括苹果3D人脸解锁在内的

各种手机毫秒级人脸解锁技术月之暗面——融资&团队:资本宠儿,小天才范本,创业流量担当创始团队月之暗面融资历程MEEVI

旷

视吴育昕联合创始人周昕宇联合创始人B30亿美元天使杨植麟

创始人insights信息来源:月之暗面Kim

及公开信息整理XMetaB

阶跃星辰——模型:模型矩阵能力全面,技术路径规划清晰

insights蛰伏一年,亮相惊艳,

Sca

ing

Law攀登者:2023年4月阶跃星辰成立,

一年后首次发布Step-1

干亿参数语言大模型、

Step-1V

干亿参数多模态模型和Step2

万亿参

数MoE

语言大模型预览版三款大模型,团队主要从算力、系统、数据、算法四方面为攀登Scaling

Law作准备。MoE、

多模态两手抓,迈入万亿模型俱乐部:2024年7月4日,阶跃星辰在2024年世界人工智能大会上第二次亮相,发布了Stp2万亿参数MoE

语言大模型正式版、Step-1.5V千亿参数多模态大模型、Step-1X

图像生成大模型三款

Step

系列模型新款。通过自建机房+租用算力,积极储备算力。成员实践过单集群万卡以上的系统建设与管理,训

练干亿模型的有效算力输出MFU

达

5

7

%

,数据团队核心骨干来自必应搜索引擎,曾支持全球

100多种语言,为200多个国家和地区提供服务。

对全球互联网高质量语料的分布有深入了解。并建

立了高质量数据处理和知识图谱流水线。驾驭多种大模型架构,同时对大模型的认知以及发展路线进行深刻洞察。类型模型参数架构对标文本Step-2万亿MoEGPT-4多模态Step-1.5V千亿GPT-4V图像生成Stop-1X8BDiTDALLE四方面发力攀登万亿参数MoE

大模型惊会O山

m

e

J

0

37.5

58.6

8.6O阶跃星辰Step-2在VCUNA,AGIEVAL,BBH、DROP、MATH等多个国际主流Benchmark上成绩超过GPT-4-1106,Claude3和Llama370BChat,多模态大模型

统一

理解及

生

成当前主流测试集成绩语言模型视觉模型声音模型86.079.383.1标M090895.00

93.068.464.160.1504A

G

1

路

径知

识1082.968.3

85.864785.7572

89.3横型矩阵时齐抽象

Swe2归纳nawe

世

界对我胜率48J341.918444.5数据系统算法算力考试69.563.161.7592参数

数据

算力

Scale探

索物理

世界理89.46178.2信息来源:阶跃星展及公开信息整理186.64.787多模理解多模生成校互未来早期数

学阶跃星辰——应用:发力ToC,

繁星计划意图布局应用生态

insightsToC

布局生产力和娱乐陪伴两款产品:2024年3月首发亮相时同步发布生产力智能助手“跃问和A

内容开放平台应用“冒泡鸭两款产品,跃问目前已实现A

I

联

网

搜

索

、多格式文档解析、拍照识图、语音输入等功能

.推出模型开放平台,启动繁星计划布局生态:阶跃星辰开放平台目前已上线,2024年7月启动繁星计划,寻找多模态优秀初创企业、团队和独立开发者,提供模型、

算力及其他配套支持,补充丰富自身应用生态矩阵。信息来源:跃问、冒海鸭、阶跃星辰及公开信息整理微信公众号:零竖质量繁星计划我们支持“

星

火

燎

原

”一十开

-

F

月snE*mn

行的融力,产品曝光.u■对接合作免费工位RPM/TPM

支

持.目前优秀案例包括胃之书

APP

、

野猫子工作室这秤三分的的茶

,

是多少这杯三分约红茶野奇保奶茶岭卡路里大约

在349大卡左右。这个数酒可能会因具体的制作

过程和配料郁潜不阔,想总体来诚,一秤三分的

红第玛n

的

和

对

流.

如

世

在

a

饮曲或减肥常武可能前话当经的

的猫入量理解方面:目前已支持拍照识图、语

音输入、pdf、docldocx、excel、csv

、png、ipg等多格式文档解析。生成方面:可以快速完成内容创作、逻辑

推理

、

数据分析等任务

。功能方面:优化了联网搜索、文档

解析、推理速度等性能,最新推出

浏

览

器

插

件

。可实现长篇网页、复杂文档理解

及

总

结htp/hkchinaxgoecnacto/1000127GS22109ostestml

.

根据这个政,我

哪天姆究成当年的算

?根据常理供的国家粮务总局政量洁理库.

即区家枕务总场关于办理2023年陛个人相所得厂M

法的公善,2023年

CM办

时

间为2024年3月1日里6月30B.

回

此,

需

性

需

在2024年4月20日之前究成去的CW用户在冒泡鸭上可以根据自身偏好打造智能体和剧情。冒泡鸭支持用户自定义智能体的形象

、

个性

、

声音

、

记忆

、

背景经历等

。娱乐陪

伴应

用

—

—冒

泡

鸭智能助手应用—

—跃问可实现拍脚问答、图片理解项日落地m免费Tokens技术支持上新体验阶跃星辰——融资&团队:团队聚集学术大牛,大模型相关经验丰富

insights融资进展神秘,资方选择审慎:成立至今未正式披露融资情况,据传仅在2023年11月完成过一轮融资,投资方或包括红杉中国、启明创投、五源资本,据量子位报

道,2024年6月阶跃星辰正在接洽新一轮估值20亿美元的新融资,阿里巴巴在投资机构名单中。研发实力突出,人才引力强,据传背景深厚:有深厚研发技术积淀,数据算力经验丰富,CEO

技术强,有大团队经验,核心团队聚集来自微软、谷歌、字节、腊讯、

旷视等公司相关人才,成立短短一年,规模已达150人,先后吸引多位行业大牛加入。据传有著名基金管理合伙人、独角兽公司创始人、微软华人大佬等支持。信息来源:阶跃星辰及公开信息整理微信公众号:零竖质量●西安交通大学与微款亚洲研究院博士生联合培养项目,师从孙剑和何恺明,博士学位●曾在微软亚洲研究院工作,阴间与何恺明、孙剑、任少卿共同完

成了著名的AesNet,负责底层框架和编码,2016获得CVPR

最

佳论文奖,2023未来科学大奖数学与计算机科学奖”,谷歌学

术被引用数已超23万●曾在旷视工作,与周昕宇共同完成移动端高效卷积神经网络ShufHeNet●天津大学博士、中国科学技术大学、西安交通大学兼职博导,天津大

学兼职教授●曾任微软亚洲研究院MSRA

资深首席研究员,自然语言计算团队研究经理,主要从事自然语言处理、多模态智能、代码智能、机器推理等

研究,多项研究成果成功应用到微软A产品中,担任微软NOVA系

列模型家族项目研究组长和导师●谷歌学术被引用次数逼近1.9万,与CEO

姜大昕合着过44篇论文●细约布法罗州纽约州立大学计算机科学博士,南洋理工大学担任

助理教授●在机器学习、数据挖掘、自然语言处理、生物信息等领域有丰富经验●前微软全球副总裁,微软亚洲互联网工程院STCA

首席科学家,在微软附间主导多个人工智能项目,曾为Microsot

365.Azum.智

能语音助手

Cortana等核心产品提供关键技术支持●毕业于美国加州大学圣芭芭拉分校●营任微软研究院研究员,曾任职字节跳动,负责公司Al

基础设施与

基础Al

框架,积累了万卡集群的搭建经验,曾任谷歌高级主管,直接支持Anthropic●山东大学本科,上海交通大学计算机硕士,南洋理工大学博士●

曾任讯担任研究总监,旷视Detection

组长,负责检测、分割、跟踪,骨架、动作行为等方面的研究以及算法落地工作,后在

PCG

光影研究室从事CV相关算法及技术研究●

中科大和MSRA

联合培养博士●微软必应引擎核心搜索团队前负责人,负责利用数据挖狂和NLP

算法优化索引和搜索质量●普开发全球高质量站点的自动挖摇算法并用于索引和排序MEGVII

旷

视

Tencent姜大昕创始人、

CEO俞

刚主任研究员朱亦博系统负责人焦斌星数据负责人张祥雨段

楠百川智能——模型:开源生态突出,模型矩阵全面

insights开源模型生态建设表现突出:百川智能成立于2023年4月,同年6月发布国内第一款开源模型,同年8月首批通过了生成式人工智能备案,是名单中最年轻的公司;

百川大模型支持LLAMA

热插拔,兼容及可拓展性好,开源后下载量领先,累计下载超700万次。搜索引擎技术基因,先天优势:自2023年4月10日成立以来,持续迭代基座大模型,最新

一代基座超干亿参数大模型

Baichuan4在SuperCLUE评测中处于国内大模型第一梯队,在知识百科、长文本、生成创作等文科类中文任务方面,表现优于国外大模型。Modes

10Kbuichunire/Baichuan2-78-ChatTtnincd

2

四baichuan-ine/Bafchuan2-138-ChutTtCn

d041taichuan-inc/aichuan2-79-asew

2mbaichuan-inc/Laichuar2-138-Dann

wdbk

-■baichuanire/Bafchuan2-138-Chat-4bitsT

ncn

d

4Baichuan

开源模型hugirgface8

月月下载量SSot

Ma

outha

baichuan-ine/Baichun-8TatGmetan-Udidbaichan-in/Baichn-139-CutTetGmeston

d

4

013Abaichuan-1ng/Baichuan-137-Basefeam

.22:baichuan-ine/Daichuan2-78-Oat-4bits

fa

d

benIbaichuan-ine/Baichuan2-78-Intermediate-C

pdidb2021美文通用美文通用中文通用中文通用数学推理MMNUNMBench-ENCMMMUMMBench-CNMathVistaGPT4V56.882.142.580.156.5Baichuan452.281344.379948Claude3-sonnet47467863.745Lva-NeXT-7286480.5466GeminiPro47.97527446.5百川智能

Baichuan4在MMMU,MMBench-EN

、CMMMU等多个国际主流Benchmark

上

成

绩

接

近GPT4V.百川智能Baichuan2系

列

开

源

模

型

在

开

放

社

区

公

开

累

计

下

载

量

已

经

突

破

7

0

0

万次,最新huggingface月下载量超6万次开源横型下载量2024.05发布Baichuan4,并推出智能助手应

用百小应2023.07推出130亿参数大

模型

Baichuan-1382023.09发

布Baichuan2大

模

型,开放API

接

口2024.01发布超千亿参数大语

言模型Baichuan

32023.08发布530亿参数模型,同步启动干亿参数模型练2023.06推出70亿参数大模型

Baichuan-7B信息来源:百川智能、huggingface及公开他息整理最新闭源基座大模型主流Benchmark2023.04百智能成立2024.07联合天津大学推出Sbyl

Syslem

Agem

柜架,GAA排名苑一成绩

百川智能——应用:ToC上线生产力应用,发力Al生命医疗

insightsToC

布局生产力应用,发力Al生命医疗方向:百川智能于2024年5月发布了ToC

生产力助手百小应,主打多轮搜索能力。另外,还在2024WAIC上发布了A健康顾问应用,具备丰富医学知识,高度拟人,可连续交互并给出诊断建议,百川智能计划在2025年实现L3级

别AI医疗。ToB

以

MaS

平台为业务重心:百川智能在

ToB

方向推出

MaS(Model

as

a

service)+AaaS(Agent

as

a

service)服

务

,Maas为重心,分旗舰版和专业版,

AaaS服务已开启公测,API

调用能力接近OpenAl。人私更置罐场绿

和

研

究

眼对比理四年能州K宁a009

m

或候深,阅读》■网面o

人s或碗深读,读网面m8.幅网

宁

江n或邪,E们在过的

四理

了ar

长,下面鸿时比两始200年202s*mso

,

以经里叶地解En

的经济

觉从中可

以

看出

ncoP

在

过四

*所

长

。not⁰ns780262

元00anmeAKE人

租

n人机实Dn

Corpte

ractos,简棒WCO

一个

计

机

科

苹

。o

理学。

。说计学ss

个学科ra性,±

■

研

觉

人

计招系就之间的交直方式,交直过程以最受显监,以

的人机更置墙经画作研度:一

、人眼奖1.CDt

T

ACoeanseAppaciwb

g)Mm

这本em公

工r◎百小应APP斓页面等级百川智能划分AI医疗水平L5完全白动化健康

管理A能够管理明者的整个健康程,从预防、诊断到

治疗,无需人工干预L4高度白动化诊疗A可以在大多数常见疾病中独立做出诊断和治疗决

策,仅复杂案例需要医生介入L3条件白动化诊疗A可以在特定条件下白动推荐治疗方案,但在关键

决策时需要医生端认L2多模态辆助AI可以整合多种数据原(如病历、影像实验室结

果),提供更全面的轴动信息L1辅助诊断AI可以提供数据分析活图像识别等单一功前的辅助,

帮助医生做出更好的决策L0传统医疗医生负责所有的诊断和治疗决策,没有AI介入百川智能ToC

应用百小应主打多轮搜索功能,相比单轮

按索,在市场调研、

产业分析等复杂场景下,能更有效地获取专业深度信息,

搜素结果可结构化呈现,还能实现网

页链接、

PDF、ward

文档长文理解

分析

.输船

0

0

(

C宁

0

0

0

化

R2015780.261045202060011240604795241404920227251164522023m164578发

力

N医

疗Al教育Al供应链AI

法

律Al医疗百川智能计划在2025

年

实

现L3

级

别AI

医

疗To

B业

务ToB云服务信

息

来

源

:百

川

智

能、

蝶

境

内

测

及

公

开

信

息

整

理时间轮次金额估值投资机构2024.07A50亿人民币三七互娱、中金资本、亚投资本、

信雅达、卓源亚洲、好未来,小米

集团、慕华资本、深创投、红点中国、物投资、阿里巴巴、顺为资本、上海人工智能产业股权投资基

金合伙企业、临港科创投、北京市人

工智能产业投资基金、顺禧基金,中

贝通信集团股份有限公司2023.10A3.5亿美元19亿美元阿里巴巴、脑讯投资、小米集团、

心资本、愉悦资本、金山软件、顺

为资本、好未来,清华控股、深创

投、红点中国、慕华科创、淡策资

本、卓源亚洲、众为资本2023.04天使轮5000万王小川

百川智能——融资&团队:A

轮融资已完成,搜狗核心班底再创业

insights已完成A轮融资,金额大、估值高:截至2024年7月,百川智能已完成A

轮融资,7月最新一轮融资规模50亿人民币,资方包括阿里巴巴、腾讯投资、小米集团等

机构以及北京市人工智能产业投资基金、上海人工智能产业投资基金、深创投等国资基金。目前已经以200亿估值开启B轮融资。王小川带队,拱搜狗核心班底再创业:作为搜狗前任CEO,

王小川是大模型创业六小强中唯一具备创业并上市经历的创始人,他带领搜狗核心班底创立百川智能,团

队技术实力不容小觑,由强系统性工程经验人才,语言模型认知优势的研发人员两部分组成。●与清华大学共建天工智能计算研究院,任联席院长●

曾任搜狗公司CEO、董事、搜现高级副总裁兼CTO,带领搜狗在美国纽交所上市焦

可联合创始人、产品负责人●清华大学计算机系本科,中科院计算所硕士王小川创始人、

CEO●清华大学计算机科学与技术专业,拥有工学学士、工学硕士、工程博士及EMEA

学

位洪

涛联合创始人、商业负责人●清华大学电子工程系本科,长江商学院EMBA百川智能融资历程团队成员●清华大学计算机系博士,浙江省高考状元,清华大学天工智能研究院副院长●曾任授狗公司000,负责运营及按索事业部,人工智能激育公司葡萄智学创始人兼CEO茹

立

云联合创始人、运营负责人●曾任智融集团创始人兼CEO、百度高级产品经理●

曾任授拘科技

MO、

睡讯

PCG

海业化GM微信公众号:零竖质量信息来源:百川智能及公开信息整理Tencent零一万物——模型:Al

Infra

技术领先,模型开闭源并重

insights领先Al

Infra技术节约训练成本:构建数干卡GPU

集群进行训练、调优和推理,提高数据有效参数量,以及使用的高质量数据的密度,以构建连续、可控、科学化

的训练能力。目前,零一万物具备全栈A

Infra能力,在国内率先端到端实现全球先进

FP8训练框架,模型取得国际SOTA,闭源开源并重:2023年11月首次发布Y系列大模型,涵盖闭源和开源,2024年5月闭源模型VLarge

在测试集LMSYS中成绩位列国产第一,

以干亿参数尺寸追齐硅谷巨头万亿模型。开源矩阵目前已经推出多模态模型、代码模型及通用模型等。零一万物致力于通过自主创新架构加速追赶OpenA.信息来源:零一万物、零一万物大模型开放平台及公开信息整理微信公众号:零竖质量Yi-LargeGlobalSOTA

LLMMr

Intnersnt2577

n0

7纪

2

23校4

2

a1

5

0412

%

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论