2024-7-15 08:24

大模型公司对标系列之十:腾讯公司

公司档案

腾讯公司是一家世界领先的互联网科技公司,成立于1998年,总部位于中国深圳。腾讯的业务布局覆盖通信和社交、网络游戏、数字内容、网络广告、金融科技以及云计算和企业服务等多个领域。腾讯公司于2004年在香港联合交易所上市,2023年总收入达到6090.15亿元,公司2023年的主营增值服务营收占比51%,金融科技和网络广告营收占比16%。腾讯自2018年至今六年累计研发投入超过2696.54亿元。从最近一年投资布局看,腾讯公司投资最多的领域分别是人工智能、医疗健康,其次是游戏、文娱传媒和企业服务。

  图1 腾讯公司发展历程

  表1 腾讯公司最近三年关键指标

AI大模型技术、产品与服务

1.技术:全链路自研技术

腾讯的大模型从第一个token开始从零训练,掌握了从模型算法、机器学习框架、数据安全技术、再到AI算力的全链路自研技术。

模型算法方面,腾讯在预训练上从零启动训练,优化预训练算法及策略,精调及强化学习,改进注意力机制,并开发了思维链新算法。在预训练阶段,就通过“探真”算法,进行事实修正,摆脱了对外挂知识库的依赖,有效降低了复杂任务中的幻觉。经过预训练算法及策略的整体优化后,腾讯的混元大模型相比其他主流开源大模型,幻觉比例降低了30%-50%。

机器学习框架方面,腾讯自研了机器学习训练框架Angel,训练速度相比业界主流框架提升1倍,推理速度比业界主流框架提升1.3倍。计算支持多维度的并行,包括数据并行、模型并行、流水并行和序列并行。腾讯在 ZeRO-Cache 的基础上加入了统一视角技术,通过统一的地址寻址方式把显存和主存打通,训练时大量参数先放到系统对层里,需要时再放到显存里,将显存容量扩展,单机存储容量提升 90%。

数据安全方面,腾讯安全玄武实验室推出了大模型隐私保护的安全脱敏与还原(HaS)技术,能够对用户上传给大模型的prompt进行隐私信息脱敏,并在大模型返回计算结果后进行恢复。腾讯利用大模型支持研发安全场景的漏洞自动修复,通过精调后部署的私有化模型,实现了在帐密硬编码、SQL注入等漏洞类型的修复建议输出和修复代码生成等功能。

算力方面,腾讯的大模型采用基于云星星海自研服务器的新一代HCC高性能算力集群,搭载了超强算力GPU,性能提升了3倍。算力集群所基于的网络底座——星脉,具备业界最高的3.2T通信带宽,可以为AI大模型带来10倍通信性能提升。通过自研TiTa协议和自研TCCL通信库,星脉网络可将网络利用率从普通以太网的60%提升到90%以上,极大提高整体集群的算力利用率。根据验证,腾讯新一代计算集群可以帮助混元NLP大模型训练在同等数据集下,将训练时间由50天缩短到4天。

2. 产品与服务:自研的推理芯片与多个自研多模态大模型

推理芯片:腾讯自研的AI推理芯片“紫霄”,采用自研存算架构和自研加速模块,可以提供高达3倍的计算加速性能和超过45%的整体成本节省。而这款AI推理芯片最显著的特点在于结合图片和视频处理、自然语言处理、搜索推荐等场景,性能相比业界提升100%,通过在芯片内部增加计算机视觉CV加速器和视频编解码加速器等方式对于芯片架构进行了优化。

腾讯混元大模型:是腾讯全链路自研的2023年9月7日正式发布的通用大语言模型,目前已拓展至万亿级参数规模,预训练语料超2万亿tokens,具有强大的中文理解与创作能力、逻辑推理能力及可靠的任务执行能力,具有处理复杂场景和多任务场景的能力,在数学、代码、逻辑推理、多轮对话和文生图等层面性能卓越。腾讯混元大模型已被广泛应用于腾讯旗下的多个协作SaaS产品,如腾讯会议、腾讯文档等。2023年10月26日,腾讯混元大模型正式对外开放“文生图”功能,广告素材创作效率可提升10倍以上。

2024年4月,腾讯混元大模型率先把技术架构升级为混合专家模型(MoE)架构,提高了模型处理特定任务的能力。升级后的腾讯混元模型总体性能相比上一代提升50%。2024年6月,腾讯混元文生图基础架构已全面升级至DiT架构,可生成更高质量的图像,是首个中文原生DiT架构文生图模型,具备多轮绘图能力。在生成3D层面,腾讯混元支持多种内容形态生成3D效果,单图仅需30秒即可生成3D模型。

腾讯元宝:2024年5月发布的基于腾讯混元大模型的面向C端的App,提供AI搜索、AI总结、AI写作等核心能力,旨在提升用户在工作和生活中的效率。腾讯元宝还提供多个特色AI应用,如百变AI头像、超能翻译官等,丰富用户的日常生活场景体验。腾讯元宝还支持用户创建个人智能体,实现更加个性化的智能服务。

腾讯元器:腾讯于2024年5月发布的一站式的AI智能体创作与分发平台,通过腾讯元器,企业和开发者现在可以直接创建智能体,并利用腾讯官方提供的插件和知识库来增强其功能。这些智能体可以轻松地一键分发到多个渠道,包括QQ、微信客服和腾讯云等,极大地扩展了智能体应用范围和影响力。

大模型原生工具链:大模型原生工具链是腾讯为了让更多企业能在0代码、低代码的条件下用上AI的一套低门槛的开发工具产品,助力企业在知识服务、图像和视频创作上提质提效,主要是三款PaaS产品:“大模型知识引擎”、“大模型图像创作引擎”和“大模型视频创作引擎”。

行业大模型:腾讯上架了覆盖金融、文旅、政务、医疗、教育等20多个领域的行业大模型。企业可以根据需要,导入企业专有数据,做进一步训练与精调,快速生成更有针对性的专属大模型。

3.商业模式:腾讯提供免费的基础服务吸引用户,通过广告和增值服务获取利益,大模型的盈利模式目前处于探索阶段。

通过社交平台引流获取广告和增值服务收益:腾讯的微信和QQ是两个最大的收入引擎,用户黏性极强。微信和QQ通过提供免费的通信服务吸引用户,然后通过广告和增值服务获取收益。腾讯还通过会员服务、表情商店、游戏中心等增值服务获取收益。

广泛的游戏分发渠道获取收益:2023年,腾讯游戏总收入达1799亿人民币,继续蝉联全球游戏公司收入榜的榜首。腾讯拥有国内外众多热门游戏的分发权,并通过游戏内购买、虚拟道具销售等方式获取收益。

大模型聚焦更具付费意愿的B端,盈利模式尚在探索阶段:在To C或To B的路线选择上,腾讯从商业模式角度出发,选择率先从To B发力,因为企业客户对于数字化转型需求更为明确,对大模型出色的语言理解、内容生成等能力,有着更强的付费意愿。大模型的盈利模式目前还在探索阶段,效果逐步呈现。腾讯利用大模型帮助广告主进行智能广告投放,利用大模型技术显著提高了广告系统的推荐效率和准确率。大模型的引入驱动腾讯业务效率不断提升,目前已有超过180个内部业务接入腾讯混元大模型。其中,大模型显著提升广告的精准推荐和归因能力,带动2023年第三季度广告收入同比增长20%。

AI市场拓展

C端市场布局:通过“腾讯元宝”等C端产品,腾讯直接面向消费者市场,提供智能助手服务,提升用户体验和满意度。腾讯还通过“腾讯元器”平台,开启智能体生态,让用户可以创建专属AI智能体,并一键分发到QQ、微信客服等场景,进一步拓展AI技术的应用范围。

B端市场拓展:腾讯云提供高性能的模型、高效率的工具平台、高敏捷的场景应用、高可用的算力基础设施以及强安全的模型环境,构建离产业最近的AI服务。腾讯云推出大模型原生工具链,包括大模型知识引擎、大模型图像创作引擎和大模型视频创作引擎,缩短企业和个人开发者与大模型的距离。针对不同行业的需求,腾讯推出定制化的大模型服务。

AI大模型组织与运营

组织架构:腾讯在AI大模型领域构建了完善的组织架构,以支持其研发、应用和推广。腾讯成立了专门的AI研究机构,如AI Lab,专注于语音识别、自然语言处理、计算机视觉、机器学习等四大领域的研究,为AI大模型的构建提供了坚实的技术基础。腾讯的各个业务部门,如腾讯云、腾讯企点等,与AI Lab紧密合作,将AI技术应用于实际业务场景中。例如,腾讯企点利用AI大模型技术提升智能客服和营销分析的能力。腾讯建立了跨部门协作机制,确保AI大模型技术的研发、测试、应用和推广等各个环节衔接。

运营模式:腾讯自研的大模型接入并应用于多个内部产品,实现了智能化升级,不仅提升了用户体验,也增强了产品的竞争力。腾讯通过腾讯云MaaS将大模型能力应用于各个行业,提供行业解决方案和服务。腾讯云MaaS将混元大模型与腾讯云过去积累的行业解决方案、企业级应用结合,形成一站式服务。企业可以根据自身需求,选择合适的模型,并借助腾讯云平台导入企业专有数据,进行进一步的训练与精调,以满足个性化需求。腾讯在大模型领域保持持续迭代和升级,不断提升大模型的性能和功能。例如,腾讯混元大模型已经迎来多次升级,中文能力整体超过GPT3.5,代码能力大幅提升20%。

AI大模型资本运作

1.投资战略:选择重点领域进行投资。

文娱传媒、游戏、企业服务是腾讯的重点投资领域,分别占比18%、17%、11%。从最近一年的投资布局来看,腾讯投资最多的领域分别是人工智能、医疗健康,其次是游戏、文娱传媒和企业服务。2023年尽管腾讯在整体投资次数上有所减少,但在大模型领域的投资却显著增加。2023年,腾讯的对外投资总金额为183.16亿元,其中企业服务(包含人工智能)领域的投资数量最多。数据显示,腾讯参与了当前已知5家大模型独角兽公司中的3家,参投率达到60%。这些公司包括Minimax、智谱AI等。腾讯在选择投资标的时,注重公司的技术实力、应用场景和市场前景。

  表2 2023年腾讯对外投资的国内外公司所在领域分布

2.投资运作方式:直接投资与战略合作。

腾讯通过直接投资的方式参与大模型公司的融资轮次,如Minimax的A轮融资中,腾讯是唯一的投资方,这种直接投资有助于腾讯快速获取技术资源和市场份额。腾讯在投资时通常采取少数股权的投资策略,这种策略有助于保持被投企业的独立性,也能够降低腾讯的投资风险。据统计,腾讯超过50%的投资都是少数股权的投资,股权比例通常在10%-30%之间。腾讯与多家企业签订了战略合作协议,共同探索大模型技术的应用和落地。例如,与出门问问的合作旨在通过云服务、AIGC应用推广、内容安全等方向深入合作,共同推动腾讯的大模型快速发展。

AI大模型生态体系

1.生态建设与合作伙伴:

腾讯云联合多家客户启动行业大模型共建合作,未来将依托腾讯云领先的行业大模型能力,构建垂直行业模型及应用。例如,在金融、文旅、传媒、政务、教育等多个行业,腾讯云已经与多家企业合作,共同推出了多个行业大模型解决方案。腾讯云将自研的大模型技术、工具和平台等资源开放给合作伙伴和开发者,促进技术的共享和应用。通过提供丰富的技术文档、开发工具、模型库等资源,腾讯云降低了大模型技术的使用门槛,加速了技术的普及和应用。腾讯云合作伙伴数量已经突破11000家,共同服务的客户总数超过200万家。

2.行业大模型生态计划:

腾讯云联合多家生态伙伴共同发起了“腾讯云行业大模型生态计划”,致力于共同推进大模型在产业领域的创新和落地。该计划通过汇聚行业资源,加速大模型技术在各行业的应用和落地。腾讯云推出生成式AI生态计划,聚焦做强生成式AI技术和平台底座,通过开放平台能力与服务、提供技术与市场支持的方式,联合千家解决方案提供商,培育千家服务商和万家代理商,共同推动生成式AI技术深入产业全链条,加速产业智能化升级。腾讯将进一步升级大模型生态计划,和合作伙伴共享产业智能化红利,繁荣大模型生态。

本文作者

占安居

战略发展研究所

一级分析师

硕士研究生,副研究员。主要从事行业研究、市场研究、产业生态研究等工作。

李国钦

战略发展研究所

二级分析师

中级经济师,聚焦产业数字化和数字政府等领域,从事行业洞察研究等相关工作。

来源:天翼智库

相关

网络互联网Cache服务器以太网
本评论 更新于:2024-10-18 3:21:03
在C114 APP中与业内人士畅聊通信行业热点话题!