《数字经济洞察周报》2023年第27期 | 腾讯混元大模型发布 原创

腾讯混元大模型发布

9月7日，2023腾讯全球数字生态大会正式发布“混元大模型”，该模型拥有超千亿的参数规模、超2万亿tokens的预训练语料，可执行强大的中文创作能力、复杂语境的逻辑推理能力、可靠的任务执行能力。

图片来源：腾讯研究院公众号

腾讯集团副总裁蒋杰介绍，腾讯混元大模型从第一个token开始从零训练，掌握了从模型算法到机器学习框架，再到AI基础设施的全链路自研技术。从2021年开始，腾讯先后推出千亿和万亿参数的NLP稀疏大模型，打破CLUE三大榜单纪录，实现在中文理解能力上的新突破。

目前，业界大模型在场景中的应用依然有限，主要集中在容错率高、任务简单的休闲场景。腾讯在算法层面进行一系列自研创新，提高模型可靠性和成熟度。针对大模型容易“胡言乱语”的问题，腾讯优化了预训练算法及策略，让腾讯混元大模型的幻觉相比主流开源大模型降低了30%至50%；通过强化学习的方法，让模型学会识别陷阱问题；通过位置编码优化，提高了超长文的处理效果和性能；提出思维链的新策略，让大模型能够像人一样结合实际的应用场景进行推理和决策。

得益于全链路自研技术，腾讯混元大模型能够理解上下文的含义，并且有长文记忆能力，可以流畅地进行专业领域的多轮对话。除此之外，还能进行文学创作、文本摘要、角色扮演等内容创作，做到充分理解用户意图，并高效、准确的给出有时效性的答复。

腾讯会议基于腾讯混元大模型打造了AI小助手，只需要简单的自然语言指令，就能完成会议信息提取、内容分析等复杂任务，会后还能生成智能总结纪要。

图片来源：腾讯研究院公众号

在文档处理方面，腾讯混元大模型支持数十种文本创作场景，在腾讯文档推出的智能助手功能中已有应用。同时，腾讯混元还能够一键生成标准格式文本，精通数百种Excel公式，支持自然语言生成函数，并基于表格内容生成图表，目前这些功能正在内测阶段，将在成熟后面向用户开放。

在广告业务场景，腾讯混元大模型支持智能化的广告素材创作，能够适应行业与地域特色，满足千人千面的需求，实现文字、图片、视频的自然融合。此外，基于腾讯混元大模型的能力，广告智能导购能够帮助商家在企业微信等场景，提升服务质量和服务效率。

图片来源：腾讯研究院公众号

百度智能云发布四大行业解决方案及多项AI原生应用

9月5日，百度智能云千帆大模型平台2.0在2023百度云智大会发布。本次重大升级，千帆平台纳管的国内外主流大模型达到42个，还预置了41个高质量有行业特色的数据集，预装知识问答、客服对话、代码助手等10个精选应用范式，大幅降低企业使用、训练和推理大模型的门槛。

百度智能云率先在政务、金融、工业、交通四大行业打造千帆平台产业样本间，面向四类伙伴发布大模型生态伙伴计划，推动构建大模型时代的生态体系。百度智能云此次发布基于文心大模型重构的行业解决方案，率先推动了大模型早期产业化落地，助力企业解决大模型应用问题。此次百度智能云发布的四大行业解决方案九州、开元、开物、ACE 3.0，分别对应数字政府、金融、工业、智能交通四大行业领域。

数字政府解决方案——九州

九州可以帮助城市管理者只需通过简单的自然语言指令即可获得更精细的城市治理处置建议，还可以帮助老百姓获得专属办事助手，大大提高办事服务的效率和满意度。

金融解决方案——开元

开元打造的各类岗位助手可以高效处理信息和数据，使金融分析师的时间真正用在业务分析上。

工业解决方案——开物

开物可利用更少的数据样本、更短的时间构建出产线智能应用，帮助管理者通过自然语言交互方式获取生产经营情况做出决策并执行。还可以辅助地方政府做“强链、补链”分析决策，促进产业链全局优化。帮助垂直行业特定场景赋能，并实现从“产线智能”到”企业智能”再到“产业链智能”的跨越和提升。

智能交通解决方案——ACE 3.0

ACE 3.0利用大模型强大知识压缩能力，将车、路、云、图的基本能力和交通全要素进行了聚合和泛化升级，打造交通大模型，提升交通感知、认知、预知能力。

为了让企业快速用上大模型，百度智能云推出11款企业通用场景的AI原生应用，覆盖服务营销、办公、安全生产三大领域。

服务营销领域——“曦灵”数字人平台

“百度智能云曦灵”数字人平台进行“形”、“神”两大升级。在形象方面，仅用原来三分之一的成本、十分之一的制作周期即可渲染出好莱坞级别的高清3D数字人，成为全行业唯一可以“小时级”实现超写实数字服装制作和穿着的平台。在人设及灵魂上，升级后的数字人将拥有强大的通识知识，并融会贯通文旅、电商等各领域专业知识，塑造个性化人设。

办公领域——企业搜索引擎“甄知”

在办公领域，甄知可以跨模态、跨应用迅速找到内容，也可以实现“知识找人”，向员工推送可能感兴趣的文档辅助员工持续学习。

安全生产领域——安全生产智能助手“度安安”

在安全生产领域，度安安基于老师傅多年积累的安全生产经验，归类总结整理各种安全预警，自动生成巡检工单，让管理人员快速知晓全局安全态势。

图片来源：百度官方公众号

2023 Google开发者大会在上海举办

9月6日，2023 Google开发者大会在上海拉开帷幕，为期两天的时间里，来自 Google 全球不同领域的专家分享并深入解读Google 面向开发者最新的技术和产品，以及Google在数字人才培养方面的努力，旨在帮助中国开发者提升开发效能、加快交付速度、提高人才素养，在开拓海外市场的进程中，取得更大的成功。

图片来源：2023 Google开发者大会

图片来源：2023 Google开发者大会

图片来源：2023 Google开发者大会

Vertex AI包含全面的AI工具套件、Google Cloud基础设施、AI平台及AI解决方案。Google提供多种基础模型，包括PaLM-聊天、Imagen-图片生成、Embeddings-文本和图片等方面。文本模型的输入长度从8000个Token增加到32000个Token，PaLM 2正式支持38种语言。Codey-代码生成能力，对于支持的主流语言，代码生成和代码聊天的质量提升25%。Vertex AI搜索仅涵盖企业自有数据的搜索引擎，Vertex AI对话降低聊天机器人的开发难度。

图片来源：2023 Google开发者大会

WebGPU可以充分释放设备的GPU潜能，让Web应用充分发挥本地算力性能，并实现新的AI应用能力。WebGPU可以同时应用于云端和本地应用端的算力，且运行处理速度显著提升。Flutter3.13 加快Flutter Web的速度，改进无障碍功能，与Chrome自动填表等浏览器集成进行改进，使得开发者构建更快、更流畅的Web应用程序。