武装多个国民级应用
进入2024，大模型的风向变了。
当初“百模大战”时，只要简单粗暴拿个Demo搞MaaS（模型即服务），也就是让用户直接和大模型交互就足以上牌桌。
但现在，精耕细作搞应用，无论是原生AI应用，还是在已有产品上整合AI功能，成了最新潮流趋势。
就连一向低调神秘的腾讯混元大模型团队，也对外公布了应用落地进展：
这里面有很多为人熟知的“国民级”App，如企业微信、腾讯文档、腾讯会议，都已经被AI全副武装。
还有更多腾讯云SaaS产品，如企业知识学习平台腾讯乐享、电子合同管理工具腾讯电子签等，也都有了AI加持。
腾讯混元大模型去年9月才首次亮相，是否有意在加速赶进度？
面对这个问题，腾讯混元大模型应用负责人张锋的回答就有点“凡尔赛”了：
在国内大模型厂商中，腾讯为何走出这样一条独特的路线？我们与张锋深入聊了聊。
腾讯AI产品，已经在打磨用户体验了
腾讯这么多年来一直以产品见长，AI时代也延续了这种风格。
就拿大模型的门面腾讯混元助手来说，“已经在打磨用户体验了”还真不是一句空话。
比如让它做一道简单的数学题，就可以发现AI在分析思路时非常流畅，还判断出题目中缺少条件，但最后给出结果前却稍有停顿。
这并不符合大模型预测下一个token的运作原理，反倒像是真的在计算。
张锋揭秘，背后其实是AI先写了一段代码，在后端执行再返回结果。
不得不说，这是一种解决大模型计算不准确问题的巧妙思路。但为什么不像GPT-4代码解释器版一样，把代码在前台显示出来？
腾讯混元助手一个重要场景是在微信小程序里使用，移动端展示代码就会显得特别长。张锋认为，现在的策略更符合用户体验习惯。
产品策略有了，但实现起来并不是一件简单的事。首先需要大模型明白当前用户需求需要精准计算，接着要生成合适的代码，最后还要成功通过函数调用来执行代码。
像这样从细节出发，打磨用户体验的例子还有很多。
比如大家很熟悉的腾讯会议，比起简单的AI语音转写和会议纪要总结，也做了不少差异化功能。
人的口头表达免不了停顿磕绊，腾讯会议AI在转写时把“嗯嗯啊啊”这样的部分智能规整，让会后文字记录看起来更整洁。
腾讯会议正在思考的另一个问题是，AI 生成的会议总结格式应该根据会议类型做出适当调整。
有明确主题和议程的会议，与大家畅所欲言的头脑风暴会议，需要的总结的格式就截然不同。因此，除了按时间分章节生成会议纪要外，腾讯会议也将推出按发言人/主题生成会议纪要的功能。
腾讯乐享，作为企业知识协作平台，在AI问答功能中就做到了识别提问者身份，做到回答千人千面。
如果是企业HR问AI有关薪酬结构的问题，就可以得到正面回答，其他岗位问同样的问题AI会拒绝提供。做到在便利的同时还非常安全。
湖南的律师事务所旷真接入了乐享助手去做AI知识库， 员工调研显示，对典型问题的AI回答满意度高达93分，端到端问题准确率达91%。
腾讯电子签，利用AI智能文件审查系统，识别合同风险条款，便于企业把控合同风险。企业对合同的风险控制需求各不相同。腾讯电子签还利用大模型和few-shot技术训练适合客户行业的垂类小模型，实现低成本运行。同时，通过混合云的模式，支持数据、模型的私有化部署，解决效率问题的同时保证合规。
总计400+的应用场景中，像这样的例子还比比皆是，这里不再赘述。
值得探讨的下一个问题是，腾讯如何做到在短时间内把AI产品打磨成熟的。
应用落地完整流程已跑通
根据张锋介绍，腾讯混元大模型研发过程中迭代速度很快，基本一个月就有四到五个版本。
这种速度就来自于和业务应用团队的高效合作，业务团队提出需求并贡献微调数据，研发团队就能有针对性的加强大模型的能力。上线测试过程中不断发现Bad case，也能迅速为大模型补齐短板。
在这种研发时就考虑到实际应用需求的模式下，腾讯混元大模型定位成了“实用级通用大模型”。
在国内大模型中，腾讯混元率先完成MoE（Mix of Experts，专家混合）架构升级，也就是从单个稠密模型升级到多个专家组成的稀疏模型。
MoE架构在激活参数不变情况下，总参数量加大，可以吞吐更多的token，同时，得益于较小的实际激活量，可显著降低训推成本。
这种路线的快速转型，也得益于与早期就了解了业务应用一方需求。
在与业务应用相互打磨的过程中，腾讯混元着重提升了通用模型的三个能力：
指令跟随能力，提出各种各样复杂的结构化长指令，腾讯混元都能按要求执行。
网页及文档理解能力，满足用户经常需要AI来总结长文本内容、减轻认知负的需求。
函数调用能力，也是腾讯混元团队判断大模型下一阶段的趋势之一。
通用大模型只是一个开始。
张锋介绍，在实际应用中，除了MoE主模型，如果调用量很大，从性价比的角度，各业务可以考虑使用不同尺寸的小模型，或者采用根据业务数据微调后的垂直小模型。
微调（Fine-Tuning）是学术界通用叫法，在腾讯内部更愿意用“精调”。
从数据管理到自研AngelPTM训练框架、AngelHCF推理框架，再到模型评测、部署都有一股精耕细作的劲儿。
那么，面对如今 400+场景，以及未来更多业务都要上大模型的情况，研发团队显然无法分出精力逐个精调，如何解决这个问题呢？
答案是通过混元一站式平台，许多需求业务团队自己就能轻松搞定。
混元一站式平台不仅支持通过API接口直接调用混元大模型服务，还把大模型从训练到部署的很多流程都做到可视化，不用写代码只需鼠标点点就能快速完成。
有了混元一站式平台很多AI工程师都不怎么去折腾代码了，而不精通机器学习的业务工程师也能轻松上手操作。
接下来根据一个完整的模型精调到上线的过程，来了解混元一站式平台的能力。
首先是模型方面，平台提供了各种尺寸的基座模型矩阵。又分为通用模型、针对典型场景的优化模型、针对更垂直领域任务的子模型三个层次。
通用模型前面已经介绍过，场景优化模型可以举两个例子：开发Agent类应用，就可以用到强化了函数调用能力的模型来做；在知识密度高的场景，则可以选择优化摘要能力的模型。
如果不光有垂直的应用场景，还有垂直的数据集，混元一站式平台上就可以完成针对私有数据集的二次训练，让垂直子模型不仅有很好的通用理解能力，也很擅长专业领域的知识也很擅长。
接下来便要说到靠混元一站式平台的数据处理能力。
对于来自不同来源、质量参差的数据，从数据清洗流程如质检、去重，到统计调配不同主题数据的比例，再到更困难的数据价值观对齐，去除其中包含的偏见，都能靠自动化手段高效完成。
即使模型上线之后，再发现由于某类数据缺失造成模型某方面能力不强，也能迅速把补充数据投入到持续训练，支持模型的快速迭代。
有了基座模型和数据，就能通过精调来按需求打造专属模型。无论是速度快成本低的Lora精调，还是全参数深度精调都能在混元一站式平台完成。
精调后模型的评测、部署上线也都做到了自动化，特别是部署可以做到一键发布，是混元一站式平台的核心技术之一。
总结来看，相较于传统的机器学习平台，混元一站式平台的最大特点在于：提供预训练好的基座模型、自动化优化数据处理流程，以及精简高效的模型精调和应用集成工作流。该平台通过自动化和智能工具应对海量训练数据、模型定制和部署等挑战，极大地降低了业务接入大模型的门槛，实现了速度快、效果好、接入方式多样的目标。
一言以蔽之：已跑通从模型研发到应用落地的完整流程。
内部流程彻底跑通、并经过400+场景验证，外部开发者和企业可以通过腾讯云上API直接调用腾讯混元能力，接下来就要在助力合作伙伴业务智能化升级上发力了。
One More Thing
在这次交流的最后，量子位把在测试腾讯混元助手过程中发现的，模型仍无法很好解决的问题提交给了团队。
结束后已经是北京时间晚上6点多，比原定的结束时间推迟了近2个小时。
腾讯混元团队大部分成员都准备动身去往机场，要赶回深圳研发总部。
张锋没有与大家一同离开会议室。
简单告别后，他又一屁股坐回沙发上，一心沉醉到琢磨怎么改进Bad case的世界里了。
记者3月18日从兰州大学获悉，该校动物医学与生物安全学院郑海学教授团队解析了非洲猪瘟病毒（ASFV）在猪体内感染的靶细胞，以及在靶细胞内延长感染的机制。这项研究系统阐明了ASFV感染的细胞嗜性、 在今天的故宫，工作人员使用的数字化办公平台名叫“内务辅”，这款应用的开发者，是与故宫博物院合作的钉钉（中国）信息技术有限公司（以下简称“钉钉”）。3月18日，故宫博物院与钉钉战略合作签约仪式在故 据英国《金融时报》网站3月13日报道，科学家们已经在利用人工智能(AI)阐释人体所谓的“黑暗基因组”，并开发一种可能很强大的癌症检测、监测和治疗新方法。美国约翰斯·霍普金斯大学的研 3月21日，记者从陆军军医大学新桥医院获悉，该院普通外科开通甲乳结节AI早筛门诊，利用AI（人工智能）辅助诊断技术，成功为一名甲状腺乳头状癌患者成功实施手术提供了精准决策辅助。该院为重庆首家开通 中新经纬3月22日电 据《日本经济新闻》22日报道，夏普正在讨论缩小液晶显示器业务，夏普已将子公司显示器(SDP、位于市)停产纳入视野。显示器业务持续陷入苦战，成为夏普在2022财年(截至2023年3月)时隔5年陷入最终亏损 “人工智能作为数字新基建重点建设方向，前景广阔，大有作为。今年的政府工作报告更首次提出开展‘人工智能+’行动，无疑将为人工智能技术在国内各行各业的广泛应用开启新篇章。”3月22 。本文链接：揭秘腾讯混元大模型：400+场景落地，协作SaaS产品全面接入http://www.sushuapos.com/show-2-5392-0.html
声明：本网站为非营利性网站，本网页内容由互联网博主自发贡献，不代表本站观点，本站不承担任何法律责任。天上不会到馅饼，请大家谨防诈骗！若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。