百度推出强化知识的基础模型ERNIE 3.5,迈向巨大飞跃

资讯1年前 (2023)更新 花花
2,719 0 0

新闻要点:

  • 百度发布ERNIE Bot v2.1.0,使用ERNIE 3.5作为核心引擎。
  • ERNIE 3.5的重要特点是插件功能,包括“百度搜索”和“ChatFile”等。
  • ERNIE 3.5的推理吞吐量较ERNIE 3.0提升了17倍。
百度推出强化知识的基础模型ERNIE 3.5,迈向巨大飞跃

百度近日宣布推出基于强化知识的基础模型ERNIE的最新版本——ERNIE 3.5。该版本在测试中取得了重要突破,综合能力得分超过了ChatGPT(3.5),并在多个中文语言能力方面超越了GPT-4,据中国科学日报报道。

在ERNIE Bot(基于ERNIE 3.0构建的百度大型语言模型)公测发布仅三个月后,ERNIE 3.5在效能、功能和性能方面都取得了显著的提升。百度首席技术官王海峰博士表示,这些改进在创意写作、问答、推理、代码生成以及训练和推理性能上都有所体现。

与ERNIE 3.0相比,ERNIE 3.5的训练吞吐量提高了两倍,推理吞吐量更是提升了惊人的17倍。这些升级将大大加快模型的迭代升级速度,降低训练和使用成本,从而提升用户体验。

ERNIE 3.5的一个显著特点是插件功能。例如,内置的默认插件“百度搜索”赋予ERNIE Bot实时生成准确信息的能力。另一个名为ChatFile的插件实现了长文本摘要和问答功能。王博士解释说,ERNIE 3.5通过插件扩展了模型的能力。

未来,ERNIE Bot将添加更多来自百度和第三方的高质量插件。百度也致力于向第三方开放插件生态系统,赋予他们基于ERNIE构建独特应用的能力。

王博士介绍说,在ERNIE 3.5中,百度采用了PaddlePaddle的前沿策略,包括自适应混合并行训练技术和混合精度计算。这些改进,结合优化的数据源和数据分布,加速了模型的迭代速度,增强了模型的效能,并确保了其安全性。

除了以前的知识增强和检索增强,ERNIE 3.5还引入了一种名为“知识片段增强”的技术。具体而言,该技术分析用户查询并识别相关的知识片段,然后利用知识图谱和搜索引擎找到相应的答案,并利用这些片段生成提示。这一技术显著增强了模型对世界知识的理解和利用能力,从而带来了显著的任务改进。

此外,在逻辑推理、数学计算和代码生成方面,ERNIE 3.5通过大规模逻辑数据构建、逻辑知识建模、粗粒度和细粒度语义知识的结合以及符号神经网络的运用,进一步提升了模型的推理能力。

目前,ERNIE Bot处于公测阶段,自5月23日起已升级至2.0版本。最新的更新版本ERNIE Bot v2.1.0于6月21日发布,增加了新的ChatFile插件,并在数学计算和创意写作方面改进了功能。这些增强功能均由ERNIE 3.5提供支持。

王博士表示,测试用户可以随时访问服务,体验ERNIE 3.5的性能。

王博士表示:“任何涉及语言、文本或代码的应用都有潜在可能利用ERNIE Bot。”他进一步解释说,许多应用已经在使用ERNIE Bot,涵盖了智能办公、编码、营销、媒体、教育和金融等领域。例如,百度的智能办公平台Infoflow推出了诸多新功能,如“智能摘要”、“智能洞察”和“超级助手”,都源自ERNIE Bot的能力。

在编码方面,百度的智能编码助手Comate利用ERNIE Bot的功能,根据自然语言提示生成相应的代码片段。此外,它还可以根据注释在代码编辑器中自动生成代码,从而提高开发效率。

(编辑:XXX)

观点:百度推出强化知识的基础模型ERNIE 3.5,对人工智能领域具有重要意义。这一创新将带来更高效、功能更强大的语言处理和应用能力,为各行业带来更多创新和发展机遇。百度在持续推进人工智能技术的同时,也将插件生态系统开放给第三方开发者,鼓励合作与创新。这种积极的探索和进取精神,有助于推动人工智能技术的普及和应用,为社会带来积极的正能量。

© 版权声明

相关文章

分享