开源数字人Fay

2023-05-16

原文:别再因AI焦虑,这波年轻人已经用“中国版ChatGPT”创业成功了|数字人|AI|创业_新浪新闻

开源:GitHub - TheRamU/Fay: Fay是一个完整的开源项目,包含Fay控制器及数字人模型,可灵活组合出不同的应用场景:虚拟主播、现场推销货、商品导购、语音助理、远程语音助理、数字人互动、数字人面试官及心理测评、贾维斯、Her。 开源项目,非产品试用!!!

gitee:fay: 这是一个数字人项目,包含python内核及ue数字人模型,可以用于做数字助理及自动直播,又或者作为你的应用入口也很帅

导读:ChatGPT腾空出世以来,每天都有扑面而来的新进展、新突破。

  这恍如隔世的几个月里,它如龙卷风一般卷向了每个人。

  国内外大厂纷纷跟进研发,以ChatGPT为代表、AI大模型为基座的AIGC技术很快将遍地开花。普通开发者能借助这场风浪做些什么?

  这个问题就像一堵墙,若不破墙,将阻碍我们寻找风口,进而顺势而起。

  通用人工智能时代已开启,我们心怀好奇,甚至略带焦虑去拥抱技术。

  若要做新时代的开创者,我们还要把自己的智慧注入其中,智慧的体现往往就在于创新。

01

  给居委会搞个“数字人”,

  一场基于AI大模型的“名利双收”

  在思考我们该用AIGC技术做些什么的问题时,已经有这么一群先行者用中国版类ChatGP“源大模型”开创了适合中国大模型的商业模式探索。

  近年来,无论技术风向如何变化,依然有一概念屹立不倒,那就是“数字人”。

  数字人是多种前沿科技的集大成者,作为AIGC具象化的一种展现形式,也是WEB3.0和元宇宙的超级入口。

  更重要的是,它是人类对未来想象中的独立个体,人人都可以拥有数字人,它可以出现在任何角落。

  数字人也会成为千行百业塑造竞争优势的新生产力,实现虚实融合,拥有巨大商业价值。

  然而“颜值经济”并非当下数字人商业化的主流,如今随着计算机视觉等技术的发展,AI“捏脸”应用随处可见,“捏”出符合自身审美的数字人已不是难题。

  美貌的皮囊易得,有趣的灵魂难寻,数字人的有趣灵魂价值一在实用,二在交互。

  基于源大模型,一群开发者带着“有趣的灵魂”瞄准了传统社区智慧化转型的商业蓝海。

  如今社会层面,街道建设愈发被重视,基层社区工作者也在防疫工作中担当了重要角色,同时面临了更大的工作量。为了给基层社区工作者持续减负增能,临汾路街道推出了街道首个政务基层社工领域AI对话机器人“临小助”。

  与最近大火的ChatGPT有三点类似之处,一是“临小助”使用的也是Transformer模型与NLP处理技术(源大模型),二是都能架构在成熟度推广度很高的微信平台,三是都提供24小时在线服务。

  街道不少社区工作者戏称“临小助”是自己24小时在线的“数字助理”。

  随叫随“到”,记忆力还非常好——临小助”收录了民政、人社、房管等15个部门198项面向居民的服务类政策,工作人员通过微信输入问题或者关键词,马上就能得到“正确答案”。

  也就说,198个政策资料,最终变成了统一的“一屏通”。通过AI对话机器人“最强大脑”储存的198个受理事项,为实现居民个人政务办事服务“就近办”提供了能力支撑,帮助居委会用更短时间、以更高质量承担起事务中心延伸办的新任务。

  基于强大的源大模型,“临小助”的能力不仅限于问答,更在于情景生成式“对话”。

  “临小助”可以随时随地为基层社区工作者提供沉浸式、针对性的一对一群众工作能力培训,换句话说:提前演练,社恐福音。

  目前已经开设了加装电梯、业委会换届等8堂社区治理高频情景对话课程,社区工作者通过手机载体与“临小助”进行互动对话形式,提高接待群众服务群众的经验。

  而对街道来说,要达到相同的培训覆盖率与效果,传统线下模式可能需要数月时间,而运用AI对话机器人只要短短十分钟,反复练习、多场景练习因此成为常态,培训效率大幅提升。

  这项“数字人”产品也已经进行商业化探索,已在上海市静安区临汾路街道、嘉定区安亭镇落地。

  这也只是开始,智慧社区商业前景非常广泛:按民政部网站数据,截至2020年底,中国共有38741个街道(镇、乡)级政府。按15%的渗透率计算,基础服务部分市场规模每年就十亿级市场,最寻常的地方可谓遍地黄金。

02

  “一键构建专属你的数字人”:

  开源生态的力量,降低开发门槛

  拥有广阔的落地场景AI大模型+数字人的模式确实能实现高质量创业。

  但“捏人”的门槛,会将一些技术基础薄弱的创新者拒之门外吗?

  开发者社区的开发者打造了“一键构建专属你的数字人”的数字人生成平台—— Fay。

  这个平台包含Python内核及UE数字人模型,开发人员可以利用该项目简单地构建各种类型的数字人或数字助理,可灵活组合出不同的应用场景:虚拟主播、现场推销货、商品导购、语音助理、远程语音助理、数字人互动、数字人面试官及心理测评、贾维斯、Her。

  该项目各模块之间耦合度非常低,包括声音来源、语音识别、情绪分析、NLP处理、情绪语音合成、语音输出和表情动作输出等模块。

  Fay控制器核心逻辑

  每个模块都可以轻松地更换。这套架构相当于给只能文字聊天的ChatGPT装上好看的皮囊,并更像真人般能够实时对话,使ChatGPT更像人。

  源大模型如同ChatGPT,在整个数字人流程中充当大模型的大脑和灵魂,能输出智能实施的对话。

  这套系统最大的价值在于,为数字助理(语音助理)这一类型产品提供了一个新的架构思路,全流程一键式打通从打造“好看的皮囊”到“有趣的灵魂”,同时可以实时语音交互的数字人。

  而且Fay并不仅限于智能音箱等特定的语音终端,Fay只需要运行在个人的PC或者移动设备上,就可以时刻与“ta”通讯。

  目前,Fay已经实现完整开源,助力更多有意愿打造自身数字人的人们。

  例如,实现数字人互动,可以根据Fay控制器进行一系列设置:麦克风输入源开启、展板播放关闭、填写性格Q&A,合成数字人;若是应用在更大平台,例如抖音虚拟主播,可以启动bin/Release_2.85/2.85.exe , 根据Fay控制器进行一系列设置(抖音输入源开启、展板播放关闭),结合抖音伴侣,生成数字人。

  GitHub链接:

  https://github.com/TheRamU/Fay

  数字人的未来远远超出仅作为人类的替代,当通用人工智能充分发展,数字人或被当做虚拟世界独立个体,,甚至把它作为生活中的主体当成独立的人格。

  而Fay之所以能“造福”大家,其开源要追溯到“源大模型”的开源。

03

  搞钱新范式,

  开源大模型生态与商业化的互利互助

  源1.0大模型发布时便问鼎全球最大规模的中文AI模型,其参数规模高达2457亿,训练采用的中文数据集达5000GB,相比GPT-3模型1750亿参数量和570GB。

  “源”开源开放构建了大模型应用开发新生态,包括高质量中文数据集、开源模型训练代码、推理代码和应用代码等,可以帮助开发者节省各类研发开支。

  如此,开发者无需关心底层技术,设置无需配置编程环境,就可以直接将应用构建于AI大模型的能力之上,在降低开发门槛的同时,让开发人员能够将更多的精力聚焦核心业务逻辑。

  目前”源”已全面开源开放,开放模型API、开源高质量中文数据集、模型训练代码、推理代码、应用代码、面向AI芯片的模型移植开发代码,开放平台已服务超4000名行业开发者,覆盖互联网、金融、教科研和自动驾驶等行业领域,大大降低了不同行业不同任务的AI应用开发门槛。

  正是因为这种算法基础设施的开源,使得这些开发者以极少的团队成员便能开发出成熟商业化的产品,并成功创业。

  开源之间的互利与反哺,往往能催生创新的生生不息,创新更是能转换成商业价值。

  源开发者社区开发者郭泽斌开发的“一键式构建专属数字人”的开源架构,也已被深圳某公司应用到平板中充当自个人助力,产生商业价值。一些主打情感陪伴的儿童玩具公司也从这套架构中挖掘出巨大商业价值,在儿童玩具中搭载这套开源架构,目前已投入生产,即将上线售卖。

  这些开发者用“数字人”开拓了以大模型开源生态为基础的全新商业模式,当然这是一个缩影。

  大模型开源,给开发者带去创业和商业机遇。就像安卓生态,未来大模型开源生态也将遍地开花,创新项目也会如同安卓生态里的各类APP般不断涌出,孵化更多商业价值应用,加速AI产业变革。

  广阔天地,大有作为。

  4.26大模型开发者沙龙👇一键预约

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

开源数字人Fay 的相关文章

  • 【scikit-learn】交叉验证及其用于参数选择、模型选择、特征选择的例子

    xfeff xfeff 内容概要 训练集 测试集分割用于模型验证的缺点K折交叉验证是如何克服之前的不足交叉验证如何用于选择调节参数 选择模型 选择特征改善交叉验证 1 模型验证回顾 进行模型验证的一个重要目的是要选出一个最合适的模型 xff
  • 【scikit-learn】网格搜索来进行高效的参数调优

    xfeff xfeff 内容概要 如何使用K折交叉验证来搜索最优调节参数如何让搜索参数的流程更加高效如何一次性的搜索多个调节参数在进行真正的预测之前 xff0c 如何对调节参数进行处理如何削减该过程的计算代价 1 K折交叉验证回顾 交叉验证
  • 【scikit-learn】评估分类器性能的度量,像混淆矩阵、ROC、AUC等

    xfeff xfeff 内容概要 模型评估的目的及一般评估流程分类准确率的用处及其限制混淆矩阵 xff08 confusion matrix xff09 是如何表示一个分类器的性能混淆矩阵中的度量是如何计算的通过改变分类阈值来调整分类器性能
  • 【Scala-ML】使用Scala构建机器学习工作流

    引言 在这一小节中 xff0c 我将介绍基于数据 xff08 函数式 xff09 的方法来构建数据应用 这里会介绍monadic设计来创建动态工作流 xff0c 利用依赖注入这样的高级函数式特性来构建轻便的计算工作流 建模过程 在统计学和概
  • 【Scala】响应式编程思想

    何为响应式编程 响应式编程是一种面向数据流和变化传播的编程范式 xff0c 数据更新是相关联的 这意味着可以在编程语言中很方便地表达静态或动态的数据流 xff0c 而相关的计算模型会自动将变化的值通过数据流进行传播 以响应式编程方式进行思考
  • 【函数式】纯函数与替代模型

    纯函数 一个函数在程序执行的过程中除了根据输入参数给出运算结果之外没有其他的副作用影响 xff0c 我们可以把这类函数称为 纯函数 纯函数由于不依赖外部变量 xff0c 使得给定函数输入其返回结果永远不变 xff0c 比如整数的加法函数 x
  • C/C++ 常用程序库

    C C 43 43 程序库 https zhuanlan zhihu com p 98056565 来几个不常见但是很变态的库吧 bundle 把几乎所有常见的压缩库封装成了一个库 接口完全统一 想用哪个用哪个 就一个h和一个巨TM大的cp
  • git 提交的时候报错:error: 'flutter_app/' does not have a commit checked out

    如果有朋友遇到这个问题 xff0c 请不用担心 xff0c 因为这个问题非常简单 xff01 出现的情况就是 xff0c 你在一个github仓库里面 xff0c 放进来一个文件夹 xff0c 但是文件夹里面还有文件夹 xff0c 而且还没
  • Fragment中使用viewLifecycleOwner/getActivity/this

    观察liveData使用生命周期 如图 xff1a 当liveData想在fragment里观察的时候 xff0c 可以使用getActivity this getViewLifecycleOwner getActivity不必说 xff0
  • Android的FileProvider使用解释

    前言 从Android7 0 xff08 N xff09 开始 xff0c 严格执行 StrictMode 模式 xff0c 也就是说 xff0c 将对安全做更严格的校验 不允许在 App 间 xff0c 使用 file 的方式 xff0c
  • STM32G0 串口编程

    利用USB转串口调试 xff0c 烧写单片机程序 1 打开STM32 CubeProgrammer软件设置启动配置 2 让程序从system Flash启动 xff08 1 xff09 勾选 DTR 勾选RTS 取消勾选RTS 2 取消勾选
  • Android使用SystemProperties基础了解

    安卓系统属性是以键值对的形式存在 xff0c 一般放在system prop xff0c build prop xff0c default prop等文件中 这些属性可能是进程状态 xff0c 资源使用情况 xff0c 系统特有属性等等 创
  • 使用Android Studio打包Module成jar包

    现在假设我们想打包一个module成jar包的形式给其它应用调用 xff1a vrservice 1 0 jar 步骤1 在Module项目的build gradle文件中做如下配置 xff1a 生成jar包的配置如下 xff1a def
  • C++无符号整型与有符号整型变量的运算-不简单

    示例分析 xff1a include lt iostream gt include lt stdio h gt struct Result char c char d unsigned char e Result getChar int x
  • C++虚继承下的类大小

    前言 带有虚函数的虚继承的对象模型比较复杂 xff0c 所以单独整理一下 其实关于计算类大小是C 43 43 的一大易错点之一 即便是我在这儿理了半天 xff0c 也不一定就是正确的 xff0c 如果大佬看到本文 xff0c 发现我很多错误
  • 解决android的跑马灯频繁刷新的问题

    先贴一下跑马灯效果的代码 xff0c 这里我是继承的TextView xff1a public class MarqueeTextView extends AppCompatTextView public MarqueeTextView C
  • 关于第一次将STM32与电脑连接情况

    安装了Keil xff08 ARM xff09 版本之后 xff0c 不管是自己编程 xff0c 还是配套的程序运行 我们都想把它下载到STM32芯片里面 xff0c 在板子上运行 这里介绍几种方法 1 用J LINK下载调试 这个工具 x
  • [java语言]——InetAddress类的getByName()方法

    InetAddress 表示互联网协议 xff08 IP xff09 地址 InetAddress getByName 34 www 163 com 34 在给定主机名的情况下确定主机的IP地址 如果参数为null 获得的是本机的IP地址
  • Java中Calendar.DAY_OF_WEEK、DAY_OF_MONTH需要减一的原因

    Java中对日期的处理需要用到Calendar类 xff0c 其中有几个方法在使用时需要新手注意 1 在获取月份时 xff0c Calendar MONTH 43 1 的原因 xff08 Java中Calendar MONTH返回的数值其实
  • C语言学习笔记(三)(头文件的结构顺序)(类型不完整的解决方法)

    目录 前言原则结构推荐结构图方便的结构 类型不完整的原因和解决方法 xff1a 定义了不定长数组结构体的定义放在了头文件里面解决方法1 xff08 当采用使用时包含特定头文件时 xff09 xff1a 解决方法2 xff08 当一个头文件包

随机推荐

  • S2

    int count 61 0 double lat 61 55 8241 double lng 61 137 8347 double radius 61 900 半径 double capHeight 61 2 S2 M PI radius
  • 从STM32F407到AT32F407(一)

    雅特力公司的MCU有着性能超群 xff0c 价格优越的巨大优势 xff0c 缺点是相关资料少一些 xff0c 我们可以充分利用ST的现有资源来开发它 我用雅特力的STM32F437开发板 xff0c 使用原子 stm32f407的开发板自带
  • vue-java分离

    import com google gson Gson import io renren common utils HttpContextUtils import io renren common utils R import org ap
  • java学习

    莫求全 有效努力 定时出结果 架构设计DDD 微服务介绍 https www kancloud cn qingshou aaa1 2667225 https www cnblogs com chencan p 16042197 html h
  • CentOS6.5添加虚拟IP(VIP)

    使用keepalived 实现Nginx高可用时 需要用到这项技术 虚拟ip在高可用中的作用后续再说 今天看看怎么给服务器配置虚拟IP xff0c 其实也就是多分配个IP地址 首先查看一下现有网卡的IP地址 xff0c 用root特权运行下
  • 微服务Spring Cloud例子

    Spring Cloud简介 Spring Cloud是一个基于Spring Boot实现的云应用开发工具 xff0c 为开发者提供了在分布式系统 xff08 配置管理 xff0c 服务发现 xff0c 熔断 xff0c 路由 xff0c
  • 美邦威集成呼吸墙饰

    http www mbwqs cn 湖北光大新型环保装饰材料有限公司 美邦威集成呼吸墙饰 生产销售中心 xff1a 湖北汉川经济开发区光大工业园 光大材料 210590 上海股交所挂牌
  • activemq--MASTER SLAVE+BROKER CLUSTER 实践(二)

    鱼与熊掌兼得法 完美解决方案 我们知道 xff1a master slave模式下 xff0c 消息会被逐个复制而cluster模式下 xff0c 请求会被自动派发 那么可不可以把两者集成起来呢 xff1f 答案是有的 xff0c 网上所谓
  • Dubbo超时和重连机制

    dubbo启动时默认有重试机制和超时机制 超时机制的规则是如果在一定的时间内 xff0c provider没有返回 xff0c 则认为本次调用失败 xff0c 重试机制在出现调用失败时 xff0c 会再次调用 如果在配置的调用次数内都失败
  • Sharding-JDBC简介

    一般 xff0c 线上系统的业务量不是很大 xff0c 比如说单库的数据量在百万级别以下 xff0c 那么MySQL的单库即可完成任何增 删 改 查的业务操作 随着业务的发展 xff0c 单个DB中保存的数据量 xff08 用户 订单 计费
  • 1024

    听说今天发帖能有1024勋章 xff1f
  • 神奇!明明是 socket,被我玩成了 http!

    颓废青年 xff0c 快出来挨打 xff01 点击上方 Java极客技术 xff0c 选择 设为星标 后台回复 java xff0c 获取Java知识体系 面试必看资料 资料会持续更新 xff0c 已更新第四次 xff01 文章精品专栏 记
  • python画图程序

    usr bin python coding utf 8 import wx import wx lib buttons as buttons import wx adv as adv import wx lib colourselect a
  • 升级到tensorflow2.0,我整个人都不好了

    版本升级到 tensorflow 2 0 的悲惨经历 没事别升级 Tensorflow 2 0发布已经有一段时间了 xff0c 各种基于新API的教程看上去的确简单易用 xff0c 一个简单的mnist手写识别只需要下面不到20行代码就OK
  • 修改conda环境和缓存默认路径

    默认情况下 xff0c conda 创建的新环境 以及过往安装的模块缓存都存储在用户目录下 xff0c 这一点不会在 conda xff08 user specific xff09 配置文件 HOME condarc 中体现出来 xff0c
  • 融合人体姿态估计和目标检测的学生课堂行为识别

    融合人体姿态估计和目标检测的学生课堂行为识别 参考网 摘要 xff1a 在課堂教学中 xff0c 人工智能技术可以帮助实现学生行为分析自动化 xff0c 让教师能够高效且直观地掌握学生学习行为投入的情况 xff0c 为后续优化教学设计与实施
  • Python实例详解pdfplumber读取PDF写入Excel

    一 Python操作PDF 13大库对比 PDF xff08 Portable Document Format xff09 是一种便携文档格式 xff0c 便于跨操作系统传播文档 PDF文档遵循标准格式 xff0c 因此存在很多可以操作PD
  • 如何使用ChatGPT API训练自定义知识库AI聊天机器人

    原文 xff1a 如何使用ChatGPT API训练自定义知识库AI聊天机器人 闪电博 在我们之前的文章中 xff0c 我们演示了如何用ChatGPT API建立一个AI聊天机器人 xff0c 并指定一个角色来进行个性化处理 但如果你想在自
  • 哈工大团队开源医学智能问诊大模型 | 华佗: 基于中文医学知识的LLaMa指令微调模型

    原文 xff1a CVHub 门头沟学院AI视觉实验室御用公众号 学术 科研 就业 185篇原创内容 公众号 Title HuaTuo Tuning LLaMA Model with Chinese Medical Knowledge PD
  • 开源数字人Fay

    原文 xff1a 别再因AI焦虑 xff0c 这波年轻人已经用 中国版ChatGPT 创业成功了 数字人 AI 创业 新浪新闻 开源 xff1a GitHub TheRamU Fay Fay是一个完整的开源项目 xff0c 包含Fay控制器