有类似 chatGPT 的开源 AI,能通过输入特定的知识集,如法律/医学相关书籍,将其训练成某个领域的专家吗?

2023-02-27 16:20:32 +08:00
 qq1147

如输入法律条文,将其训练成能回答基础问题的 AI 客服

2205 次点击
所在节点    OpenAI
20 条回复
dcty
2023-02-27 16:23:05 +08:00
就怕它胡说八道的时候你都看不出来
qq1147
2023-02-27 16:26:19 +08:00
@dcty 辅以有监督的学习,告诉他什么是对的,什么是错的,这样可行吗?
wuqingwei
2023-02-27 16:58:42 +08:00
已经有这样的 demo 了
TimePPT
2023-02-27 17:24:57 +08:00
思路没问题,行业很多都是这么做的。只是没有 ChatGPT 那么牛逼罢了
kangyue9999
2023-02-27 17:26:55 +08:00
@qq1147 理论很容易,现实很难,很多事情如何定义对与错在实际过程中很难。所以最后只能无限接近那个监督学习的人的思路,最差会成为神棍
contradictspiral
2023-02-27 17:31:00 +08:00
mmdsun
2023-02-27 19:16:17 +08:00
好想法,Mark 一下。
现在用 new bing 可勉强实现,可以跟它说请从 xx 里检索信息来回答我这个问题。当时我贴一份官方文档 wiki 那种,都总结出来,告诉我答案了

或者 Edge 浏览器,右键呼出 bing ,让它阅读当前网页内容,再问它问题。
googlefans
2023-02-27 19:35:11 +08:00
@mmdsun 牛...
ETiV
2023-02-27 19:41:04 +08:00
Twitter 上有人搞了个,叫 copilot hub ,就是垂类 AI
ziyuan
2023-02-27 19:49:52 +08:00
同求一个
MMMMMMMMMMMMMMMM
2023-02-27 19:51:33 +08:00
早就有了,”面孔识别专家“ "图像分类专家" "绘画专家",专业度和效率早就超出人类了,只不过早先没给你用语言表述出来,要看到结果,必须调参,用程序语言和他交流。

后面进化到 prompt 丢名词给他,现在进化成了人类语言,门槛足够低,就出圈了,其实本质上处理那些落地的业务,还是靠造有那一套各领域专业向 AI 。
locoz
2023-02-27 20:12:23 +08:00
你说的其实就是:基于大模型做微调,产生一个垂直行业的定制模型。这是有的,也是可行的。
事实上你自己用 ChatGPT 就能做到一定程度的这种效果,只不过受限于它的记忆容量( token 数),只能做一些比较简单的微调,而且需要每次提问都强调来避免跑偏。
holystrike
2023-02-27 20:17:59 +08:00
nijux
2023-02-27 20:22:48 +08:00
测试了一下 chatgpt 和 newbing 都可以,问它病情相关的问题 ,已经可以回答的和默沙东诊疗手册差不多了
gaobh
2023-02-27 20:24:09 +08:00
你用 gpt 的微调模型训练试试
jfdnet
2023-02-27 20:52:50 +08:00
你的算力够不够
qq1147
2023-02-27 21:42:09 +08:00
@locoz token 数 是指类似于训练数据量的东西吗?对这方面不太懂还请赐教
locoz
2023-02-27 22:01:04 +08:00
NBXX2018
2023-02-28 00:03:47 +08:00
https://platform.openai.com/docs/guides/fine-tuning
官方用法。
别人做的一个用例:OpenAI API 构建自己的 AI 知识管理员 (demo)
https://www.bilibili.com/video/BV1SY411q7ko
https://github.com/sean1832/GPT-Brain
unclebb
2023-03-06 09:31:18 +08:00
gpt-index ?貌似 chatpdf 就是这么做的

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/919567

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX