ChatGPT微调全过程,只需2刀(10分钟)

第一、微调chatgpt

  1. 环境:    pip install –upgrade openai

     

 

  1. 导入api_key:  export OPENAI_API_KEY=”你的api_key”

 

  1. 预处理数据:openai tools fine_tunes.prepare_data -f qa100.json

 

对于数据的预处理,主要包括 去重、小写、增加前后缀和空白,保存为json等。

    • Remove 1 duplicate rows[Y/n]
    • Lowercase all your data in column/key prompt [Y/n]
    • Lowercase all your data in column/key completion[Y/n]
    • Add a suffix separator -> to all prompts[Y/n]
    • Add a suffix ending n to all completions[Y/n]
    • Add a whitespace character to the beginning of the completion[Y/n]
    • Your data will be written to a new JSONL file. Proceed [Y/n]

 

处理后如下截图:

ChatGPT微调全过程,只需2刀(10分钟)

  1. 选择模型,开始微调:  openai api fine_tunes.create -t qa100_prepared.jsonl -m davinci

     

 

底部会出现这个任务的id,  根据id信息,进行第5步,查看。

  1. 查看过程:openai api fine_tunes.follow -i ft-aj4ddUui4poQrP9M2qY7f7vm

 

我的花费大概 2.38刀,输入数据是100多个问答对,耗时几分钟。

ChatGPT微调全过程,只需2刀(10分钟)

现在训练完了,耗时10分钟以内。

  1. 查询所有的模型:openai api fine_tunes.list

 

可以看到微调过的所有信息,输入信息,输出模型名称、花费、默认的超参数等等。

ChatGPT微调全过程,只需2刀(10分钟)

  1. 输入数据格式为json,每行内容为

     

     

     

     

 

{“prompt”:”如何在华为手机上开启暗黑模式?”,”completion”:”要在华为手机上开启暗黑模式,请进入设置-显示与亮度-暗黑模式,并开启开关。从那里,你可以选择特定应用程序或整个系统使用暗黑模式,并设置自动激活的计划。”}

第二、 再来看看ada的花费

110个问答对的输入,4个epoch,模型是ADA, 微调耗时无感,花费 0.03刀。详细信息如截图。

ChatGPT微调全过程,只需2刀(10分钟)

 

 

本网站文章皆为作者授权。发布者:虹七,转载请注明出处:https://ruofanseo.com/chatgpt-fine-tuning/

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 20 6 月, 2023 1:14 下午
下一篇 20 6 月, 2023 1:23 下午

相关推荐

  • GA中的direct定义| 一文说透直接流量

    有温度 有深度 通俗易懂的独立站 就等你来关注 GA中的直接流量定义 Google Analytics 中的直接流量是什么? 当谈到GA分析中的直接流量时,有两个根深蒂固的误解。 它几乎完全是由用户在浏览器中输入网址或书签引起的。这个也是我从前的理解。第二个是它是一件坏事,不是因为它对你网站的性能有负面影响,而是因为它在某种程度上不受进一步分析的影响。大家习…

    26 6 月, 2023
    13200
  • 重大升级!HelloAI机器人(ChatGPT中文版)PC端已上线,移动和PC端会员通用无需重复注册!

    升级目的:提升PC端的用户体验,拓宽ChatGPT使用场景及应用范围。习惯在PC端聊天办公画图的用户更方便啦! PC端登陆网址: www.hello-ai.chat 复制到PC端浏览器打开,记得收藏哦!

    3 7 月, 2023
    21500
  • ChatGPT之父奥特曼宣布70多个插件全面放开, 这意味着ChatGPT的最后一道封印,彻底解除!最强ChatGPT就要来了!

    联网了!联网了!70多种插件加持,联网版ChatGPT来了ChatGPT之父奥特曼官方宣布,5月ChatGPT联网及全部70+插件全面放开,尤其是,开通Plus的账户优先体验权! 这意味着,ChatGPT的最后一道封印,彻底解除。目前支持了70多个插件,PDF、WORD、PPT、各种表格、GIF、图片、 视频等全部包含在内!截图如下: 你想要的插件应有尽有,…

    3 7 月, 2023
    11000
  • AIGC,革命性的生产方式

    ChatGpt的出现,相当于知识型工作者的工业革命 微软CEO纳徳拉:我这辈子,至少在从事技术工作的30年里,chatGPT是我从未见过的技术扩散。也许这一次,对知识型工作者来说,这就完全等同是工业革命。微软每个产品都将接入chatGPT。 ChatGPT(Chat Generative Pre-trained Transformer)是OpenAI在202…

    20 6 月, 2023
    5400
  • ChatGPT温度调整指南:如何调整温度,生成优质内容。

    1. 温度 生成模型,例如chatgpt这样的,抽样都包含随机性,因此每次点击“生成”时,相同的提示可能会产生不同的输出。而温度,就是用于调整随机程度的数字。 2. 生成时如何选择温度 较低的温度意味着较少的随机性; 比如,温度为 0 将始终产生相同的输出。 那么,多少温度合适呢?最好根据自己的问题,来调节。 我们看看后面的栗子(栗子不看版:直接看第6点结论…

    14 4 月, 2023
    40000

发表回复

您的电子邮箱地址不会被公开。 必填项已用 * 标注

联系我们

联系我们

159-7415-9137

在线咨询: QQ交谈

邮件:ruofan1001@gmail.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
关注微信
关注公众号
关注公众号
分享本页
返回顶部