？？？？？？？？一、二狗问答(AI对话)
2023年11月20日 每日一猜答案：。 答案：ABC。 每日一猜答案分析：
二狗猜语音答案,微信问二狗什么问题最好玩,帮我搜一个二狗子,二狗之谜语Yan-英杰的主页
悟已往之不谏 知来者之可追
C++程序员，2024届电子信息研究生
目录
什么是ChatGPT镜像？
亲测：
? 一、二狗问答(AI对话)
?二、AiDuTu
? ? ? 三、WOChat
? ? 四、ChatGPT(个人感觉最好用)
? 我们可以利用ChatGPT干什么？
? ? 一、三分钟制作一篇PPT
? 二、? 打造智能问答助手
? 三、提高个人对话的效率
? ? 四、开发智能客服机器人
在众多的AI技术中，自然语言处理一直是备受关注的热门领域。而在自然语言处理技术中，对话生成就成为了一个重要的方向。ChatGPT是最近备受关注的一款对话生成模型，它基于GPT-3架构，是当前最大、最先进的语言模型之一。
那么，什么是ChatGPT的镜像呢？首先，我们需要了解一下什么是镜像。在计算机术语中，镜像指的是将一个系统或应用程序的完整副本复制到另一个计算机或服务器上，以实现远程访问或备份。对于某些原因，用户不得不使用镜像来获取所需的数据或软件。
ChatGPT的镜像，是指将ChatGPT模型和相关资源复制到另一个可以访问的服务器上。这种方式有助于解决访问ChatGPT的问题，尤其是在网络环境不可靠或存在其他访问限制的情况下。简而言之，ChatGPT的镜像提供了一个备份或替代品，以便用户可以在任何地方访问ChatGPT服务。
? 链接：二狗问答 - 人工智能对话
? 链接:AiDuTu
? 链接:WoChat-支持文字、翻译的聊天机器人
? 链接:ChatGPT中国站 - 国内镜像，稳定高效
还有一些尚未使用过的镜像，一并分享
AI EDU
https://theb.ai
https://poe.com
https://dev.【【微信】】.top
https://chat.uue.me
https://chat2.geekr.dev
https://qachat.vercel.app
https://ai.bo-e.com/
https://chat.forchange.cn/
https://gitopenchina.gitee.io/gpt
https://askbot.club/chatgpt/
https://gpt.getshare.net/
http://chatai.fyi/
? ? 这是我写过的一篇博客
ChatGPT+MindShow三分钟生成PPT
? 链接:http://t.csdn.cn/LO4N9
? 三分钟即可生成一篇PPT模板，同时格式任选
? 这也是我之前写过的一篇博客
ChatGPT+飞书，打造智能问答助手
? 链接：http://t.csdn.cn/3sPFU
在个人生活或工作中，我们经常需要与他人进行交流，进行问答互动。而ChatGPT镜像可以帮助我们快速生成回复，提高交流效率。比如，在日常工作中，我们可能要回复很多客户提出的问题，利用ChatGPT镜像，我们可以迅速生成回复，提高工作效率。
? 链接：WoChat-支持文字、翻译的聊天机器人
随着人工智能的不断发展，智能客服机器人逐渐成为企业减少人力成本、提高服务水平的重要手段。通过使用ChatGPT镜像，企业可以自主开发智能客服机器人，并将其部署到自己的网站或应用程序中。开发过程中，ChatGPT镜像可以提供丰富的训练数据和技术支持，加速机器人的开发和部署。
目前，有很多ChatGPT的镜像服务可供选择，用户可以根据自己的需求和环境选择适合自己的版本。其中一些服务甚至在性能和功能方面与原始的ChatGPT模型相当。此外，这些镜像服务通常还提供了丰富的教程、示例和技术支持，使得用户能够更加轻松地使用ChatGPT模型进行对话生成。
总之，ChatGPT的镜像是一种非常有用的技术手段，可以帮助用户在任何地方访问ChatGPT服务，并提高数据传输速度和安全性。通过使用ChatGPT的镜像服务，用户可以更加方便地使用这个强大的自然语言处理模型，从而实现更加高效、准确和智能的对话生成体验。
导读与检测中考版电子书全年级
OpenAI近期发布聊天机器人模型ChatGPT，迅速出圈全网。它以对话方式进行交互。以更贴近人的对话方式与使用者互动，可以回答问题、承认错误、挑战不正确的前提、拒绝不适当的请求。高质量的回答、上瘾式的交互体验，圈内外都纷纷惊呼。
为什么有如此高的评价？理论支撑是什么？背后的技术原理是什么？待解决的问题和方案有哪些？资本怎么看待这件事？本文的目标是将这些问题详细的给大家讲清楚。
ChatGPT本质是一个应用在对话场景的语言模型，基于GPT3.5通过人类反馈的强化学习微调而来，能够回答后续问题、承认错误、质疑不正确的前提以及拒绝不适当的请求。首先让我们今天的主角ChatGPT来亲自介绍自己。
ChatGPT是什么？既然ChatGPT是语言模型，语言模型是什么？通过强化学习训练，强化学习又是什么？
OpenAI 11月30号发布，首先在北美、欧洲等已经引发了热烈的讨论。随后在国内开始火起来。全球用户争相晒出自己极具创意的与ChatGPT交流的成果。ChatGPT在大量网友的疯狂测试中表现出各种惊人的能力，如流畅对答、写代码、写剧本、纠错等，甚至让记者编辑、程序员等从业者都感受到了威胁，更不乏其将取代谷歌搜索引擎之说。继AlphaGo击败李世石、AI绘画大火之后，ChatGPT成为又一新晋网红。下面是谷歌全球指数，我们可以看到火爆的程度。
国内对比各大平台，最先火起来是在微信上，通过微信指数我们可以看到，97.48%来自于公众号，开始于科技圈，迅速拓展到投资圈等。我最先了解到ChatGPT相关信息的也是在关注的科技公众号上，随后看到各大公众号出现关于介绍ChatGPT各种震惊体关键词地震、杀疯了、毁灭人类等。随后各行各业都参与进来有趣的整活，问数学题，问历史，还有写小说，写日报，写代码找BUG......
OpenAI是一个人工智能研究实验室，目的是促进和发展友好的人工智能，使人类整体受益。OpenAI原是非营利机构，但为了更好地实现产研结合，2019年3月成立OpenAI LP子公司，目的为营利所用。
2019年7月微软投资双方将携手合作，2020年6月宣布了GPT-3语言模型，刷新了人们对AI的认知。GPT系列语言模型让我们不断对通用人工智能（AGI）充满了期待。
OpenAI目标之初就很远大，解决通用人工智能问题，主要涉及强化学习和生成模型。
强化学习最早被认为是实现人类通用智能重要手段，2016年DeepMind开发的AlphaGo Zero 使用强化学习训练，让人类围棋的历史经验成为了「Zero」，标志着人类向通用型的人工智能迈出了重要一步。2019年OpenAI 在《Dota2》的比赛中战胜了人类世界冠军。OpenAI在强化学习有很多深入的研究，Dactyl也是一款OpenAI通过强化强化学习训练能够高精度操纵物体的机器人手，OpenAI Gym是一款用于研发和比较强化学习算法的工具包，所以ChatGPT中使用强化学习也是顺理成章。
生成模型方面，为我们熟知的是GPT-3，这是一个强大的语言模型能够生成人类一样流畅的语言。DellE 2是最近很火的AI绘画根据文本描述生成图片。Codex是和微软合作通过github代码训练而来，可以生成代码和Debug，已经商业化。
作为OpenAI曾经的创始人伊隆・马斯克也发表了对ChatGPT的评价！
看看ChatGPT是怎么介绍自家公司的？
作为一个聊天机器人，我们体验发现相比传统的机器人在连贯性问答中更加流畅自然。微信上已经有很多的小程序可以体验，或者直接讲ChatGPT接入了微信中，下面体验一下已经接入到企业微信的ChatGPT。
1）公司一向注重价值观，第一道题回答对一半，公司规定应第一时间退回，特殊情况无法退回，无论价值多少都需要进行申报，所以ChatGPT应该入职不了我司。第二道经典问题的回答还蛮符合公司正直的价值观的，哈哈。
2）公司协会活动总又人放鸽子，我来问问ChatGPT这些人啥心态。看到帮忙想的理由和放鸽子的人说的一样，我有点怀疑他们的心态了。
3）职场工具人看看能不能通过ChatGPT代劳，可以看到文案写作还是不错的。回答的这个提纲有一点小问题但不影响大局。讲故事编剧本也是不错的，先帮中国足球写好参加世界杯的文案，就是不知道能不能用的上了。
4）身边同事很重视娃的教育，那么从娃娃抓起先看看ChatGPT能不能带娃学习。文化常识题回答正确，数学题这推理能力，我担心娃考不上初中，可以用但是家长给把把关啊！同时也考察了一下他脑筋急转弯怎么样，这个傻瓜没答对。
5）号称编程神器可写代码、修bug，考察一下Leetcode中等难度的都没问题。虽然它自谦不会编程，但根据测试和网友的验证能力确实强。
6）考察一下互联网知识储备，挑战失败！如ChatGPT自己所述，他还有很多局限性比如给出看起来没问题其实挺离谱的答案，例如回答自己公司的成果还夹杂私人感情，把竞争对手DeepMind的AlphaGo功劳都据为己有。
做一个小节，其实网上有特别多有趣的案例，这里篇幅有限只是简单了列举几个。通过体验结合网友的反馈，ChatGPT的确掌握了一些知识体系和回答技巧。我们看到相比传统的聊天机器人，ChatGPT在连贯性问答中更加流畅自然，什么话都能接住。除了好玩的聊天神器外还有很多实用的价值，比如解答专业概念、编程类问题、从日常邮件、写请假条、广告文案等等，都可以通过ChatGPT代劳。看完这些有趣的案例，那么ChatGPT究竟如何实现的，我们接下来将讲解关于ChatGPT的哪些技术原理。
ChatGPT是基于GPT3.5语言模型，人类反馈的强化学习微调而来。本节将对涉及语言模型和强化学习两个重要技术做一个科普，已经熟悉的可直接跳过本节。
语言模型通俗讲是判断这句话是否通顺、正确。数学函数表达为给定前N个词，预测第N+1 个词概率，将概率序列分解成条件概率乘积的形式，这个函数就可以实现语言模型去生成句子。那么是什么样的语言模型如此强大，本小节梳理了深度学习开始的语言模型演技过程，如下图所示：
第一次开始用神经网络做语言模型是2003年Bengio提出的NNLM的网络结构，随着图像领域预训练的取得的突破迅速迁移到NLP领域，有了我们熟知的word2vec，通常做NLP任务句子中每个单词Onehot形式输入，使用预训练好的【【微信】】初始化网络的第一层，进行下游任务。word2vec的弊端是【【微信】】静态的，后续代表性工作中ELMo通过采用双层双向LSTM实现了根据当前上下文对Word Embedding动态调整。
ELMo非常明显的缺点在特征抽取器LSTM结构带来的，17年Google在机器翻译Transformer取得了效果的突破，NLP各种任务开始验证Transformer特征提取的能力比LSTM强很多。自此NLP开启了Transformer时代。
2018年OpenAI采用Transformer Decoder结构在大规模语料上训练 GPT1模型横扫了各项NLP任务，自此迈入大规模预训练时代NLP任务标准的预训练+微调范式。由于GPT采用Decoder的单向结构天然缺陷是无法感知上下文，Google很快提出了Encoder结构的Bert模型可以感知上下文效果上也明显有提升。随后2019年OpenAI提出了GPT2，GPT2拥有和GPT1一样的模型结构，但得益于更高的数据质量和更大的数据规模有了惊人的生成能力。同年Google采用了Encoder-Decoder结构，提出了T5模型。从此大规模预训练语言模型兵分三路，开始了一系列延续的工作。
2020年OpenAI提出GPT3将GPT模型提升到全新的高度，其训练参数达到了1750亿，自此超大模型时代开启。技术路线上摒弃了之前预训练+微调的范式，通过输入自然语言当作指示生成答案，开始了NLP任务新的范式预训练+提示学习。由于GPT3可以产生通顺的句子但是准确性等问题一直存在，出现WebGPT、InstructGPT、ChatGPT等后续优化的工作，实现了模型可以理解人类指令的含义，会甄别高水准答案，质疑错误问题和拒绝不适当的请求。
深度强化学习（deep reinforcement learning，DRL）是强化学习一个分支，基于深度学习强大的感知能力来处理复杂的、高维的环境特征，并结合强化学习的思想与环境进行交互，完成决策过程。DRL在游戏场景这种封闭、静态和确定性环境可以达到甚至超越人类的决策水平。比较著名的事件是2017年DeepMind 根据深度学习和策略搜索的 AlphaGo 击败了围棋世界冠军李世石。2018 年OpenAI 团队基于多智能体 DRL推出的OpenAI Five 在Dota2游戏中击败了人类玩家。DRL算法主要分为以下两类：
值函数算法：值函数算法通过迭代更新值函数来间接得到智能体的策略，智能体的最优策略通过最优值函数得到。基于值函数的 DRL 算法采用深度神经网络对值函数或者动作值函数进行近似，通过时间差分学习或者 Q 学习的方式分别对值函数或者动作值函数进行更新。代表性的是2015 年 DeepMind 团队提出深度Q网络（DQN），及其后的各种变种DDQN、【【微信】】、分布式DQN等。
策略梯度算法：策略梯度算法直接采用函数近似的方法建立策略网络，通过策略网络选取动作得到奖励值，并沿梯度方向对策略网络参数进行优化，得到优化的策略最大化奖励值。可以用来处理连续动作。在实际应用中流行的做法是将值函数算法和策略梯度算法结合得到的执行器?评价器（AC）结构。代表性工作有策略梯度算法、AC 算法以及各种变种DDPG、A3C、PPO等。ChatGPT使用的就是策略梯度算法PPO。
ChatGPT整体技术方案是基于 GPT-3.5 大规模语言模型通过人工反馈强化学习来微调模型，让模型一方面学习人的指令，另一方面学习回答的好不好。
本节首先阐述ChatGPT提升的效果及背后对应的技术，然后介绍ChatGPT的整体训练流程，其次介绍提升涉及几个技术细节。
ChatGPT在对话场景核心提升了以下三方面：
1）更好的理解用户的提问，提升模型和人类意图的一致性，同时具备连续多轮对话能力。
2）大幅提升结果的准确性，主要表现在回答的更加的全面，同时可以承认错误、发现无法回答的问题。
3）具备识别非法和偏见的机制，针对不合理提问提示并拒绝回答。
ChatGPT的提升主要涉及以下三方面技术：
1）性能强大的预训练语言模型GPT3.5，使得模型具备了博学的基础。
2）webGPT等工作验证了监督学习信号可大幅提升模型准确性。
3）InstructGPT等工作引入强化学习验证了对齐模型和用户意图的能力。
ChatGPT的训练过程分为微调GPT3.5模型、训练回报模型、强化学习来增强微调模型三步：
第一步：微调GPT3.5模型。让GPT 3.5在对话场景初步具备理解人类的的意图，从用户的prompt集合中采样，人工标注prompt对应的答案，然后将标注好的prompt和对应的答案去Fine-tune GPT3.5，经过微调的模型具备了一定理解人类意图的能力。
第二步：训练回报模型。第一步微调的模型显然不够好，至少他不知道自己答的好不好，这一步通过人工标注数据训练一个回报模型，让回报模型来帮助评估回答的好不好。具体做法是采样用户提交的prompt，先通过第一步微调的模型生成n个不同的答案，比如A、B、C、D。接下来人工对A、B、C、D按照相关性、有害性等标准标准并进行综合打分。有了这个人工标准数据，采取pair-wise 损失函数来训练回报模型RM。这一步实现了模型判别答案的好坏。
第三步：强化学习来增强微调模型。使用第一步微调GPT3.5模型初始化PPO模型，采样一批和前面用户提交prompt不同的集合，使用PPO模型生成答案，使用第二步回报模型对答案打分。通过产生的策略梯度去更新PPO模型。这一步利用强化学习来鼓励PPO模型生成更符合RM模型判别高质量的答案。
通过第二和第三步的迭代训练并相互促进，使得PPO模型能力越来越强。
ChatGPT是在GPT3.5模型技术上进行微调的，这里对GPT-3.5在GPT3基础上做的工作进行梳理，官方列举了以下GPT-3.5系列几个型号：
【【微信】】 是一个基础模型,对于纯代码补全任务。这也是ChatGPT具备超强代码生成能力的
