language models (LLMs) that – in effect – found freedom with the November 2022 launch of OpenAI's ChatGPT with its extremely easy-to-use / speedy user interface. In addition, relatively new AI company founders making new tech advances increasingly more powerful, accessible, and economically viable. OpenAI’s ChatGPT – based on user / usage / monetization metrics – is history’s biggest ‘overnight’ success (nine years the Internet 1.0 revolution – where technology started in the USA and steadily diffused globally – ChatGPT hit the world stage all at once, growing in most global regions simultaneously. Meanwhile, platform

Encoder Representations from Transformers,双向编码生成Transformer)，GPT仅采用上文预测单词（BERT采用了基于上下文双向的预测手段）。 注：ChatGPT的表现更贴近人类意图，部分因为一开始GPT是基于上文的预测，这更贴近人类的话语模式，因为人类言语无法基于将来的话来做分析。 图：GPT-1模型相比于Transformer模型有了显著简化 models to follow instructions with human feedback》论文 ## ChatGPT核心技术优势 InstructGPT与ChatGPT属于相同代际的模型，ChatGPT只是在InstructGPT的基础上增加了Chat属性，且开放了公众测试 ChatGPT提升了理解人类思维的准确性的原因在于利用了基于人类反馈数据的系统进行模型训练 (注：根据官网介绍，Gh (注：根据官网介绍，GhatGPT也是基于InstructGPT构建，因而可以从InstructGPT来理解ChatGPT利用人类意图来增强模型效果) 步骤1：搜集说明数据，训练监督策略 图：基于人类反馈强化的核心训练流程如下所示： 步骤2：搜集比较数据，训练一个奖励模型 ## 步骤3：搜集说明数据，使用增强学习优化模型 搜集说明数据（基于prompt 训练方式的数据集），训练监督策略 这个数据用来联合监督学习，对GPT-3进行微调

这自然要从 OpenAI 说起，前一年年底，ChatGPT 的横空出世，标志着对话式 LLM 开始进入公众视野，为人们提供了全新的人机交互方式。而 2023 年 3 月，同系 GPT-4.0 的发布则将 LLM 的规模和能力提升到一个新的台阶，为 LLM 的广泛应用奠定了基础。再之后的 11 月份，OpenAI 再发力，GPTs 的到来，“用户自定义 ChatGPT” 的能力，更是让世人领略了 OpenAI 翻了又翻。 ## 三、 Claude 2、PaLM 2、Llama 等模型与产品也展现了 LLM 在语言理解和多模态处理能力方面的探索，甚至 Claude 2 还一度被誉为实力可以硬刚 ChatGPT。而 Meta 开源的 Llama 2 更成为了 LLM 领域开源势力的典型代表，它的出现，犹如一颗投入平静湖面的石子，激荡起层层水波，“Llama 2 一开源，全球范围内进入了百模混战阶段”，这个说法一点也不为过。 本的基础上增加 AI 能力，使其智能化，但它的智能只充当了“辅助”角色；在 AI 原生的语境下，LLM 从一开始就是应用的中枢，应用本身的架构、功能、交互层是围绕 LLM 中枢来构建的。也许 ChatGPT 是最经典的“AI 原生”应用。此概念目前还处在萌芽期，明确的概念、应用场景、架构、技术栈细节等尚未完成自洽。换一种视角来看，这个概念的提出其实都没技术什么事，有人称之为“造商业概念”，这里按下不表。

更重要的是理解两者之间的关系。 AGI 和产品对我们来说并不是手段和目的的关系，两个都是目的。同时，在追求 AGI 的过程中，我认为所谓的数据飞轮是很重要的，尽管它是一个老套的概念。 像 ChatGPT 这样的产品，还没有完全建立起基于用户数据的持续进化。我觉得这很大程度上是 base model 还在进化，进化了一代，之前的用户数据就没什么用了。这跟发展阶段有关系——现在“吃”的是 base 释性的？因为刚刚你也提到了模型是一个黑盒，并且其实人类到现在还没有弄清楚自己的大脑是怎么工作的。 杨植麟：可解释性核心是个信任的问题。建立一个信任的心智是很重要的，对应的应用场景甚至可能和 ChatGPT 的也会不同，比如 long-context 和搜索的结合。 当模型完全不 hallucinate 或者概率非常低，就不需要解释了，因为它说的东西都是对的。而且解释有可能也只是 alignment 第二点就在于 AI 的终极价值是个性化。 海外独角兽：OpenAI 其实也有一定的 long-context 了。 杨植麟：它还没有把用户的交互过程真正视为个性化的场景。比如，如果我们去 ChatGPT prompt 某个东西，不管是今天还是明天，只要模型版本相同，可能效果基本上差不多，这就是我说的缺乏个性化。 最终所有东西都是指令遵循。只不过你的指令会越来越复杂。今天你的指令一开始可能是 10

仍然难以捉摸。 ## 众多大语言模型 大语言模型（LLMs）为现今人工智能的许多重要突破奠定了基础。目前的应用多使用类似聊天的界面进行交互，例如 ChatGPT 或 Google Bard。生态中的主要竞争者（例如 OpenAI 的 ChatGPT，Google Bard，Meta 的 LLaMA 以及亚马逊的 Bedrock 等）在我们的讨论中占据重要地位。更广泛来说，大语言模型可以应用于从内 62. MobSF 63. Mocks Server 64. Prisma 运行时防护 65. Terratest 66. Thanos 67. Yalc ## 评估 68. ChatGPT 69. Codeium 70. GitHub 合并队列 71. Google Bard 72. Google Cloud 工作站 73. Gradio 74. KWOK 75. Llama 已经试用过它并取得了很好的效果。您可以将 30 多种用户反馈来源连接到这个平台，它可以分析数据并识别功能请求、常见投诉、用户喜欢的产品特点，甚至列出您的竞争对手。为了获取更多细节，您可以像向 ChatGPT 或 Google Bard 提问一样，这里的好处是它针对您的数据进行了优化。一旦您确定了要从用户反馈中解决的问题，Kraftful 会基于所有基础数据（包括验收标准）为您生成用户故事，即使对经

containers”  Source: ChatGPT ### 1.1 ## Using std::vector • Using two vectors (bids and asks) and use std::lower_bound (binary data!)”  Source: ChatGPT ### 1.1 ## Principle #3: “Hand tailored (specialized) algorithms are key to achieve performance” sophistication”  Source: ChatGPT ### 1.1 ## Principle #5: “Mechanical sympathy” ![Image](/uploads/documents/6/3/b/c/63bc096626

势，引用格式较为规范。 斯坦福STORM在行业报告的生成中表现突出，能够提供较为简洁且针对性的内容，适合行业趋势分析与快速阅读。 ## 生成综述案例：元知（增强版）AI综述工具 H₁ 《ChatGPT 与 AI 传播：规制、理解与功能整合研究》 本次研究选取中国学术期刊网络出版总库 CNKI 和美国科学情报研究所 (Institute for Scientific Information 8/2/d/9/82d92d1a0d1d8addd115233c124fe2a5/p46_1.jpg) 图 1 研究主题关键词共现聚类图谱 ## 大语言模型传播偏向规制与风险治理：以 ChatGPT 为例 ## 一、 研究现状 ### 1. 大语言模型传播规制研究层面 重点关注大语言模型在不同领域的应用与挑战。郑春萍等（2024）提出，人工智能在语言教学领域的应用促使自然语言处理、机 术，优化平台功能，升级技术应用，生成新的教学服务模式，从而构建泛在学习环境下的智慧教育生态，使得教学创新开辟新领域。产生显著的教育变革效应 $ ^{[19]} $ 。吴冠军（2023）认为，以ChatGPT为代表的大语言模型虽展现出通用智能，却频发错误，这从技术政治学视角出发，揭示了其错误生成与意识形态偏见之间的因果关联，进而强调在人工智能时代，意识形态批判性分析的重要性 $ ^{[20]} $

CodeArts Snap TabbyML Comate 大模型聚合平台 Hugging Face ModelScope SOTA！模型 Gitee AI ## 知名大模型应用 ChatGPT Bing DragGAN Claude Cursor Bard Midjourney Mochi Diffusion v0.dev MakerSuite bxtai DECS codium [Image](/uploads/documents/f/4/8/5/f485f799dcd761b82375003f4bef3b91/p6_3.jpg) ## LLM 基础设施：向量数据库/数据库向量支持 自 2022 年 ChatGPT 问世以来，大模型星火初始，向量数据库不但获得了技术领域的关注，也逐渐吸引了市场和资本的注意力。近两年来，向量数据库公司迎来了一波融资潮： Pinecone：已融资 1.38 亿美元 ➢ Zilliz：已融资  2022 年底大模型应用 ChatGPT 发布后，点燃了世界范围内对于大模型技术及其应用的关注和热情。2023 年，国内外各大厂商均投身于大模型的浪潮当中，涌现了诸多知名的大模型及应用，它们结合了文本、图片、视频、音频多种介质，在文本生成、图片生成、AI

. 6 1.4.1 上下文窗口 ..... 6 1.4.2 单位 B 和 T ..... 6 2 AI 工具梳理 ..... 6 2.1 问答 ..... 6 2.1.1 ChatGPT ..... 6 2.1.2 Claude ..... 7 2.1.3 通义千问 ..... 7 2.2 图像 ..... 7 2.2.1 物体擦除 IOPaint ..... 8 Copilot ..... 10 2.4.10 通义灵码 ..... 11 2.5 AI 指令编写工具 ..... 11 2.5.1 FlowGPT ..... 11 2.5.2 ChatGPT 指令大全 ..... 11 2.5.3 SD 提示词手册 ..... 12 2.5.4 PromptHero ..... 12 2.5.5 可视化 AI 提示语 ..... 12 工具，分别包括：问答，图像，视频，AI 编程，AI 提示词和 AI 大模型，一共梳理挑选共计 38 个 AI 工具，其中很多都是开源！ ### 2.1 问答 #### 2.1.1 ChatGPT ChatGPT 是一个由 OpenAI 开发的大型语言模型，它基于 GPT（Generative Pre-trained Transformer）架构。这种模型通过分析大量的文本数据来学习语言结构和

developing new models and capabilities. Our Applied Team turns those models into products, like ChatGPT Enterprise and our API. And our Deployment Team takes these products into companies to address their closely with Legal, Compliance, and IT Security teams to ensure responsible use. They rolled out ChatGPT Enterprise globally, then let people discover their own use cases. “Normally, in a business like hours. The impact was felt across many disciplines and departments: The Credit Risk team Uses ChatGPT to determine creditworthiness faster and more accurately. The Legal team Uses it to answer 40