cv.cm

AI · AI基础

生成式AI是什么?

阅读约 8 分钟

简短回答

生成式AI(generative AI)是能够创造新内容的软件,比如文字、图片、视频、音频或代码,而不是只对已有数据做分类或打分。模型先从海量样本中学习规律,之后你给它一条指令(也就是提示词,prompt),它就按这些规律生成新的输出。ChatGPT、Claude、Midjourney,以及基于 Whisper 的各类工具都是常见例子。

打开AI 绘画生成器

生成式AI和其他AI有什么区别

2020年代之前的AI大多是预测式的:给它一个输入,它返回一个标签或一个数字,比如这封邮件是不是垃圾邮件、这套房子值多少钱、照片里是谁。生成式AI把方向反过来:输入很短,输出却是一段全新的完整内容。

两类AI都靠样本训练,本质上也都是统计模型,区别在于输出的形态。垃圾邮件过滤器输出一个词,语言模型输出的却是一段以前不存在的文字。

预测式AI生成式AI
典型问题这属于哪一类?按这段描述做出一个东西。
输出标签、分数或数字文字、图片、视频、音频或代码
例子垃圾邮件过滤、欺诈预警、人脸解锁对话助手、AI绘画、语音合成
如何检验和正确标签对比更难:很多种输出都可能可以接受

不少产品是两者混合的。语音转文字工具严格来说也属于生成式,因为它写出了一份文字稿,但它更接近预测,因为正确的文字稿只有一份。

生成式模型的工作原理

所有生成式模型都遵循同一个两阶段思路。训练时,模型看过数百万乃至数十亿个样本,不断调整内部的数字(称为参数或权重),让自己越来越擅长复现数据中的规律。使用时(称为推理,inference),模型从你的提示词出发,借助学到的知识一步一步生成新的输出。

模型并不会把每个训练样本存下来再原样贴出。它保存的是一幅压缩过的统计图景,记录文字、图像或声音通常是什么样子。所以它能生成新的组合,同样也会一本正经地出错。

目前大部分工作由三类模型完成:

类型生成方式常见用途
自回归(Transformer)预测下一个片段(token),再预测下一个,逐个生成对话、写作、代码、翻译,部分图像模型
扩散模型从随机噪声出发,经过许多步逐渐去噪,直到出现图片或视频大多数文生图、文生视频工具
GAN(生成对抗网络)生成器和判别器互相对抗地训练早期的人脸和风格生成器,部分放大工具

Transformer 架构在2017年提出,几乎所有大语言模型都以它为基础。扩散模型在2020年之后成为图像生成的主流方案。GAN 出现最早,在2014年,如今仍用于一些快速的图像任务。三者的界线正在变模糊:有的图像模型是自回归的,有的视频模型把扩散和 Transformer 结合在一起。

生成式AI能做出什么

同样的思路适用于各种媒体,不同的只是训练数据和输出的表示方式。

输出常见输入知名例子常见短板
文字一个问题或指令ChatGPT、Claude、Gemini、DeepSeek、Qwen编造事实和引用,知识过时
代码任务描述、已有代码基于同类大模型的编程助手代码看似正确却过不了边界情况,或调用不存在的函数
图片文字提示词、参考图Midjourney、GPT image、Stable Diffusion、FLUX、Imagen手部、可读的文字、物体的准确数量
视频提示词、起始图、首尾帧Veo、Kling、Runway、Seedance物理规律、物体恒存性、多镜头之间的一致性
语音和音乐文字、声音样本、风格描述神经网络语音合成、音乐生成器重音不自然、人名、多语混说
文字稿音频或视频Whisper 及类似的语音模型浓重口音、多人同时说话、生僻人名

并非所有AI媒体工具都是完整意义上的生成式。比如 cv.cm 的照片转视频工具,只是从一张照片估算出深度图,再让虚拟镜头在其中穿行。镜头在动,画面里的主体不动,因为并没有凭空生成新的运动画面。文生视频模型则不同,每一帧都是它生成的。

实例:一个创意,几种模型

假设一家小店想做一条15秒的短片,宣传新款陶瓷杯。典型的生成式工作流是这样的:

  1. 文字:让对话模型写三条简短文案和一段30字的配音稿,挑一条喜欢的,再手动修改。
  2. 图片:向图像模型描述镜头,比如晨光里木桌上的一件产品,多生成几张,选一张。
  3. 视频:把这张图交给图生视频模型,配一句简短的运动提示词,比如镜头缓慢推近,蒸汽升起。
  4. 配音:用语音合成模型把稿子转成语音,或者自己录。
  5. 字幕:把音频交给语音转文字模型,得到 SRT 文件,再改正错误。
  6. 复核:检查产品是否和实物一致、文字有没有拼错,并在法律或平台要求时标注为AI生成。

每一步用的模型不同,做的却是同一件基本的事:把一条简短的指令变成符合训练规律的新内容。每一步也都需要人来把关,因为每种模型都有各自典型的毛病。

Weak prompt:
mug ad

Stronger prompt:
A white ceramic mug with a thin blue rim on a light oak table,
soft morning window light from the left, steam rising,
shallow depth of field, product photo, no text, no logo.

更好的提示词写明了主体、材质、场景、光线,以及不要出现什么。生成式模型会用训练中最常见的选择去填补所有空白,所以你写得越具体,它猜得就越少。

生成式AI擅长什么,不擅长什么

生成式AI擅长快速出初稿、改写文字、总结你提供的长篇材料、翻译、一次性想出许多备选方案,以及把粗略的想法变成图片或声音。

它的弱点也相当固定:

  • 事实:语言模型会信心十足地陈述错误信息,这叫幻觉(hallucination),也叫虚构。
  • 计数和精确细节:五根手指、三个苹果、一句12个字的话,模型只能做到近似。
  • 图片里的文字:招牌和标签常常拼写错误,不过就目前而言已有改善。
  • 视频里的物理和连贯性:物体可能融在一起、凭空消失,或做出不可能的运动。
  • 最新信息:模型只知道训练数据中截至某个日期的内容,除非接入了搜索。
  • 小语种、方言和口音:训练数据稀少的地方,质量会下降。

实用的原则是:错误容易发现、改起来又便宜的地方,放心用生成式AI;一旦出错代价很高,就要把所有内容都核实一遍。

负责任地使用生成式AI

发布或采用AI输出之前,可以对照这份简短的清单:

  1. 事实、数字、引文和链接,都要对照原始来源核实。
  2. 不要把私人数据、密码、客户文件或身份证件贴进你无法掌控的工具。在你自己设备上运行模型的浏览器工具,不会上传文件。
  3. 查看工具关于商用的条款,不要用提示词去生成你无权使用的真人、标志或角色。
  4. 法律或平台有要求时,要标注AI生成或AI编辑的媒体。中国、欧盟和许多平台现在都有标识规则。
  5. 最终结果始终要有人负责,健康、法律、金融和新闻领域尤其如此。

生成式AI是一种预测合理输出的工具。把它当作起草的快手助理,它非常好用;把它当作无所不知的权威,就不合适了。

常见问题

ChatGPT 是生成式AI吗?

是。ChatGPT 是基于大语言模型的对话产品,而大语言模型是逐个 token 写出文字的生成式模型。部分版本还能生成图片和语音。

AI和生成式AI有什么区别?

AI是个很宽泛的领域,指能完成看似需要智能的任务的软件。生成式AI是其中负责创造新内容的那部分,有别于做分类、排序或预测单个数值的AI。

生成式AI会照搬训练数据吗?

通常生成的是新的组合而非复制,但模型有时也会非常接近地复现某些段落、图片或风格,尤其是知名或被反复引用的作品。这也是AI版权问题至今仍在裁定中的原因之一。

生成式AI就是通用人工智能(AGI)吗?

不是。AGI 即通用人工智能,是一种假想的、在几乎所有任务上都能与人相当的系统。今天的生成式模型在很多任务上表现出色,但仍会在简单的检查上出错,需要人来监督。

生成式AI可以免费使用吗?

可以。许多对话助手有免费额度,也有些工具直接在浏览器里运行开源模型,不用花钱。免费额度通常有使用上限,商用条款也因工具而异。

全部AI教程