我用GPT-4写短篇小说时的一些发现
输入“/”快速插入
我用GPT-4写短篇小说时的一些发现
飞书用户5116
飞书用户28492023年8月13日创建
总结
❗
核心发现
•
总体感受
◦
GPT-4擅长提供小说灵感、拆解套路、提供修改建议。换句话说，它更擅长当顾问。GPT-4直接生成的小说，和专业作家还是有较大差距的，差距主要体现在情节、文笔和情感表达上。
◦
GPT-4倾向在结尾点明小说的寓意，会给人一种强行说教的感受。
◦
调教GPT-4的主要困难在于上下文限制，也就是它的工作记忆。调教太久容易发生遗忘，这导致运用复杂的提示策略较为困难。
◦
GPT-4更擅长写科幻体裁的作品，对情感体裁的驾驭能力不太理想。
◦
GPT-4创作的小说篇幅较短，字数限制意义不大。并且，它很容易略写一些重要情节，它擅长制造冲突，却不擅长解决冲突，容易出现虎头蛇尾的情况。
•
具体调教策略
◦
无法通过一个直接且简短的指令，让GPT-4输出令人满意的结果。
◦
让GPT-4原创的效果比让它模仿的效果好得多，在本次实践中，我相对满意的作品都是使用它提供的小说灵感，而不是我给它灵感。估计我给的灵感是情感体裁，它不太擅长。
◦
给GPT-4详尽的创作要求（故事设定、结构、情感、文风等等要素上）和样例没有明显帮助，人类想当好Coach并不容易。可能和调教者本身对小说创作的理解深度有关。但让GPT-4自己去拆解创作要素，对生成小说也没有明显效果。
◦
思维链CoT是目前发现唯一有效的提示策略，因为它把创作的环节拆分出来了。但CoT应与「GPT-4提供灵感」和「科幻体裁」配合使用。有效性体现在：1）情节更丰富，能够出现反转。运用思维链CoT时，小说是分块生成的，字数会比让GPT-4一次吐出更多。2）简单易行，性价比高，不需要你去拆解小说的要素，写出精准的指令。
◦
思维链CoT的具体做法是，让GPT-4提供多个开头，人工选出最满意的，然后逐步完成发展、高潮和结尾的创作。理论上，每部分续写时，都让它提供2~3个方案，我再从中选择效果会更好。但在实践中，这样会加速消耗token，越后面生成的质量可能越差。有鉴于此，我更经常的做法是，只在初始阶段要求AI提供十个开头供我选择。
◦
圆桌会议的效果不理想。不要让不同体裁、风格的作家一起脑暴，否则融合后，小说的一致性和连贯性不理想，风格混乱。在成文阶段，一致性比多样性更重要。如果引入不同职业的角色，每个角色可能会给自己职业的视角，这对小说创作不一定是必要的。设置功能性角色，比如保证逻辑性这种，会更有用。
◦
从多个选择中挑选一个，GPT-4给的建议不一定适用。让一堆专家投票，不一定会形成共识，不如直接人工筛选。采取让GPT-4打分的策略，它的标准可能每次都不一致。
◦
GPT-4提的修改意见不一定好，特别是在圆桌会议里，特别是其他风格的作家给的建议，所以我不一定采纳。如果你发现了明显问题，进行定向修改，会更有针对性一些。每次重新生成都会占用大量token，也要注意修改次数太多，导致生成质量下降。如果要修改，可以把修改过程前置，即修改它的大纲。
◦
相对比较有效的提示词：信息量大的开头，感情深沉，增加转折。
任务背景
GenWorld、真格基金等单位组织组织了一个中文AI微小说大赛，这篇文档是我为了参赛调节AI的记录。具体的比赛信息如下：
📜
比赛规则
用大模型生成一篇微小说，字数不得超过2000字，不限题材、体裁。
评审团将从以下五个方面对小说进行评分，总分100分：
1.
原创性和创意（30分）： 评审将考察作品的独特性、创新性和创意。原创性和独特的创作思路将受到高度评价。
2.
情感共鸣和影响力（15分）： 作品是否能引起读者的情感共鸣，是否具有深远的影响力。情感和共鸣将在评审中占据重要位置。
3.
文笔和表达（15分）： 评审将关注参赛作品的文笔、叙述能力和表达方式。清晰、流畅的文笔将获得额外分数。
4.
故事结构和节奏（15分）： 作品的故事结构和节奏对于吸引读者至关重要。评审将评估作品的起承转合、高潮迭起等因素。（超过 2000 字会全部扣除）
5.
AI应用和创作者能力（25分）： 评审将考察作品中AI的应用是否自然、恰当，并且是否能够展现创作者的独特创作能力（如果无法证明是 AI 生成的作品则会全部扣除）
评审团成员包括：
1.
陈楸帆：编剧，科幻文学领域
2.
李异：自由作家，悬疑惊悚领域
3.
雪弟：作家，微小说领域
4.
侠侠：编剧，女
5.
武陵驿：作家，小说、散文、诗歌领域
实现策略
注：
1）大模型使用GPT-4。我的思路是：尝试不同的提示词策略，得到GPT-4生成的多篇小说，从中选择一篇我最满意的作为参赛作品。
2）AI推荐灵感是指：写什么故事由AI来推荐，我会扮演一个筛选的角色，有时甚至筛选都由AI代劳。
3）我提供灵感是指：我提供一篇范文（one shot）或者对内容的大致规划（zero shot），然后让AI来实现。
◦
我提供的灵感是《今日说法》报道过的一对流浪兄弟的感人故事。我根据媒体报告进行改写，从而得到范文。
4）AI推荐灵感下，「开头-大纲-全文分步生成」是我使用的基准提示词框架。