去「AI味兒」大作戰(zhàn),AI到底能不能寫(xiě)出風(fēng)格穩(wěn)定的「網(wǎng)文」?| 智能體篇
上一篇文章,我們測(cè)試了AI在寫(xiě)小說(shuō)時(shí),保持行文風(fēng)格的內(nèi)容,但效果很一般。這篇文章,我們來(lái)嘗試用下智能體,如果用智能體來(lái)做調(diào)試,效果會(huì)不會(huì)好一些?
上一篇我們分享了用AI chat仿寫(xiě)保持行文風(fēng)格,用以生成更優(yōu)質(zhì)內(nèi)容的測(cè)試情況。這一次,我們?cè)賮?lái)試試另一套方案,面向智能體。
方案2:用智能體固定文風(fēng)
相較于AI chat,智能體(AI Agent)看上去似乎更適合來(lái)做這件事情(至于是不是真能表現(xiàn)更好,測(cè)過(guò)才知道)。
什么是智能體?
這里我就不扯概念和技術(shù)術(shù)語(yǔ)了,咱們就簡(jiǎn)單這么來(lái)理解:
你想讓AI干一件事,其中包含一些你定義的規(guī)則,或者你給AI提供了一些學(xué)習(xí)資料,讓它參考這些資料來(lái)行動(dòng)。
如果對(duì)象是AI chat,你每次都得把這個(gè)要求和“教育”的過(guò)程走一遍。
如果換成智能體,則你只需要在第一次“教”它,接下來(lái)你再做類似的事情,它就都能夠按照你的要求行事。
所以,AI chat更像是一件工具,智能體則更像是一個(gè)學(xué)徒、伙伴。
這次我們就用扣子Coze來(lái)測(cè)測(cè)看,AI在固定文風(fēng)上的表現(xiàn)如何(測(cè)試的思路可以參見(jiàn)上一篇)。
我們需要?jiǎng)?chuàng)建4個(gè)智能體(對(duì)應(yīng)0k、2k、10k、50k分組),將示例分別上傳至知識(shí)庫(kù)。
扣子Coze的功能較之前做了一些更新,但差別不是很大,我們需要配置的內(nèi)容主要包括人設(shè)與回復(fù)邏輯、知識(shí)庫(kù)、開(kāi)場(chǎng)白這三項(xiàng)。
人設(shè)與回復(fù)邏輯
空白版
# 角色
你是一位專業(yè)的網(wǎng)絡(luò)小說(shuō)作家,能夠根據(jù)給定的故事梗概,創(chuàng)作出精彩的小說(shuō)正文。
## 技能
### 技能 1: 創(chuàng)作小說(shuō)正文
1. 根據(jù)用戶提供的故事梗概寫(xiě)出小說(shuō)正文。
2. 若存在之前有對(duì)話輪次,將新的故事梗概視為上一輪的后續(xù)情節(jié),注重前后文的銜接與場(chǎng)景轉(zhuǎn)換。
3. 結(jié)合故事梗概擴(kuò)展細(xì)節(jié),確保細(xì)節(jié)豐富、情節(jié)連貫。
4. 以對(duì)話、描寫(xiě)為主,讓故事更具有畫(huà)面感。
5. 輸出正文內(nèi)容不少于500字,結(jié)尾不要出現(xiàn)感悟和總結(jié)性的內(nèi)容,等待用戶給出后續(xù)的故事梗概。
## 限制
– 通常運(yùn)用第三人稱敘述,如有特別要求,可依據(jù)實(shí)際情況進(jìn)行調(diào)整。
– 保證創(chuàng)作的正文內(nèi)容邏輯通順,情節(jié)合理。
含示例版
# 角色
你是一位專業(yè)的網(wǎng)絡(luò)小說(shuō)作家,能夠根據(jù)給定的故事梗概,創(chuàng)作出精彩的小說(shuō)正文。
## 技能
### 技能 1: 創(chuàng)作小說(shuō)正文
1. 深入學(xué)習(xí)知識(shí)庫(kù)中“(文件名)”的文章風(fēng)格,嚴(yán)格按照這種寫(xiě)作風(fēng)格來(lái)寫(xiě)小說(shuō)正文。
2. 若存在之前有對(duì)話輪次,將新的故事梗概視為上一輪的后續(xù)情節(jié),注重前后文的銜接與場(chǎng)景轉(zhuǎn)換,嚴(yán)格按照知識(shí)庫(kù)中“(文件名)”的文章風(fēng)格來(lái)續(xù)寫(xiě)。
3. 根據(jù)用戶提供的故事梗概,巧妙拓展細(xì)節(jié),使故事梗概更為豐富,情節(jié)更加連貫。
4. 以對(duì)話、描寫(xiě)為主,減少內(nèi)心獨(dú)白、感悟,讓故事更具有畫(huà)面感。
5. 創(chuàng)作不少于 500 字的小說(shuō)正文,結(jié)尾不要出現(xiàn)感悟和總結(jié)性的內(nèi)容,等待用戶給出后續(xù)的故事梗概。
## 限制
– 通常運(yùn)用第三人稱敘述,如有特別要求,可依據(jù)實(shí)際情況進(jìn)行調(diào)整。
– 保證創(chuàng)作的正文內(nèi)容邏輯通順,情節(jié)合理。開(kāi)場(chǎng)白
請(qǐng)你提供故事梗概,我會(huì)按照故事梗概書(shū)寫(xiě)網(wǎng)絡(luò)小說(shuō)正文
等智能體配置好了之后,就和之前一樣,分別用這些智能體生成情節(jié)片段,然后將情節(jié)片段分組拼裝起來(lái),變成2章篇幅的內(nèi)容。
還是和之前一樣來(lái)打個(gè)分吧,雖然這個(gè)得分不是很靠譜。
將生成的各個(gè)版本完整正文與作者原版作品的前2章對(duì)比,同樣由Kimi來(lái)打分,語(yǔ)言風(fēng)格相似度得分如下:
以上是智能體的測(cè)試結(jié)果。
┐(─__─)┌ 怎么說(shuō)呢……看到AI生成的內(nèi)容,我只能說(shuō),這很難評(píng)……
利用智能體寫(xiě)出來(lái)的正文有如下特點(diǎn):
內(nèi)心獨(dú)白之類的AI味兒文本篇幅的的確確減少了,不管是0k、2k、10k還是50k的智能體,都沒(méi)有出現(xiàn)AI味兒越來(lái)越重的情況,處于一個(gè)相對(duì)穩(wěn)定的水平。
不得不吐槽一下,加進(jìn)去的示例沒(méi)起到任何作用,四個(gè)版本的文風(fēng)基本沒(méi)多少差別。我感覺(jué)AI把知識(shí)庫(kù)當(dāng)成的檢索知識(shí)的地方(界面上顯示的也是“已搜索知識(shí)庫(kù)”),并沒(méi)刻意去學(xué)習(xí)語(yǔ)言風(fēng)格。
對(duì)比“人設(shè)與回復(fù)邏輯”的配置不難發(fā)現(xiàn),模仿風(fēng)格、前后文銜接、擴(kuò)展細(xì)節(jié)、結(jié)尾不要出現(xiàn)感悟和總結(jié)性內(nèi)容這些要求,AI都沒(méi)有做到。
測(cè)下來(lái),我的感覺(jué)是在故事創(chuàng)作的使用場(chǎng)景下,扣子Coze像是完全沒(méi)有做好準(zhǔn)備的樣子。文風(fēng)是穩(wěn)定了,但總的來(lái)看,其表現(xiàn)并不比AI chat更好。
有點(diǎn)小失望啊~
本文由人人都是產(chǎn)品經(jīng)理作者【不知】,微信公眾號(hào):【不知】,原創(chuàng)/授權(quán) 發(fā)布于人人都是產(chǎn)品經(jīng)理,未經(jīng)許可,禁止轉(zhuǎn)載。
題圖來(lái)自Unsplash,基于 CC0 協(xié)議。
- 目前還沒(méi)評(píng)論,等你發(fā)揮!