ChatGPT能分析市場形勢嗎?近日,中金公司讓ChatGPT獨(dú)立撰寫了一篇《2023年全球市場展望》,并以文字對(duì)話形式,讓ChatGPT進(jìn)行了一場虛擬路演。
中金公司研究部稱,ChatGPT對(duì)股票和黃金看法比較積極,但對(duì)債券和商品較為謹(jǐn)慎。整篇文章結(jié)構(gòu)較為清晰,邏輯基本自洽,觀點(diǎn)相對(duì)鮮明,內(nèi)容覆蓋了疫情、通脹、貨幣政策等市場熱點(diǎn)問題,反映ChatGPT具備一定的金融知識(shí)儲(chǔ)備與市場分析能力。
(相關(guān)資料圖)
同時(shí),中金公司研究部指出,測試顯示ChatGPT尚未具備獨(dú)立的市場分析能力,根據(jù)ChatGPT在文章撰寫和虛擬路演中的表現(xiàn),發(fā)現(xiàn)ChatGPT有以下幾個(gè)明顯短板,一是具備廣博知識(shí)積累,但信息精確度低:二是具備簡單推理能力,但弱于復(fù)雜分析;三是了解市場焦點(diǎn)問題,但缺乏新穎觀點(diǎn)。
中金公司研究部認(rèn)為,ChatGPT雖然是一個(gè)強(qiáng)大的人工智能,但暫不具備獨(dú)立進(jìn)行市場分析、指導(dǎo)投資決策的能力。但是,如果與人類分析師互相配合,ChatGPT與類似的機(jī)器學(xué)習(xí)模型或許在提高投研生產(chǎn)率方面有著廣闊應(yīng)用前景。
“投資者使用ChatGPT可以提高工作效率,即人類分析師提供觀點(diǎn)與分析框架,ChatGPT補(bǔ)充邏輯細(xì)節(jié)與文字撰寫,再由人類分析師檢查錯(cuò)誤,可以提高投研效率。”中金公司研究部稱。
獨(dú)立撰寫《2023年全球市場展望》與文字路演
據(jù)介紹,測試中讓ChatGPT完成了3項(xiàng)任務(wù),一是獨(dú)立撰寫一篇完整市場分析文章,二是對(duì)文章內(nèi)容進(jìn)行答疑路演;三是根據(jù)分析師的指導(dǎo),輔助完成一篇市場分析文章。根據(jù)這3項(xiàng)任務(wù)的測試結(jié)果,評(píng)估ChatGPT的長處與短板,探索前沿AI科技在宏觀市場分析的應(yīng)用前景。
“在市場分析文章撰寫部分,我們提供了較少指示,要求ChatGPT對(duì)指定話題進(jìn)行‘命題作文’,應(yīng)該說ChatGPT的文章完成度非常高。全文采用‘總-分-總’結(jié)構(gòu),層次比較分明。并且,ChatGPT自行加入一段對(duì)于潛在風(fēng)險(xiǎn)的分析,對(duì)自己的觀點(diǎn)進(jìn)行平衡。文章整體觀點(diǎn)也比較清晰,能夠使用一些證據(jù)和邏輯展開分析,基本可以自圓其說。內(nèi)容上,ChatGPT圍繞近兩年投資者關(guān)心的關(guān)鍵問題(疫情、通脹、貨幣政策等)展開討論,體現(xiàn)了對(duì)近期市場形勢的一定理解。”中金公司研究部稱。
在ChatGPT完成上文后,中金公司分析員與ChatGPT進(jìn)行了一場“文字路演”,對(duì)中國海外市場形勢、美聯(lián)儲(chǔ)政策、衰退與通脹前景等熱點(diǎn)問題展開討論,測試ChatGPT能否理解自己的文章,并結(jié)合文章對(duì)問題進(jìn)行合理有效的回復(fù)。
中金公司研究部介紹,在路演部分,測試中多次挑戰(zhàn)ChatGPT的觀點(diǎn),指出其論述中的數(shù)據(jù)事實(shí)錯(cuò)誤與邏輯漏洞。ChatGPT一方面承認(rèn)自己的分析漏洞,但是也能堅(jiān)持鮮明觀點(diǎn),并不含糊其辭,而且能使用一些新的證據(jù)為自己的觀點(diǎn)辯護(hù),體現(xiàn)了一定的邏輯分析與交流能力。
尚未具備獨(dú)立分析市場能力
中金公司研究部認(rèn)為,ChatGPT功能強(qiáng)大,但尚未具備獨(dú)立分析宏觀市場的能力,主要有以下幾點(diǎn)原因。
一是具備廣博知識(shí)積累,但信息精確度低。
在文章與路演中,分析員與ChatGPT討論了中國海外不同市場情況,涉及通脹、貨幣政策、衰退、疫情等熱點(diǎn)話題,可以感受到ChatGPT對(duì)經(jīng)濟(jì)學(xué)的基本原理、近期市場焦點(diǎn)有較為豐富的知識(shí)積累。但是ChatGPT經(jīng)常輸出一些錯(cuò)誤信息,嚴(yán)重削弱了分析可信度。
例如,ChatGPT引用的IMF對(duì)全球經(jīng)濟(jì)增長預(yù)測的數(shù)據(jù)有誤,也搞錯(cuò)了2020年經(jīng)濟(jì)衰退的時(shí)間。由于信息準(zhǔn)確是市場分析的最低要求,因此ChatGPT生成的內(nèi)容需要專業(yè)人士仔細(xì)檢查后才能指導(dǎo)投資決策。
二是具備簡單推理能力,但弱于復(fù)雜分析。
中金公司研究部指出,ChatGPT可以理解經(jīng)濟(jì)變量之間的簡單關(guān)系。例如,ChatGPT理解如果經(jīng)濟(jì)增速高,則有利于股票表現(xiàn);如果經(jīng)濟(jì)變差,則股市表現(xiàn)不好。但是當(dāng)經(jīng)濟(jì)環(huán)境中有多個(gè)因素時(shí),ChatGPT分析能力就暴露不足。
例如,ChatGPT會(huì)用經(jīng)濟(jì)變差但企業(yè)盈利好來論證股市表現(xiàn)占優(yōu),但沒有意識(shí)到經(jīng)濟(jì)增長變差同時(shí)也會(huì)影響公司盈利。當(dāng)多個(gè)因素影響作用相反時(shí),ChatGPT無法有效論證哪個(gè)因素會(huì)起主導(dǎo)作用,傾向于先指出影響因素較多,然后反復(fù)強(qiáng)調(diào)自己支持的因素。這也削弱了分析的可信度。
三是了解市場焦點(diǎn)問題,但缺乏新穎觀點(diǎn)。
ChatGPT在文章與路演中討論了近幾年市場關(guān)注的焦點(diǎn)問題,但是與流行認(rèn)識(shí)差異度較小,文章內(nèi)容相對(duì)接近一致預(yù)期,缺乏新的角度與觀察。
“一篇優(yōu)秀的市場分析文章或者研究報(bào)告,需要找到市場的關(guān)鍵邊際變化,以一個(gè)新穎的視角來闡述觀點(diǎn)。反之,同質(zhì)化的市場分析價(jià)值相對(duì)較低。”中金公司研究部稱。
中金公司研究部稱,了解ChatGPT的長處與短板,可以使用ChatGPT提高投研工作效率。既然ChatGPT不擅長提出新穎的研究觀點(diǎn)以及展開復(fù)雜分析,但可以機(jī)器與人類互相配合揚(yáng)長避短提高市場研究的效率,即人類分析師提供視角和邏輯,ChatGPT進(jìn)行具體撰稿填充內(nèi)容,再由人類分析師更正ChatGPT文章中的事實(shí)與數(shù)據(jù)錯(cuò)誤。
中金公司研究部提到,上面這篇文章《ChatGPT:2023年全球市場展望(人機(jī)合作版)》由ChatGPT直接生成,沒有進(jìn)行任何修改。文章提綱出自中金大類資產(chǎn)團(tuán)隊(duì)2022年11月發(fā)布的《大類資產(chǎn)2023年展望:勢極生變》??梢钥闯?,人類分析師提供思路與提綱,ChatGPT進(jìn)行具體文字撰寫,通過人機(jī)合作,可以較短時(shí)間完成一篇簡單的投資分析文章。
證券業(yè)與ChatGPT的“相愛相殺”
應(yīng)該正視的是,證券行業(yè)正在加速與ChatGPT“合作”。
2月22日,廣發(fā)證券官宣將正式接入百度“文心一言”,廣發(fā)證券的主要目的是,通過探索大語言模型融入金融應(yīng)用場景,嘗試打造更為豐富、個(gè)性化的金融需求挖掘和服務(wù)支持等,為客戶提供更智能、更有溫度的財(cái)富管理服務(wù)體系。
近日,ChatGPT與國泰君安AI機(jī)器人君弘靈犀之間開展了一場投資大PK。
國泰君安得出的結(jié)論是,ChatGPT的自然語言處理能力非常強(qiáng),在給出投資建議時(shí)也非常標(biāo)準(zhǔn)和謹(jǐn)慎;但可能是受限于模型訓(xùn)練(該語言模型為超大規(guī)模預(yù)訓(xùn)練模型,是基于2021年底之前的數(shù)據(jù)訓(xùn)練,無之后的行情數(shù)據(jù)信息),目前ChatGPT對(duì)于A股市場的問題回答得中規(guī)中矩,在提供伴隨式、場景化、專業(yè)的投資決策輔助服務(wù)方面仍有空間。
此前,首份用ChatGPT撰寫的券商研報(bào)也賺足了行業(yè)眼球。
2月5日,財(cái)通證券發(fā)布了一篇題為《提高外在美,增強(qiáng)內(nèi)在自信——醫(yī)療美容革命》的研報(bào),這是一篇由ChatGPT寫成、由分析師進(jìn)行修改的試驗(yàn)性研報(bào)。
從結(jié)果來看,財(cái)通證券認(rèn)為,不可否認(rèn)的是,ChatGPT在文字表意、標(biāo)題撰寫等方面均具有較高水平,但采用該種直接生成+翻譯模式形成的報(bào)告仍具有三大短板,一是在標(biāo)點(diǎn)和術(shù)語方面存在明顯錯(cuò)誤,二是無法得知引用數(shù)據(jù)來源及可靠性,三是部分復(fù)雜語句翻譯后表意不清晰。
此外,海通證券也對(duì)ChatGPT相關(guān)課題進(jìn)行了前瞻性研究,重點(diǎn)圍繞賬戶全景分析、智能投顧服務(wù)等場景進(jìn)行探索;中泰證券用相關(guān)技術(shù)原理在輔助系統(tǒng)建設(shè)代碼編寫方面進(jìn)行了初步嘗試,未來或規(guī)劃利用相關(guān)技術(shù)原理助力業(yè)務(wù)發(fā)展。