ENT:面對GPT-4，NLP工程師還是有辦法的！_tps幣圈

〇、題記

到底是“左右逢源”還是“舉步維艱”，讓子彈飛一會兒吧。所謂技術壁壘也許就是如何更清晰有效的描述需求了，但也很難形成技術壁壘。至于專利，軟件著作權保護的是制作軟件這個技術本身，而非你使用軟件時的姿勢，所以我想單獨的prompt應該也不會形成專利，但是作為你某個技術的一部分，還是有可能的。LLM現階段的表現是“懂開車的人才能開車”，所以需要更多更懂某個業務，更熟練使用LLM工具的人。這篇文章的目標：討論在當前GPT-4如此強大的技術沖擊下，普通NLP算法工程師該何去何從。本文章主要用來引發思考+討論，如果您是NLP算法工程師，有什么新的觀點或者Comment,可以加微信Alphatue

首先說下結論：GPT-4非常強大，但是我們認為，還沒有到徹底取代NLP算法工程師工作的地步，依然有很多能做的方向。本文分為以下幾部分：

一、GPT-4厲害在哪里？

二、GPT-4存在的問題?

三、NLP工程師可以努力的方向

四、何去何從?

五、申請Prompt專利？我們會不會失業？

一、GPT-4厲害在哪里？

1.更可靠了為什么？詳情可見OpenAI的GPT-4TechnicalReport具體意思是，和以前的GPT-3.5模型相比，GPT-4大大減少了胡說八道的情況。

性能更好：比GPT-3.5又提升了一大截

Circle正在考慮在日本發行穩定幣:金色財經報道，Circle聯合創始人兼首席執行官Jeremy Allaire表示，鑒于日本管理穩定幣的立法于6月1日生效，Circle正在考慮在日本發行穩定幣。如果穩定幣更廣泛地應用于跨境貿易、外幣交易和全球商業，日本將成為一個極其龐大的市場。[2023/7/6 22:20:43]

具體表現在哪？根據論文里的例子，我們發現GPT-4在技術上有幾個進步：

第一，多模態處理能力：GPT-4可以接受包含文本和圖片的輸入，并生成包括自然語言和代碼在內的文本輸出。這使得它在處理文檔、圖表或屏幕截圖等任務時表現出色。第二，更好的性能和表現：相比前代GPT-3.5，在處理復雜任務時表現更為出色，在各大面向人類的考試中展示出了更高的準確性、可靠性、創造力和理解能力。第三，Test-TimeTechniques擴展能力：GPT-4使用了Test-TimeTechniques如few-shot和chain-of-thoughtprompting進一步擴展了其能力，使其能夠更好地處理新領域和任務。第四，安全性優化：GPT-4重視安全性，生成回復的正確性得到了重點優化。它還進行了對抗性真實性評估，以避免潛在的安全隱患。第五，開源框架支持：OpenAI開源了用于評價大語言模型的開源框架OpenAIEvals，可以幫助研究人員和開發者評估他們的模型，并提供更好的指導。第六，模型訓練和監控：OpenAI強調對模型進行評估和監控的重要性，以避免潛在的安全隱患。GPT-4也已被應用在了OpenAI內部，例如內容生成、銷售和編程，并在模型訓練的第二階段負責輸出評估、對齊工作。這里我們也拋一個問題：(究竟如何定義“模型的性能？”模型越來越難評估了，比如說，市場認為的某些某些不如chatgpt，但是也有人測試覺得更好，是怎么定量的評估呢？)3.Reverseinversescalingprize:一些隨著模型變大性能下降的任務,在GPT-4上不再出現類似現象如何理解reverseinversescalingprize？通過閱讀論文原文，InverseScalingPrize提出的幾個任務，模型性能會隨著scale的擴大而下降，但是我們發現GPT-4扭轉了這一趨勢。也就是說，GPT-4scale擴大，性能也不會下降。見下圖：

Brainless Spikes項目Discord服務器遭入侵:金色財經報道，據CertiK官方推特發布消息稱，Brainless Spikes項目Discord服務器遭入侵，有黑客發布釣魚鏈接。請用戶勿與相關鏈接交互。[2023/6/25 21:58:39]

能夠用圖像做prompt：增加圖像信息能進一步提升性能啥是BLIP2？論文：https://arxiv.org/pdf/2301.12597.pdf

Salesforce研究院的BLIP-2模型，是一種視覺語言模型，可以用于圖像字幕生成、有提示圖像字幕生成、視覺問答及基于聊天的提示等多種應用場景。BLIP-2通過引入一種新的視覺語言預訓練范式來解決端到端視覺語言預訓練的高成本問題，并實現了在多個視覺語言任務上最先進的結果，同時減少了訓練參數量和預訓練成本。

二、GPT-4存在的問題

1.不開源

由于GPT-4完全不公布任何技術細節，所以為什么它有如此強大的能力，我們只能猜，想要研究它變得困難重重。

2.數據安全

ChatGPT的火爆讓大家突然忘了曾經非常看重的數據安全問題，preview版是有可能會參與下次迭代的；而商用API即使強調不會用于模型訓練，敏感業務數據你敢用嗎？

Paradigm稱SEC目前的框架不適合于加密貨幣:金色財經報道，加密貨幣投資公司Paradigm表示，目前SEC的披露框架 \"不適合 \"加密貨幣市場。美國證券交易委員會一直在監管的傳統證券與加密貨幣資產之間的區別歸結為技術。Paradigm指出，在比較股票和債券與加密貨幣時，有一個明顯的區別。傳統上，股票或債券的所有者在最初出售股票或債券的法律實體中擁有權益。Paradigm聲稱，加密貨幣的情況并非如此，其資產不與發行者的價值掛鉤，因為它們獨立存在。該文件概述了一個框架，將更好地監管加密貨幣市場。這包括承認 \"加密資產的運作、交易和結算的技術'棧'與證券交易的技術'棧'非常不同\"。任何監管也應該承認，加密貨幣 \"可以以與傳統證券不同的方式累積價值\"。[2023/4/22 14:19:40]

3.資源消耗大

即使是GPT-3也有175Billion參數，所有的訓練/推理都是極其消耗資源的，從GPT-4的價格上漲了50%來看，我們認為GPT-4的推理消耗資源也上升了約50%左右。

三、NLP工程師可以努力的方向

這也是最近討論比較熱烈的一個問題。在我們探討這個問題之前，可以先思考一下理想的NLP模型應該具有哪些特征。我們認為，比較理想的模型是：

安全可靠/支持長文本/小/快/私有化部署。

所以從個人觀點出發，給出一些我們比較關注的方向，拋磚引玉：

1.hallucination

目前LLM最大的問題就是hallucination(hallucination舉個例子，就是ChatGPT會一本正經的胡說八道)。那么目前主流兩種思路：alignment/多模態。①alignment：alignment就是讓模型理解人類語言

Mastercard推出NFT門控音樂藝術家加速器計劃:4月13日消息，Mastercard宣布了其新的藝術家加速器（Mastercard Artist Accelerator）計劃，本次加速器計劃增加了 Web3 的變化，即只有持有 NFT 會員通行證才能訪問該計劃。限量版 Mastercard Music Pass NFT 是解鎖 Mastercard Artist Accelerator 計劃的關鍵，這是一個 Web3 平臺，可以免費訪問教育材料，通過其合作提供獨特的人工智能工具，以及提升音樂藝術家創造力的無價體驗。免費的限量版 Mastercard Music Pass NFT 將在月底前向音樂和 Web3 粉絲開放。該計劃是通過與區塊鏈開發商 Polygon 共同創建，萬事達卡尋求利用 Web3 技術來教育并讓更多人參與音樂領域正在發生的數字化轉型。[2023/4/13 14:02:02]

②多模態：多模態是指涉及多個感官或媒體形式的信息處理和表達方式。在自然語言處理和計算機視覺等領域，多模態通常是指同時處理和理解多種輸入方式，如文本、音頻和圖像等。多模態信息處理可以幫助計算機更好地理解復雜的人類交互和情境，從而提高計算機的智能化水平和應用效果。例如，在圖像字幕生成任務中，計算機需要同時處理圖像和文本，根據圖像內容生成相關的文字描述。

Alignment至于如何做alignment，學術界主要是instruction-tuning為主，OpenAI的路線是RLHF，然而普通玩家我是完全不推薦做RL的，只要仔細閱讀InstructGPT/GPT-4paper中關于rewardmodel部分就能勸退了。所以對于我們普通玩家，是否有別的路徑？多模態GPT4的Paper上看，效果是不錯的，不過我們目前還在實踐，歡迎實踐過的同仁來討論。2.復現GPT-4/ChatGPT/GPT-3.5/InstructGPT

湖北：9月虛擬貨幣“挖礦”數量在全國排名下降至第19位:金色財經報道，湖北省通信管理局按照省政府整治虛擬貨幣“挖礦”活動專題會議要求，積極推進虛擬貨幣“挖礦”整治工作，依法依規全力配合湖北省聯席辦對“挖礦”IP地址進行定位溯源，共完成50個“礦工”IP的定位，組織省內基礎電信企業對4000余個境外“礦池”IP采取屏蔽措施，加強源頭封堵，2022年9月湖北省虛擬貨幣“挖礦”數量在全國排名下降至第19位。（人民郵電報11月3日03版）[2022/11/4 12:14:56]

不開源只能復現，目前主要有(https://github.com/facebookresearch/llama)/(https://huggingface.co/bigscience/bloom)此外還有不開源但是可以使用API訪問的百度文心一言/ChatGLM等。

3.如何評估LLM

很多人提到百度文心一言性能“不夠好”，具體指的是哪里不夠好？想要回答這個問題，就涉及到：究竟如何量化評估LLM的性能？曾經自動化的方案及Benchmark的參考意義，隨著LLM的能力提升顯得越來越弱，現在急需新的數據集/評估方案。目前的工作有：(https://github.com/openai/evals)(https://github.com/stanford-crfm/helm)

4.支持長文本

更長的輸入，對某些任務是有利的，那么如何讓模型支持更長的輸入？

主要的思路有兩個：

訓練時使用較短文本，推理時外推更長的位置信息，使模型獲得處理長文本的能力，如bloom中使用的(https://arxiv.org/pdf/2108.12409.pdf)調整模型結構，如最近的工作：(https://arxiv.org/pdf/2303.09752.pdf)PS:GPT-4的輸入從GPT-3.5的4K(or8K?)提升到了30K，具體是如何做的呢？

5.變小變快

相同架構的模型通常變小就會變快，讓模型變小的方法主要是蒸餾/量化/train小模型，這個方向目前工作有：(https://github.com/tatsu-lab/stanford_alpaca)(https://github.com/TimDettmers/bitsandbytes)，中文上也有(https://github.com/THUDM/ChatGLM-6B)/(https://github.com/LianjiaTech/BELLE)等

6.低成本inference

如何在低成本設備上使用這些模型？如單張GPU上跑大模型或普通CPU上跑模型。這個方向的工作也有(https://github.com/FMInference/FlexGen)/(https://github.com/ggerganov/llama.cpp)等。

7.低成本優化

低成本fine-tuning主要有兩個方向：①parameter-efficient②sample-efficient.parameter-efficient?的思路目前主要有prompt-tuning/prefix-tuning/LoRA/Adapter等參考(https://github.com/huggingface/peft)

sample-efficient可以幫助我們如何更有效的構造訓練集最近的工作有(http://arxiv.org/abs/2303.08114)

8.優化器

優化器決定了我們訓練時需要的資源。雖然我們通常使用Adam優化器，但是其需要2倍額外顯存，而google好像用Adafactor更多一點，最近他們又出了一個新工作

(https://arxiv.org/abs/2302.06675).9.更可控

如從可控生成角度看，目前可控主要通過controltoken來實現，有沒有更好的辦法來實現更“精細”的控制？正如controlnet之于stablediffusion。

10.識別AIGC

如何判別內容是人寫的還是模型生成的呢？隨著模型的性能越來越強，識別AIGC也越來越困難。目前的工作也有watermark/(https://gptzero.me/)等不過我感覺還沒什么特別有效的方案目前。對此我有個簡單的思路：將AI生成的與非AI生成的看作是兩種不同的語言，如code與英語一樣，雖然都是相同符號構成，但是對應不同語言。使用大量的AI生成的內容pretrain一個”AI語言模型“，再來進行識別。

11.單一任務/領域刷榜

我認為在某個任務/領域上通過小模型挑戰大模型依然有意義，LLM雖然強大，但是依然有太多我們不知道的能力，通過小模型刷榜也許能提供一些思路，就像PET本意是挑戰GPT-3，卻打開了LLM的新思路。

四、何去何從

1.普通工程師

這種新的革命性的技術我們普通工程師通常都不是第一線的，我們第一次真正使用bert也是在其出來兩年后了。即使今天，也有很多場景/公司不使用bert這個技術。換個角度，即使我們想參與，我想能參與訓練/fine-tuning一個10B規模模型的工程師都相當少，更別提更大的了。所以到底是“左右逢源”還是“舉步維艱”，讓子彈飛一會兒吧。

2.普通用戶

生活中不缺少美，而是缺少發現美的眼睛。對于普通用戶來說，要努力提高自己的鑒別能力

五、番外

1.通過Prompt構建技術壁壘/申請prompt專利

隨著alignment的進一步優化，LLM通常越來越理解自然語言，所以我們認為prompt-trick越來越不重要，而清晰地用prompt描述你的需求越來越重要。所謂技術壁壘也許就是如何更清晰有效的描述需求了，但也很難形成技術壁壘。至于專利，軟件著作權保護的是制作軟件這個技術本身，而非你使用軟件時的姿勢，所以我想單獨的prompt應該也不會形成專利，但是作為你某個技術的一部分，還是有可能的。

2.會不會失業

我們認為不會失業，但會轉變一部分人的工作方式。在計算這件事上，人類早已被計算機遠遠地甩在后面，而計算機的出現也帶來了大量的新工作。尤其是LLM現階段的表現是“懂開車的人才能開車”，所以需要更多更懂某個業務，更熟練使用LLM工具的人。

Tags：GPTHTTTPSENTGPTGHTT價格tps幣圈ENTRC

TRX