數位引擎筆記 · Facebook 保存

用 Style Transfer、Few-Shot 與 LoRA 做產品描述

一則記錄電商產品描述實驗的社群貼文,從提示詞、範例學習到 LoRA 微調,整理出不同方法的成本與控制力。

來源註記

這篇內容保留 Facebook 貼文的原始脈絡,部分工具、介面與外部連結可能已經改變。

這則貼文記錄一個電商產品描述的實驗。

目標是輸入產品圖片,產生符合品牌語氣的產品描述。

三種不同的控制方式

最直接的方法,是在提示詞中描述想要的風格與語氣。

這種方式成本最低,也最容易開始,但「品牌語氣」這種抽象概念很難只靠文字完整傳達。

第二種方法是 Few-Shot Prompting。

做法是在提示詞中放入多個範例,讓模型從範例中模仿句型、用字與敘事方式。

通常範例越多,模型越容易抓到目標風格,但每次執行都要附帶這些範例,推論成本也會增加。

第三種方法是 LoRA Fine-Tuning。

LoRA 不直接修改整個基礎模型,而是訓練一組額外的參數層,讓模型在特定任務或風格上產生穩定的行為變化。

它需要比較繁瑣的資料準備與訓練流程,但訓練完成後可以保存 Adapter Layers,之後重複使用。

實驗觀察

原始實驗使用 Everlane 的產品資料,微調 Llama 3.2,並比較微調前後的輸出。

貼文中的提示詞相當簡單,但在 Zero-Shot 情境下,微調後的描述已經出現明顯差異。

原始貼文也附上 Google Colab 範例,讓讀者可以載入微調後的 LoRA 模型,從測試資料讀取一項產品,再比較微調前後的回應。

這筆保存內容的價值,不只是展示某一次模型輸出,而是把「提示詞控制」、「範例控制」與「模型微調」放在同一個實驗脈絡中比較。

實際使用時仍應重新檢查模型版本、訓練資料、產品資訊的正確性,以及品牌是否允許使用生成式內容。

Keep exploring

延伸閱讀

網站文章

SEO電子報第五十二期 – 2022.03.01~2022.03.15

這期電子報有兩個特別推薦的內容,第六點的demo影片,展示了如何在短時間內生產出文章,也額外附上一個金庸內容生產器,讓大家對機器生產內容在中文語言的發展更有認知。另一個是Ahrefs推出的SEO贏家網站分析影片,剖析DoorDash的網站是怎麼幹掉對手在搜尋上保持勝利。

網站文章

SEO電子報第五十五期 – 2022.04.16~2022.04.30

祝大家勞動節愉快!這期沒有特別新穎的東西出現,其中好幾則都與AI生產內容有關,雖然數位引擎的長期讀者可能會嫌重複,但第六則關於內容SEO的文章還是希望大家可以花點時間閱讀,適合拿來反思自己在做的事情,以及這些工作在未來3~5年的不可取代性,Enjoy!

網站文章

SEO電子報第七十~七十一期 – 2022.12.01~2022.12.31

大家新年快樂! 去年的十二月比想像多中的還要多Google搜尋相關的變動和公告,另外鑑於ChatGPT的火熱,讓更多人意識到AI其實離成熟並沒有這麼遠,最後兩則探討了SEO中的應用,以及內容行銷領域工作者對AI看法的調查,都相當有意思。

Facebook 保存筆記

從搜尋引擎到 RAG:重新理解資訊檢索

從早期研究搜尋引擎的挫折,到用 RAG 重新接觸文件拆分、查詢改寫與重排序,這是一則把 AI 學習連回資訊檢索的個人記錄。