我想要一天分享一點「LLM從底層堆疊的技術」,並且每篇文章長度控制在三分鐘以內,讓大家不會壓力太大,但是又能夠每天成長一點。
整理目前手上有的素材:
- AI說書 - 從0開始 - 338 | Embedding Based Search 資料集描述
- AI說書 - 從0開始 - 339 | Embedding Based Search 資料集整備
- AI說書 - 從0開始 - 340 | Embedding Based Search 資料集編碼
今天來執行 Embedding 作業:
df["embedding"] = df.combined.apply(lambda x: get_embedding(x, engine = embedding_model))
再來執行儲存作業,不管是本機端還是 Google Drive 都存:
df.to_csv("fine_food_reviews_with_embeddings_1k.csv")
!cp /content/fine_food_reviews_with_embeddings_1k.csv drive/MyDrive/files/fine_food_reviews_with_embeddings_1k.csv