🐹倉鼠週報15:覺得 Plugin 不好用不要氣餒!
這週大家都能玩 Plugin 卻人人抱怨好難用,新工具出來大家一定會不習慣,但使用上不要氣餒,多嘗試、多看其它人怎麼玩,然後將好的用法收納進自己的工具箱中,我們就會慢慢成為工具的高手!
卷首語
這禮拜要分享一個長久以來思考的問題,那就是『為什麼福爾摩斯這麼厲害?』
看過福爾摩斯電影的人都知道,他能瞬間將眼前的景象串連並推理,進而洞悉詳細的資訊。在我看來,想具備福爾摩斯的能力,至少需要以下幾點:
豐富的閱歷
推理事物的基礎是明白事物的證據和脈絡,豐富的閱歷有助於抓住關鍵證據並理解脈絡。如要了解如何修理家中的漏水問題,基本的水電知識是必需的。知識越廣泛,越有潛力成為福爾摩斯。
快速聚焦重要資訊
這點非常困難,就像我們要從『大家來找碴』中馬上找到關鍵點一樣,在面對一個畫面或是一團雜亂的資訊時,如何對資訊『放大、縮小』並正確聚焦,是觀察的藝術。
許多善於觀察的人,能在第一眼掃過對方的服裝、穿著、打扮,以判斷對方的家境、風格等,這是從『物品』這個維度聚焦的結果。深度思考力與想像力
這是最困難的部分,需要一生的時間刻意訓練。推理從 A 導向 B 是簡單的,但從 B 反推回 A 卻困難重重。
足夠的知識能開啟更豐富的想像力;深度的思考能力則能使推理更為嚴謹。自我迭代推理能力
推理的可靠度會隨證據的完整性提高,然而現實並不像遊戲,不會提供足夠的證據和劇本來推理。
因此,我們必須訓練如機器般的能力,根據手中證據推測事物發生的機率,並迭代自己的思考方式。
只有不斷累積思考框架,並將其適用於各種推理,預測事情最可能發生的機率,才能使推理能力日益增強。
🛠️ 本週 AI 新聞 & 工具
1. HarveyAI:律師事務所專用 LLM #AI產業應用
產業應用是一個很值得關注的方向,當大公司開始重度使用 AI 時,將帶動更多相關領域的公司往 AI 轉型發展。
HarveyAI 有最強的投資機構 + 最頂尖的律師事務所合作 + 頂尖的團隊成員,想想都讓人期待。
▎強大的投資機構(看好的前景)
HarveyAI 是專門幫律師事務所打造的大型語言模型 AI,去年由 OpenAI 投資啟動基金 500 萬美元,如今在上個月又獲得紅杉資本 2100 萬美元的投資。
除此之外還有世界級的 VC(風險投資家)如 Sarah Guo、Jeff Dean 或是 Elad Gil 的支持。
▎全球最頂尖的律師事務所相繼投入
今年 2 月,全球最頂尖的律師事務所之一安理國際 (Allen & Overy) 宣布已將 Harvey 整合到其全球業務中,43 個以多種語言運營的辦事處中,將有 3500 多名律師將使用它。
然後在 3 月,另一間同樣為全球最大的律師事務所之一普華永道(PwC),宣布與 Harvey 建立全球合作夥伴關係,讓普華永道的法律專業人士在 Big 4 中獲得 Harvey 平台的獨家訪問權。
註:“Big 4” 指的是全球最大的四家會計師事務所,即 PwC、Deloitte、EY、KPMG。
▎HarveyAI 有什麼能力?
☆ 生成長篇的法律文件
☆ 具備專業的法律知識
☆ 回答複雜的法律問題
☆ 利用數百萬份文件進行判決分析
☆ 針對不同領域(公司)建立客製化模型
▎團隊成員
聯合創始人
Gabriel Pereyra,前 DeepMind 和 Meta 的 AI 研究科學家
Winston Weinberg,O'Melveny 前證券和反壟斷律師
早期團隊成員
BK,Superhuman 的第一位工程師
Daniel,Tesla Autopilot 的高級機器學習科學家,在 Twitter 收購期間由 Elon 親自召集
Spencer,Meta AI 的 BlenderBot 研究工程師
===
他們現在正在秘密開發第二個產品,比第一個產品更有野心。如果 Harvey 做對了,他們可能會改變法律行業並成為一家價值超過 1000 億美元的公司。
原始推文介紹:https://twitter.com/ai__pub/status/1644735555752853504
2. ChatGPT Plugin 介紹(仍在增加中)
整理了以下 45 個 Plugin,大家可從裡面找有沒有適合自己需求的 Plugin。不過有些像是網購或訂飯店的可能不適合台灣,要注意一下。
Slack:查詢 Slack 資訊。
Zapier:與 5000+ 應用程式進行互動,例如 Google Sheets 和 Docs。
Expedia:在 ChatGPT 開始你的旅行計劃。
Klarna 購物:在成千上萬的線上商店中搜索並比較價格。
Vogue:搜索時尚雜誌 Vogue 的文章。
To-Do:在 ChatGPT 中管理待辦事項清單。
Lowes:為所有家庭建設需求找到合適的工具。
Speechki:讓 ChatGPT 將你的文本轉換為音檔。
FigGPT:在 ChatGPT 中使用 Figma 設計。
Noteable:在 Python、SQL 和 Markdown 中建立 notebook,以便探索和視覺化數據。
KAYAK:在 ChatGPT 中規劃並預訂你的下一次旅行。
LangChain 文件:獲取最新的 LangChain Python 庫資訊。
Weather Report:在幾秒鐘內獲取每個城市的最新天氣資料。
Crypto Price:獲取任何加密貨幣的價格。
NBA:獲取最新的 NBA 排名和統計資料。
Qdrant:可以搜尋 Qdrant 的文件。
Open Table:隨時隨地搜尋並預訂餐廳。
Zilliz Plugin:搜尋你的文件並與之交談。
Wolfram:獲取計算、數學、策展知識和即時資料。
Pricerunner:獲取完美的購物建議。
DesignerGPT:在 ChatGPT 中生成一個網站。
Milo Family AI:將你和孩子的任何 20 分鐘變成神奇的時間。
Chess:在 ChatGPT 中下棋。
Instacart:從你附近的商店訂購雜貨。
Send Email:通過 ChatGPT 發送完美的電子郵件。
FiscalNote:獲取法律和政治目的的即時資料集。
DAN:更改 ChatGPT 的個性。
United Nations:搜尋選定的聯合國文件。
Kraftful:快速達到產品市場契合度,擴大用戶基礎並增加收益。
Golden:根據你的需求客製化 Plugin!
Tutory:隨時隨地接觸輔導服務。
Shimmer:追蹤飲食狀況並在餐廳獲得更健康的選項。
One word Domain:描述你的業務並為其獲取完美的網域名稱。
Redfin:為你的下一套房子或投資進行房地產市場研究。
Portfoliopilot:這是你的一站式投資指南。
Zillow:搜尋列表,查看房屋詳情等。
Giftwrap:在一個平台上獲取送禮想法,購買並配送。
Tasty:發現新的食譜和適合你的飲食計劃。
Hauling Buddies:在你的區域找到可以信賴的動物運輸商。
Tablelog:找到日本任何時刻都有空位的餐廳。
Yabble:創造調查,收集數據並進行分析。
Algorithma:在沉浸式模擬器中體驗虛擬生活。
Vivian Health:在你想要的地區找到醫療工作。
CreatiCode:將 Scratch 程序顯示為圖像並編寫2D/3D程序。
Argil Ai:在 ChatGPT 中生成圖像。
圖片來源: https://twitter.com/....../1658495120495513602/photo/1
除了轉成繁體外還把一些詞彙進行了微調,部分 Plugin 不是官方認證,所以需要透過網域加入
3. Google 教學影片:介紹大型語言模型
這部影片科普了 LLM(大型語言模型)跟生成式 AI 及一些基本 AI 介紹,是個無論是 AI 新手還是接觸了一陣子的人都很推薦一看的影片。
我這邊也用 GPT-4 協助整理重點及心智圖,並請 GPT-4 用淺顯易懂的話來呈現。
=============================================
使用 Plugin『Show me』畫心智圖
使用瀏覽器擴充元件『Glarity』複製影片字幕(影片超過十分鐘所以 Plugin『Video Insight』無法使用)
使用以下 prompt 請 GPT-4 整理重點:
『請你將以下內容用中學生也聽得懂的方式做重點整理,並去除不必要的技術細節,讓一般大眾明白這部影片內容,並在不同的段落用子標題呈現,若有需要也可以用有序或無序列點呈現。過程中比較複雜的概念也可以一邊搭配心智圖一邊做說明。』
然後附上字幕
=============================================
▎1. 大型語言模型的定義和應用
大型語言模型是深度學習的一部分,也是生成式 AI 的一部分。它們可以被預訓練,然後微調用於特定的目的。
這些模型可以被訓練來解決一般的語言問題,如文本分類、問答、文件摘要和文本生成等,並可以被應用於零售、金融和娛樂等不同的領域。
▎2. 生成式 AI 的能力
生成式 AI 是一種可以產生新內容的人工智慧,包括文字、圖片、音檔和合成數據等。
▎3. 提示設計與提示工程
提示設計與提示工程是自然語言處理中的兩個相關概念。
提示設計是創建清晰、簡潔和有信息量的提示的過程,而提示工程則是為了提高性能而設計提示的過程。
▎4. 大型語言模型的任務類型
大型語言模型有三種任務類型:通用語言模型、指令調整和對話調整。
通用語言模型根據訓練數據中的語言來預測下一個詞,這就像搜尋中的自動完成功能。
指令調整的模型被訓練來對輸入的指令做出回應,例如,根據 X 的文本進行摘要,或者生成一首 X 風格的詩。
對話調整的模型被訓練來進行對話,通常是在長時間的來回對話中,並且通常對自然的問題形式的表述效果更好。
▎5. Google 的大型語言模型工具
Google 提供了一些工具來開發和使用大型語言模型,包括 Generative AI Studio、Generative AI App Builder 和 PaLM API 等。
這些工具可以幫助開發者快速探索和定制生成式 AI 模型,並在 Google Cloud 上使用這些模型。
▎6. 預訓練與微調
大型語言模型的預訓練與微調是其主要特性之一。
預訓練是指用大量數據訓練模型以解決一般性的問題,而微調則是在預訓練的基礎上,使用相對較小的數據集來針對特定的目標進行訓練。
這就像訓練狗一樣,首先我們會教狗一些基本的命令,然後再根據需要進行特殊的訓練。
▎7. 大型語言模型的優勢
大型語言模型的優勢在於,一個模型就可以用於不同的任務,並且在微調時只需要很少的領域訓練數據。
此外,當我們增加更多的數據和參數時,大型語言模型的性能會持續提升。
▎8. Google 的 PaLM 模型
PaLM 是 Google 在 2022 年 4 月發布的一種大型語言模型,它有 5400 億個參數,並在多種語言任務上達到了最先進的性能。
PaLM 是一種密集的解碼器模型,它利用了新的路徑系統,使 Google 能夠在多個 TPU V4 pods 上高效地訓練單一模型。
▎9. 傳統編程與生成模型的比較
我們已經從傳統的編程方式發展到了神經網路和生成模型。
在傳統的編程中,我們需要硬編碼規則來區分不同的對象,而在神經網路的時代,我們可以給網路提供一些圖片,讓它來預測對象。
在生成模型的時代,我們可以生成自己的內容,無論是文字、圖像、音頻、視頻還是其他的。
▎10. 大型語言模型的開發與傳統機器學習的比較
在開發大型語言模型時,你不需要是一個專家,也不需要訓練樣本,甚至不需要訓練一個模型。
你只需要考慮提示設計,這是創建清晰、簡潔且具有信息量的提示的過程,這是自然語言處理的一個重要部分。
相比之下,在傳統的機器學習中,你需要訓練樣本來訓練一個模型。你還需要計算時間和硬體。例如,你可能需要收集訓練數據並專門為法律或醫療領域調整模型。
此外,Google 的生成式AI工作室和生成式 AI 應用構建器等工具,可以讓開發者更容易地創建和部署生成式AI模型。例如,生成式 AI 應用構建器有一個拖放界面,使設計和構建應用變得容易,還有一個視覺編輯器,使創建和編輯應用內容變得容易。
YT 原始影片連結:
簡中影片翻譯版本來源:
https://twitter.com/dotey/status/1658335579476484098
4. DragGAN:任意托拉就能改變圖片樣貌!
雖然不知道實際使用效果如何,但這個 Demo 效果也太驚人
想像一下,當我們在畫圖時,希望畫的每一個物件,無論是人、動物、車子,還是風景,都能按照自己的意願去改變他們的姿勢、形狀、表情,或是在畫布上的位置。
目前的技術有點像是在創作的時候,有一個既定的模型或者模板,只能根據這些模型或模板去做一些小小的改動,就好像有一張你只能塗色的填色本。但是這樣的方法往往不夠自由、精確,也不夠通用。
而 Demo 功能背後的團隊提出了一種新的方法,你可以用筆在任何地方"拖"圖片的任何一點,精確地移動到你想要的地方,就像玩黏土一樣。
這種新的方法叫做 DragGAN,它主要由兩個部分組成:
基於特徵的運動監督,這可以驅動你"抓取"的點向目標位置移動
新的點追蹤方法,利用 GAN 的特徵來持續定位你"抓取"的點的位置。
希望出來的結果可以像 Demo 一樣厲害,對圖片修剪創作的工作又會有很大的衝擊。
其實就算沒有像 Demo 一樣厲害,但也可以預見未來一定會往這樣的方向去發展,用別的技術做起來。
研究論文: https://vcai.mpi-inf.mpg.de/projects/DragGAN/
5. 如何讓 Browsing 的 Plugin 給出好結果
大多數人剛拿到瀏覽功能時會說:『終於拿到瀏覽功能的 Plugin 啦』
很開心的用了一下後會發現:
『怎麼那麼慢又那麼難用』
『乾好爛我不如用 Bing』
『這個 Plugin 可以刪了』
以上種種情況您是否也發生呢,只要一句話、一個魔法讓它的結果變成實用的結果。
只要輸入:
======================================
Research in English, answer in Traditional Chinese
======================================
▎為什麼這樣有效?
因為 ChatGPT 的瀏覽 Plugin 是模擬人的行為,然後用 Bing 的搜尋引擎來找答案,可是重點是『各位平常會用 Bing 搜尋嗎?』
因為 Bing 都給出的搜尋結果品質大不如 Google,這也是兩者競爭中 Bing 持續存在的問題。
用中文在 Bing 上搜尋的搜尋結果遠比 Google 差,但是英文搜尋的結果會好一些,所以如果用中文對話 browsing 功能請加入上面那句話。
用英文來與 ChatGPT 對話結果一定會是最好,所以如果未來嘗試其它 Plugin 時也要記得用英文試看看,可以解決部分回答不佳的狀況。
▎額外推薦:ScholarAI Plugin
這個 Plugin 可以針對特定問題,更好的找到相關的研究論文,是個很實用的 Plugin,效果放在留言區,記得也加上那句話。
6. Prompt 技巧:30 個關鍵字快速認識新行業
看到國外用這個技巧幫助學習一個新領域的知識,效果還不錯。
Prompt(將 SEO 換成其它想知道的領域):
================================
你知道麥肯錫快速瞭解行業的方法嗎?就是通過大量行業高頻關鍵字來建立概念。現在我是一個對 SEO 不瞭解的新手,請你給我整理出30個常用關鍵字,製作成Markdown表格,表頭是:關鍵字(英文)、分類(中文)、介紹(限50字)、使用場景。
================================
其實用 prompt 最有效的方式就是搭配不同框架來產出內容,框架就是一個精練過的思考方式,用來思考很有效,請 ChatGPT 運用更有效。
如果領域比較新或是有時效性,建議可以搭配 WebPilot 或 Browsing 功能來抓取新領域的內容介紹。
然後下一個 prompt 用『請按照這份表格制定一個新手SEO學習計劃表』,就能有一份學習計劃表了。
p.s. 建議內容生成後還是要給專門領域的人確認喔!
怎麼知道是用bing搜尋的?