free web page counters

教學:Meta Muse「小龍蝦」超實用範例   WhatsApp 叫 AI 操作電腦、AI 自己搵料出 Threads 帖文

教學:Meta Muse「小龍蝦」超實用範例   WhatsApp 叫 AI 操作電腦、AI 自己搵料出 Threads 帖文
2

近年 AI 發展迅速,已經不再只局限於屏幕上的「你問我答」,而是正式進化成能夠真正替你動手做事的「AI 代理 (AI Agent)」。而近期備受矚目的 Muse,正正完美展現了這個未來趨勢,堪稱你的全能數碼私人助理!

Meta Muse 小龍蝦範例界面截圖.

Muse 的最大特點,在於它能夠打破軟件、網絡與裝置之間的隔閡。綜合其核心優勢,主要有以下幾點:

  • 直接操作電腦 App 兼具備「視覺」: 它不只是個聊天機械人,它有能力直接打開並操作你電腦上的軟件(例如 Adobe Lightroom),甚至能直接「看懂」你電腦裡的檔案內容(例如自動辨認哪張是人像相片),幫你精準找圖。
  • 與 WhatsApp 無縫遙控聯動: 你甚至不需要坐在電腦前!只要將 Muse 連結 WhatsApp,你就能隨時隨地用文字或語音下達指令。無論是叫它從電腦找一張相片傳給你,還是分析成田機場到新宿的最快路線,它都能在 WhatsApp 瞬間為你解答。
  • 強大的自動化排程與匯報: Muse 能夠化身資料搜集員,按你的要求定時(例如每天晚上 8 點)自動整合 YouTube 或 IG 的最新資訊,製作成精美的 PDF 報紙並主動發送給你。
  • 社交媒體營運與網頁操作: 憑藉其內置瀏覽器與 Meta 家族的優勢,它能替你將檔案上載到 Flickr 等網站,甚至自動為你找尋新聞題材,並在 Threads、Facebook 或 IG 上草擬及發出帖文,直頭化身你的專屬 AI 小編!
  • 安全與私隱並重: 在處理登入或發佈帖文等敏感操作時,Muse 會把控制權交還給你,並設有清晰的歷史記錄與權限管理,讓你隨時監察它的工作。

想知道這位強大的 AI 助手實際在生活中可以怎樣應用?到底要怎樣設定才能發揮它的最大潛能?小編以下就為大家準備了一系列最常用、最貼地的 Muse 實戰操作教學。無論你是想提升工作效率,還是想找個幫手打理社交平台,都可以參考以下攻略,一步步教你駕馭 Muse。

Leica M11-P相機圖片展示.

▲Muse 可以在你指定的書籤資料夾中搵資料,模擬人類掃網站、格價,比起單純「搜尋」再行前多一步

有關 Meta Muse 如何在香港登記、初步領取免費 Token 的教學,可參考我們之前的教學文章。

Meta Muse AI Agent示範,展示聊天界面與技術應用.

教學 1:實試操作電腦 App:在 Lightroom 找出並張圖片

Muse 的最大特色,是可以直接操作很多電腦App(Safari, Chrome等瀏覽器除外)。今次我們就嘗試讓它操作我的 Adobe Lightroom。

展示如何使用Meta Muse創建小龍蝦模型.

方法是在 Muse 下達指令:

「在 Lightroom 中搜尋由 ILCE-7M3 數碼相機拍攝的相片」

我們建議在下達指令時,相關指令名稱、找尋的東西跟畫面上看到的一樣(所以我特別將 Sony A7III 這個名字改成程式畫面實際顯示的 ILCE-7M3 型號)。

在 Lightroom 中選擇 ILCE-7M3 相機拍攝的照片.

我們看到,Muse 會幫我打開 Adobe Lightroom,並打開圖片資料庫。它懂得自己打開過濾器功能,並找尋ILCE-7M3相機的項目。我們可見,Muse是一步一步捲動相機清單,這部份需要的時間比想像中長。但還好它最終也找到,給我的最終結果,就是如圖的畫面。

夜晚街道交通監控屏幕顯示車輛情況.

▲我們可放大操作預覽視窗,可留意到 Muse 操作小編電腦中的 Adobe Lightroom,並打開了過濾器功能

AI 操作電腦範例圖示.

▲Muse 會自動辨識畫面,我們可看到它在「相機」的欄位不斷捲動,一直找尋我們需要的相機

展示如何操作Meta Muse耳機的步驟圖.

▲最後它找到了由 Sony A7III 拍攝的相片,我可以接手這個 Lightroom 繼續使用

Mac Lightroom Classic相機設定畫面.

▲而 Muse 完成了我給它的指令後,除了在 App 完成,也會向我匯報結果

教學 2:實試 Muse 內置瀏覽器操作:為我上載相片到 Flickr

Muse 可以為你操作電腦App做任何事。但就如很多同類 AI 代理一樣,Muse 不能直接控制你的瀏覽器,因此要使用Muse的內置Chrome瀏覽器。問題是,你想登入某些網路服務,就要將登入名稱、密碼向這個瀏覽器提供。大家必須留意私隱問題。為了測試實際功效,我們嘗試叫 Muse 將放在電腦桌面的圖片,上載到我的 Flickr 帳戶。我在 Muse 就打了一句指令並送出:

「將我桌面上,由數碼相機拍攝的相片,上載到我的 Flickr 帳戶」

電腦桌面上的多個圖片檔案圖示.

彩繪牆上的創意街頭藝術作品.

▲現在我的桌面上就有 3 張相片,現在通過 AI,可以叫 Muse 幫我上傳到我的 Flickr 帳戶。只要一個指令便能完成

WhatsApp 聊天界面展示AI操作電腦. ▲輸入並發出指令開始

Muse 會開始為你打點一切,它會用內置瀏覽器打開 Flickr 網站,但由於需要登入 Flickr 帳戶,它會在登入畫面停下來,並要求你自己手動登入。

Meta Muse 小龍蝦範例操作界面.

▲當 Muse 遇到你有問題需要你手動操作瀏覽器(例如登入你的帳戶),它會主動通知你,請按「開啟預覽」按鈕

在預覽畫面,請按「控制瀏覽器」,內置瀏覽器的控制權便會在你手。你照平時一樣登入 Flickr 帳戶便可。第一次執行時,Muse 需要你的允許,你可選擇一律允許,讓 Muse 以後自己登入你的 Flickr 帳戶。

Flickr登入界面背景山景圖.

▲Muse 內部瀏覽器會自動進入 Flickr 登入頁面,現在需要你控制,請按「控制瀏覽器」按鈕,並入去手動登入一次你的 Flickr

登入成功後,可見 Muse 會自動取得我桌面上數碼相機拍攝的相片(桌面上其他圖片,例如畫面截圖會被自動辨識,並不會上載),之後直接加入到 Flickr 上載畫面,並完成替我上載圖片。

Meta Muse 瀏覽器授權畫面,允許存取Flickr相簿.

▲第一次上載檔案到 Flickr (或任何網站)時,都會需要你允許授權。如按「一律允許此網站」,下次用 Flickr 時就不用再授權。

WhatsApp 操作電腦的 AI 自動化範例.

▲你會看到 Muse 會自動打開 Flickr 的上載頁面,並將它幫你自動選擇好的相片上傳

彩繪牆上的創意街頭藝術作品.

▲最後你可看到 Flickr 帳戶已上載好我指令中的相片,途中我從未提及任何檔案名稱,是 Muse 為我揀選好相片上載

教學 3:用 WhatsApp 隨時隨地遙距操作電腦上的 Muse,打破空間限制

在眾多功能中,Muse 最令人驚豔的實用特點之一,就是它能夠與港人最常使用的通訊軟件 WhatsApp 進行無縫聯動。透過這項功能,你不再需要死守在電腦屏幕前,只要一機在手,隨時隨地都能夠利用 WhatsApp 透過文字或語音向電腦上的 Muse 下達指令。以下為大家詳細示範如何設定及實際操作。

AI 操作電腦與Threads貼文範例.

步驟一:極速完成 WhatsApp 連結設定

將 Muse 與 WhatsApp 連結的設定過程非常直觀且簡單。你只需要在電腦端的 Muse 聊天畫面中,直接輸入或用語音說出:

「我想用 WhatsApp 來操作 Muse」

接收到指令後,Muse 會立刻在聊天介面中彈出詳盡的教學指示,更貼心的是,它會同時提供一條捷徑連結。你只需輕輕一點該連結,就能直接開啟相關的設定畫面。

使用 WhatsApp 操作電腦的範例圖.

進入設定畫面後,系統會生成並顯示一個專屬的 QR Code。此時,請拿出你的手機並打開 WhatsApp Messenger 應用程式。進入 WhatsApp 的「設定」頁面,選擇「已連接裝置」,接著點擊「新增裝置」,然後使用手機鏡頭掃描電腦屏幕上 Muse 顯示的 QR Code,即可瞬間完成連結。整個過程就如同登入 WhatsApp 網頁版一樣簡單快捷。

AI 操作電腦與Threads貼文示意圖.

▲打開手機版 WhatsApp,進入設定頁面>已連接裝置,按「+連接裝置」;

用手機掃描QR碼的實用範例.

▲手機版 WhatsApp 掃描電腦版 Muse 畫面上顯示的 QR Code

WhatsApp連接成功訊息截圖.

▲連結成功之後,你便可在手機版 WhatsApp 入面,找到新聯絡人「Muse」,直接跟他說話便可,當然可輸入中文、夾雜中英文的廣東話。

步驟二:實測遙距 AI 視覺搜尋,告別死記檔案名稱

為了測試這個跨平台操作的威力,我們進行了一個日常生活中非常實用的情境測試。我們事先在電腦桌面上隨意放置了一張人像相片,並且刻意不去記憶該檔案的名稱或確實路徑。

女性在電腦前微笑,背景是建築物.

▲今次小編在桌面放置了一張人像相片,另外桌面還有些畫面截圖,要求 Muse 能辨別出這張相片,通過 WhatsApp 發送給我

當我離開電腦,打開手機的 WhatsApp 尋找 Muse 的對話視窗,並向它下達指令:

「幫我在電腦桌面上找一張人像相片,然後發送給我。」

WhatsApp與AI智能操作界面.

這個測試展現 Muse 的「視覺」與檔案理解能力。Muse 接收指令後,並非單純依賴檔名進行字串搜索。相反,它能夠在背景檢閱並分析桌面上的所有相片內容。它真正「看懂」了哪一張相片裡有「人像」,並精準地將目標相片找出來。

年輕女子在戶外微笑並合掌.

最後,Muse 會將找到的人像相片直接透過 WhatsApp 傳送過來。整個過程中,我們完全不需要知道檔案的任何名稱或元數據,只需要用最自然的對話方式,就能讓 Muse 成為你在電腦裡的一對眼睛和雙手,為你翻找並傳送所需檔案,大大提升了日常工作的便利性。

教學 4:叫 Muse 幫我找資料,然後定時向我匯報

現在手機都可上網,用手機來找資料都可以啊。但有 AI 幫你在電腦找,有時會方便很多。例如你每天都會看幾個不同網站、YouTube 頻道、Instagram 頻道是否有更新,你可能每日都在不同的地方碌完又碌。現在你可以叫 Muse 幫手,將你關注的頻道更新,每日整理好,整成一個文件放在你面前,做你的秘書主動為你工作。

Meta Muse 小龍蝦範例,展示AI應用於WhatsApp和Threads.

▲這次我們會要求 Muse 幫我們找資料,然後製作成一份「報紙」發給我

今次我們就叫 Muse 幫手,叫它幫我留意每日 Unwire 的 YouTube 頻道、Instagram 帳戶是否有更新,製作成一份報紙形式的 PDF 文件,並在每天的 8PM 小編收工的時間傳送給我。

好簡單,你只要連結好 WhatsApp,就可在 WhatsApp「對話」清單中找到「Muse」,點擊後就可跟你電腦桌面的 Muse 聊天並發出指令。我就在WhatsApp向 Muse 發出了一個訊息:

「請為我找 Unwire 在 Instagram,YouTube 最新的 5 個內容,並寫成圖文並茂的 PDF 報紙,每天 8PM 在 WhatsApp 向我匯報」

Meta Muse 小龍蝦範例.

之後你還可叫它馬上製作一份發給來看看。

Unwire每日科技報PDF文件截圖.

可看到報紙上圖文並茂節錄了 Unwire 的 YouTube, Instagram上的最新內容。它可以直接發送 PDF 給你,也可發連結給你,隨你喜歡。

科技新聞與AI範例圖像.

留意 Muse 用到的瀏覽器,是其內部瀏覽器,並不是用家電腦上的瀏覽器,因此建議用家只讓 Muse 操作毋須登入、毋須分享私隱資料(如帳戶名稱、密碼)的任務。例如你想它登入你的銀行去查找賬戶結餘,這些操作我們極不推薦。

教學 5:叫 Muse 找即時資料,分析後匯報

叫 Muse 找出當刻成田機場去新宿最快路線

有時候上網找資料,我們要輸入很多資料,然後比對不同資訊,再進行決定。現在全部都可交給 Muse 直接為你分析處理。Muse 可以根據你的要求,自己打開瀏覽器,模擬人手去搜尋,而並非使用 AI 的搜尋功能去找答案。

就例如我希望找出由日本成田機場,利用公共交通工具前往東京新宿歌舞伎町最方便、最快捷的方法。平時我們需要打開 Google 地圖或「乘換案內」等 App,輸入資料、時間後查找,再逐條路線比對。現在我們只需要向 Muse 說出一句話(你甚至可在 WhatsApp 的 Muse 用語音跟它說),它背後找完資料,就會向你給出結論。

AI 操作電腦與Threads貼文示範.

AI 操作電腦示範圖.

▲今次測試中,Muse 利用到內部的瀏覽器,親自去 Google 地圖逐條路線嘗試,當然這只是一個範例

WhatsApp AI 操作電腦範例圖示.

▲在模擬人手搜尋後,Muse 仍會以文字給你最終分析結果

另外一個測試,我們希望 Muse 用人手為我找尋某個產品,哪裡買才會平便宜。它並不會用搜尋器,或者網上的資料,而是真正「模擬」人手去官方網站自己找資料。好處是可以無憂找到一些網路上的垃圾內容,而是由 Muse 模擬你上網找資料的方式,逐個網站去找。

AI 操作電腦示範圖像.

▲例如叫它去超級市場找某種商品現時的最新價格,它不是找消委會網站,而是會直接去三間網店,模擬人手去找尋

Muse 小知識:檢視你曾經允許 Muse 的權限、曾排定的工作

很多人會擔心Muse取得太多權限,也想知道Muse曾經在你的電腦上做過甚麼。你可在Muse介面點擊一下Muse的頭像,在右手邊彈出來的選單,你可看到任務歷史、批准權限的記錄、每日排定的工作,以及它的記憶。

Meta Muse 小龍蝦範例操作界面.

例如點擊剛剛「搵桌面人像相並發送」的任務。畫面上會顯示它曾經如何操作過我的桌面;

Meta Muse 小龍蝦範例操作界面.

亦例如剛才我們叫 Muse 每日 8PM 製作一份 Unwire 頻道報紙,也可在記錄中找到。你可隨時編輯或清除。

Meta Muse 小龍蝦範例操作界面.

還有另一個方法,你可以在 Chatbot 直接問 Muse 你以前的排定任務是否存在,它也可用文字直接回答你。

UNWIRE科技資訊WhatsApp傳送PDF文件.

教學 6:叫 Muse 找資料,並為我在社交平台上發出帖文

Muse 的特點,是可以連結 Facebook, Instagram, Threads,在自家 Meta 內的社交平台上找資料,甚至用你的 Meta 帳戶發出帖文。以下測試中,我們用 Muse 能自己找資料的特點,再加上能發出帖文的功能,叫它為我找出有興趣的資訊,再發帖文,直頭化身成為 AI KOL。

步驟 1:初始設定,先連結 Meta 社交平台帳戶

首先你要允許 Muse 連結你的 Meta 社交平台帳戶(雖然 Muse 已經是 Meta 的,但你要取用 FB, IG, Threads 社交媒體,仍需要再連結一次)。在 Muse 上面,直接問:

「我想在 Threads 發出帖文」

馬上就會得到連結至授權頁面的連結。

WhatsApp 與 AI 操作電腦的範例對話.

點擊連結後,出現授權畫面,按確認後,你的Meta社交平台(Facebook, Instagram, Threads)就會連結到你的 Muse。

Meta Instagram登入界面,提示用戶需提供個人資料. Meta Muse應用界面示意圖.

步驟 2:向 Muse 發出指令,讓它幫你發出 Threads/IG/FB 帖文

之後你就可命令 Muse 幫你發出社交平台帖文。例如我希望我的 Threads 上貼出一則與人工智能相關的新聞。我就向 Muse 發出了一個指令:

「請為我在 unwire.hk 的 Facebook 專頁、Instagram 找尋跟 AI 有關的內容 5 個,並以點列式製作新聞簡報,為我在 Threads 內製作帖文發出」

Meta Muse「小龍蝦」AI範例操作示意圖.

當 Muse 找好資料並撰寫好帖文,它一定會先在 Muse 上給你閱覽(不會自動發出帖文)。你確認帖文內容無誤,回覆「OK」;

Meta Muse 小龍蝦範例展示AI應用.

Muse 會再次顯示確認畫面,在此按「允許」,這篇帖文便會發出。

Meta Muse 小龍蝦範例操作界面.

Meta Muse 小龍蝦範例,展示AI操作電腦的實用範例.

▲按「允許」按鈕後,Muse 便會為你在 Theads 發出帖文,它先會向你匯報已成功發出帖文。

再看看小編的 Threads,果然就找到這篇帖文了。

Meta Muse「小龍蝦」範例展示.

總結:Muse 潛力無限,但私隱安全仍需自行把關

經過一連串的實測,Muse 確實展現了作為新一代「AI 代理」的強大實力。它不再只是紙上談兵的聊天對象,而是真正能夠幫你打開 App 找圖、定時整理資訊、甚至直接替你營運社交媒體的全能助手。其強大的「視覺」能力與跨平台(尤其是 WhatsApp)的遙距操作,無疑能為我們的日常工作和生活省下大量時間,大幅提升效率。

然而,正所謂「能力越大,責任越大」,當我們享受 Muse 帶來的極致便利時,也必須對自身的網絡私隱和資訊安全保持高度警覺。

我們必須謹記,讓 Muse 替你代勞,意味著你需要賦予它操作你電腦檔案、使用內置雲端瀏覽器,甚至連結你個人社交平台(如 Facebook、IG、Threads 等)的權限。雖然 Muse 內建了權限管理和歷史記錄功能,讓你隨時可以查看和撤銷授權,但在實際應用時,我們強烈建議大家:必須謹慎衡量到底要向 AI 分享多少個人私隱資料。

總括而言,Muse 是一個極具潛力的工具,只要我們懂得在「便利」與「安全」之間取得平衡,善用其強大功能的同時,好好把關私隱授權的底線,它絕對能成為你在數碼時代不可或缺的最佳拍檔!

Leave A Reply

Your email address will not be published.