機器小鴨鴨將於今年聖誕節入侵地球！

知名開源模型平台 Hugging Face 發表最新產品，不是什麼高大上的 AI 技術，而是一隻活靈活現的機器鴨 Microduck（見影片），它透過攝影機與光學雷達感測器以及兩個慣性測量單元來感知世界。

Microduck 要價不菲，開賣售價為 399 美元（約為 12,619 台幣）。這隻高 25 公分的鴨子可以搖搖晃晃地行走、用嘴巴夾東西、被推倒還會自動平衡，甚至還能溜直排輪。

但若只是把它當成玩具那就太小看它了，公司執行長表示「你可以透過強化學習教牠新招數的開源機器人」，其 SDK、模擬環境與完整的強化學習訓練堆疊皆已在 GitHub 上提供。

強化學習是 AI 的一種訓練方法，核心概念是「透過試錯與獎懲來學習」。擊敗世界圍棋冠軍的 AlphaGo 就是就是使用這種方法實現。

訓練方式大致有兩個重點：

• 試錯與反饋：AI 在環境中不斷嘗試各種動作。做對了會得到「獎勵」（加分），做錯了會得到「懲罰」（扣分）。
• 自主優化：AI 的目標是拿到「最高的累積總分」，因此它會在無數次失敗與成功中，自己摸索出最佳的應對策略。

可以把強化學習想像成跟訓練狗狗類似：

• 狗狗在跟人類的互動中不斷嘗試理解人類行為，做對了會得到「獎勵」（食物），做錯了什麼也不會得到（嚴格禁止人類懲罰狗狗！）
• 狗狗的目標是拿的「最多的好吃的食物」，因此牠會在每天的生活中持續嘗試，自己摸索出能夠吃到最多食物的策略。

那麼……在哪裡才能買得到呢？如果你也有這種想法先別急，儘管 Microduck 使用開源軟體，讓消費者（開發者）擁有審查與控制能力，但依然無法確保個人隱私資訊能絕對安全，如果有這方面的考量，可能還要多加觀望。不過話說回來，如果家裡已經有掃地機器人或者其他攝影機，多一隻機器小鴨鴨好似也無仿。

AI 機器人，或學術名稱具身人工智慧（Physical AI）目前是產學界重要的研究方向，但該領域不像大語言模型可以從網路上取得大量資料集，其缺少能用以訓練的內容一直是一大問題。因此不難理解 Hugging Face 開發 Microduck 的動機與商業考量，以類似玩具與學習工具這種無傷大雅的方式搜集數據，是很聰明的一步棋。

我要去研究如何下訂了 🦆