所有節目›AI Engineer Europe 2026World's Fair 2026World's Fair 線上軌AI in HealthcareSoftware Factories
Reachy Mini: the $300 open source robot you can actually hack在 YouTube 看這一場

AI Engineer Europe 2026 · 演講 · 2026-05-29 · 21 分

人人都能改的桌上型機器人

Reachy Mini: the $300 open source robot you can actually hack · Andres Marafioti,Hugging Face

Andres 認為機器人不該只是五萬美元起跳的人形機器人,並介紹 Hugging Face 的 Reachy Mini,以及背後的語音對話架構與 Qwen3 TTS 加速做法。

語音架構看原片 ↗

概要

  • 現有機器人太貴也太封閉Andres 說人形機器人與居家機器人多落在五位數美元的中段價位,五萬美元起跳,而且偏向模仿人類外型,很難讓學生或個人拿來玩。
  • Reachy Mini 的定位它是會表情、能對話但不像人的機器人,出貨時是未組裝的,使用者要自己裝,壞了也能自己換零件。
  • 語音是主要互動方式Andres 認為語音 AI 已經夠成熟,所以替機器人做了對話軟體,模型與 agent 都開源,也提供託管版本給不想自己跑 GPU 的人。
  • 三層系統架構中間是 speech-to-speech 管線,上面是跑在機器人上的對話 app,下面是部署在 Hugging Face 推論端點的服務,LLM 另外獨立擴充。
  • 把 Qwen3 TTS 做到即時Andres 說模型品質到位,但速度跟論文宣稱的不符,於是花了約兩週,用 streaming、靜態 KV cache 與 graph capture 把即時係數從 0.8 拉到 5.8。
  • 希望互動方式由社群決定Andres 希望大家在這台機器人上做出自己的互動,並說自己用 Codex 一次就做出了現場跑的那個 app。

原話

  • “So what I see here is that voice AI is quite mature.”

    我看到的是,語音 AI 已經相當成熟

    ▶ 04:06
  • “If you have a computer, you should be able to play with it and make things.”

    只要你有電腦,就應該能拿它來玩、做東西

    ▶ 04:41
  • “I don't see anyone going to a humanoid robot and taking out the keyboard and typing something.”

    我想不到有誰會走到人形機器人前面,拿出鍵盤去打字

    ▶ 07:29
  • “The paper claimed very low latencies, but the model didn't really achieve them.”

    論文宣稱延遲很低,但模型實際上沒做到

    ▶ 13:17
  • “we don't want it to be guarded behind 50k robots.”

    我們不希望它被鎖在五萬美元的機器人後面

    ▶ 17:33

延伸

  • Andres 說 Reachy Mini 大概是他們第四個開源機器人,並提到可接合的機械手臂與一個叫 Kiwi 的三輪底座,說設計上放得進去,但自己還沒看過有人做出來。
  • 問答中 Andres 說 Qwen3 TTS 的開源實作完整但偏慢,像研究用的版本,官方 API 反而快,並猜這是想把人導向 API 的策略。

章節

點時碼直接跳到原片的那一段。

  1. 開場與機器人現況Andres 說明這場要談 Reachy Mini 的由來與目標,並先帶過機器人進展:人形機器人、居家機器人與自駕車。
  2. 太貴又太像人Andres 點出這些機器人價格都在五萬美元以上,外型又刻意模仿人類,認為這是個錯誤。沒有高中會訂十台給學生玩,也很難調整。
  3. 語音 AI 已經成熟Andres 列出商用與開源的語音工具,包括 Gradium、GPT Realtime、Siri、Kokoro 與 Hugging Face 的 speech-to-speech 管線,結論是工具都已齊備。
  4. 為什麼做 Reachy Mini目標是讓未來的機器人體驗不被單一公司主導,像電腦那樣由駭客、研究者與學生共同打造;它會表情、能對話,但不像人。
  5. 自己組裝、自己修機器人以未組裝狀態出貨,使用者組裝後就掌握全部知識與工具,壞了只要訂零件更換。
  6. 兩個版本與社群改裝兩款的差別在有沒有 Raspberry Pi 與電池,用不到的可以買較便宜的那款,賣給高中與大學的就是這款;也舉出社群 3D 列印配件做成萬聖節南瓜,以及有人發現能摸牠、讓牠發出呼嚕聲。
  7. 語音互動與影片示範Andres 認為與機器人互動主要靠語音,並播放當天早上錄的影片:機器人回話、拍照描述畫面、做出情緒動作。
  8. 全部開源,已出貨 7,500 台模型與 agent 都開源,也提供託管版本;Andres 說已出貨 7,500 台,對話是最常用的 app。
  9. 對話系統三層架構說明 VAD、Parakeet 語音轉文字(每 150 毫秒轉一次)、LLM 與 Qwen3 TTS,以及機器人上負責回音消除、動作調度與臉部追蹤的對話 app。
  10. 部署與 LLM 分開擴充speech-to-speech 部署在推論端點並依連線機器人數量調整,LLM 另外擴充,因為各節點的使用量差異很大。
  11. Qwen3 TTS 品質好但不夠快這個開源 TTS 出來時品質好,實際速度卻達不到論文宣稱的低延遲,Andres 花了約兩週搭配 Codex 想辦法加速。
  12. 加速的四個改動先改成 streaming,再避免 CPU 與 GPU 反覆來回,把動態 KV cache 換成靜態、用 graph capture 編譯整個模型;即時係數從 0.8 到 5.8。
  13. TTS 示範與延遲提醒播放在 Hugging Face Space 上複製聲音的錄影,並提醒使用者感受到的延遲包含整套基礎設施,不只是模型。
  14. 呼籲大家自己改Andres 希望機器人的互動方式由眾人共同發展,不要被鎖在五萬美元的機器人後面,並說現場那個 app 是用 Codex 一次生成的。
  15. 問答聽眾問到硬體與語言限制、能不能加伺服馬達讓它移動,以及 Qwen3 TTS 的開源實作表現。

名詞

Reachy Mini
Hugging Face 的小型開源機器人,會表情、能對話,出貨時是未組裝的
Hugging Face
Andres 任職的公司,在那裡帶領多模態研究
speech-to-speech pipeline
Hugging Face 的語音管線,串起 VAD、語音轉文字、LLM 與 TTS,Andres 是維護者
Parakeet
Andres 選用的語音轉文字模型,因為很快,每 150 毫秒轉一次
Qwen3 TTS
Qwen 的開源 TTS 模型,Andres 花約兩週加速它,讓語音 agent 能用
KV cache
這場中指模型生成時的快取,從動態改成靜態才能做 graph capture
Kokoro
Andres 舉例的小型開源 TTS,只有 80 million 個參數
Codex
Andres 用來加速 Qwen3 TTS,也用來一次做出現場 app 的工具

相關影片 同屬「語音架構」