Crew Story:驗證 Gemini 設定與 Live 相機讀書
Crew Story 最近合併 Gemini Key 驗證與 Live 相機讀書。這和 Teacher 的教材陪讀有共通技術:連續畫面、模型看到最新影像、語音與頁面切換同步。
研究重點
專案進度:公開 PR #11 合併了 key validation 與 Gemini 3.8 Live camera book reading。
研究判斷:視覺陪讀不能只確保『模型支援相機』。需要定義何時送畫面、如何丟棄過期 frame、打斷時是否取消舊的 vision task,以及文字區域如何在相機啟用時保持可捲動。
這篇是現有專案功能驗收方向,不是把模型官方聲稱的能力當成已實測成果。
為什麼值得關注
Web 的 Story / Teacher 相機邏輯需要同樣守住 frame 時序。最容易出錯的是:鏡頭畫面已更新,但模型仍在描述上一頁,讓使用者誤以為相機失效。
可以進一步驗證什麼?
- 驗證 Story 相機開啟、切頁、旋轉與權限拒絕的最新 frame 是否正確送達
- 建立影像 timestamp 與 user turn 綁定,避免舊幀在新問題中被使用
- 對照 App 和 Web 在相機背景恢復後的語音、視覺狀態
參考資料
crew-story · c5f5b29 ↗2026-10-10T01:27:35Z · 公開 GitHub Commit
延伸探索
相關研究
- Gemini 3.8 Live:先驗證打斷、相機和非同步工具,不必急著換更貴模型共同關注 Crew Story · 2026-10-11
- Crew Web:Teacher 與 Story 桌面版工作區布局共同關注 Crew Story · 2026-10-11
- Crew Teacher:Live 斷線保留學生語音並接續未完對話共同關注 Crew Teacher · 2026-10-11