Loading portfolio
主なポイント
- セキュアなpreload bridgeを備えたElectronデスクトップラッパーを構築しました。
- Three.jsでロボットの顔ポッド、目、口、首の動き、環境光をレンダリングしました。
- 127.0.0.1:11434のローカルサーバー経由でOllamaチャットを統合しました。
- LLMが発話、目、口、首、環境、声、振る舞いを予測可能に制御できるbrobot.action.v1 JSONスキーマを設計しました。
- テキスト入力、画像アップロード、音声入力、音声出力、カメラスナップショット、オフラインフォールバックを追加しました。
担当範囲
- ロボット動作のための構造化LLMアクション契約を設計しました。
- Electronシェルとブラウザ側のコンパニオンロボット体験を構築しました。
- マルチモーダル入力経路とローカルフォールバック動作を実装しました。
- リモートモデル依存を避け、Ollamaでローカルファーストなプロトタイプにしました。
関連プロジェクト
2026 / 最近のGitHubプロジェクト
Pico Hyperion Sentinel
Hyperion UDPデータからLED照明、サーボ動作、目の表情を同期させるインタラクティブなアンビエント照明兼アニマトロニックアイシステム。
2026 / 最近のGitHubプロジェクト
Ambilight ESP32 HomeKit
Hyperionのテレビ用アンビエントバックライトとApple HomeKitのスマートライト制御をつなぐ、デュアルモードESP32-C3 LEDコントローラー。
2026 / 最近のGitHubプロジェクト
Pico W AC Controller
リバースエンジニアリングした富士通IRコマンドを生成し、HomebridgeとApple HomeKit経由でエアコンを操作できるPico WスマートACコントローラー。