第１回 ローカルLLMだけで動く音声アシスタント（JARVIS）を作ってみた

ローカルLLMを活用し、MacBook Pro M5proで執事型AI（JARVIS）を構築した体験談。全5回シリーズの第1回として、AIの概要、ローカルLLMを使用する理由、システム構成について解説しています。

• ローカルLLMのみで動作する音声アシスタント（JARVIS）がMacBook Pro M5pro 48GBモデルで開発された。
• ローカルLLMを使用する理由は、機密情報（医療現場の話題など）を外部に送信できない、応答速度が速い、トークン使用量に制限がないことである。
• AIアシスタントの構成は、Mac上でopenWakeWord、faster-whisper、pipeline.py、40の「担当」コード、Ollama、VOICEVOXなどが連携する。
• 「今日のタスク教えて」のような定型的な依頼はLLMを経由せず、専用のコマンドで処理し、LLMは担当がいない場合にのみ利用される。
• 実際には「予定・シフト」「Notionタスク」「統合コックピット」などの業務で毎日利用され、ログが995件蓄積されている。