メインコンテンツへスキップ
見出し画像

あなたの言葉を覚える「自分専用 AI 秘書」ゆあ司書 — 音声入力・ダッシュボード・RAG 全部入りを 1 コマンドで

本文

自分のメモを覚えてくれて、 声で話しかけられる AI 秘書。 そういう環境を自分用に組んで、 数ヶ月かけて育ててきました。

で、 「これ、 他の人の PC にも置ける形にしたら使ってもらえるんじゃないか」 と思って、 セットアップキットにまとめたのがこの「ゆあ司書」 です。 解凍して、 API キーを貼って、 1 コマンド。 それで立ち上がります。

Claude Code と Obsidian をつなぐやり方そのものは、 調べるといろいろ見つかります。 このキットで僕が気に入っているのは、 その上に載せた 2 つです。

ひとつは、 あなたの言葉を覚える音声入力。 個人辞書と、 あなた自身のメモを文脈に使う補正がついていて、 使うほどあなたの固有名詞や言い回しに強くなっていきます。
もうひとつは、 専用ダッシュボード「ゆあダッシュ」。 スマホからも開けるので、 机の前にいない時間に思いついたことも、 そのまま秘書に渡せます。

できること

  • 「先週末なにしてたっけ?」 と聞くと、 過去のメモを検索して答えてくれる

  • 録音した音声を投げるだけで、 文字起こしから実行まで勝手に進む(「Claude」 が「クラウド」 になるような聞き間違いも、 自分の辞書とメモで正しい側に直る)

  • 外出先のスマホからダッシュボードを開いて、 AI からの質問に答えたり、 思いつきを渡したりできる

  • 「企画 AI でブレストして」「執筆 AI で文章直して」 と、 4 つの役割を呼び分けられる

  • PDF や画像をフォルダに放り込むと、 検索できるメモに変換される

  • 書いた草稿を別の AI(Gemini)にレビューさせて、 セカンドオピニオンを取れる

ぜんぶローカルの自分の環境で動きます。 あなたの過去を覚えている相談相手と、 あなたの言葉が通じる音声入力と、 どこからでも届く受付窓口。 そういうセットです。

音声入力「Your Voice」 のこと、 少し詳しく

同梱している音声入力アプリは、 ホットキー 2 つで使い分けます。

ひとつめは普通の音声入力モード。 `Ctrl+Alt+R` で録音が始まって、 もう一度押すと文字起こしされたテキストがクリップボードに入ります。 Slack でもメールでもブラウザでも、 貼りたいところに Ctrl+V するだけ。 文字起こしのあとに AI が誤字や言いよどみを整えてくれるので、 「えーっと、 あの、」 みたいな部分は消えた状態で出てきます。

ふたつめが Claude 連携モード(`Ctrl+Alt+Shift+R`)。 こっちは文字起こしを待たずに、 録音した音声ファイルのパスを Claude Code にぽんと渡します。 受け取った Claude 側では同梱のスキルが自動で動いて、 文字起こし → あなたの辞書とメモを使った補正 → 意図の解釈 → 実行、 まで一気に進みます。 「明日の予定教えて」 と喋れば予定が返ってくるし、 「さっきの会議メモまとめて」 と喋ればまとめが始まる。 テキストを見直してコピペする工程が、 まるごと消えます。

このパス渡しの仕組みがなかなか面白いので、 詳しい話は別の無料記事に書く予定です。

ゆあダッシュとスマホアクセス

Claude Code はターミナルのツールなので、 そのままだと黒い画面とにらめっこになります。 ゆあダッシュは、 そこを補う専用ダッシュボード。

AI から来た質問(「この 3 案どれにします?」 みたいなやつ)にボタンで答えたり、 AI が作った資料を眺めたり、 Vault の中身をブラウザで見たり。 そういう「秘書とのやりとり窓口」 が 1 画面に集まってます。

それと、 普通の Web サーバとして動いているので、 ngrok を設定すると外からも開けます。 起動時にターミナルに QR コードが出るから、 スマホで読むだけ。 散歩中に思いついたことをスマホから渡しておいて、 帰ったら Claude が下調べを終えてる。 そういう使い方ができます。

何が入っているか

  • セットアップスクリプト(Windows / Mac 両対応、 API キー入れて 1 コマンド)

  • 音声入力アプリ Your Voice(Electron アプリ + CLI。 Whisper 文字起こし + AI 補正 + 個人辞書)

  • 音声ファイルのパスを投げるだけで処理が走る Claude Code 用スキル

  • 専用ダッシュボード「ゆあダッシュ」(質問 UI / 資料ピン / Vault ブラウザ / ngrok + QR スマホアクセス)

  • 固有名詞レジストリ(人名・プロジェクト名の正規化と自動リンク)

  • PDF / 画像を .md に自動変換する watcher

  • 自作 RAG サーバ本体(全文検索 + 意味検索)

  • 空の Obsidian Vault テンプレ(PARA 構造で初期化済み)

  • 4 役割エージェント定義(企画 / 執筆 / 分析 / 進行)

  • README とドキュメント一式(トラブルシュート 7 項目つき)

ZIP で 5.6 MB、 解凍すると 14 MB、 ファイル数はだいたい 156 個です。

必要なもの

  • OS は Windows 10/11 か macOS(動作確認のメインは Windows、 Mac は β です)

  • Claude Pro の契約($20/月)。 別途必要です。 セットアップ後は自分の契約で動きます

  • Node.js 22.5 以上(音声入力ツールが使います)

  • Python 3.11 以上と uv(RAG サーバ用。 setup スクリプトが案内します)

  • OpenAI の API キー。 これは必須です(検索インデックス用)。 個人利用なら月 100 円もいかないくらいで、 $5 入金すれば半年〜1 年もちます

  • Gemini の API キー。 あると良いです(音声補正・レビュー用)。 無料枠 + 月数十円程度

  • Groq の API キー。 あると良いです(文字起こし用)。 個人利用は無料枠で足ります

こんな人に合うと思います

  • メモや資料が増えてきて、 検索が手に負えなくなってきた人

  • AI に「過去の自分」 を覚えてもらいたい人

  • 文字を打つより、 声で AI に話しかけたい人(散歩中や移動中の思いつきを逃したくない人)

  • 机の前にいない時間も、 スマホから AI 秘書に用事を渡しておきたい人

  • NotebookLM みたいな「PDF 放り込むだけ」 の検索環境を、 自分のローカルに持ちたい人

ひとつだけ先に確認してほしいのが、 Claude Pro の契約(月 $20)が別に必要なことです。 ここだけはどうしてもスキップできません。 あと「ローカルに何も入れたくない、 クラウドで完結してほしい」 という人には、 NotebookLM などのほうが合ってると思います。 無理にこれじゃなくて大丈夫です。

正直なところ(動作環境について)

開発と動作確認は、 ほとんど Windows でやってます。 Mac は β 扱いです。 世の中のぜんぶの環境で試せているわけではないので、 Node のバージョンや OS の細かい違いで、 どこかが引っかかる可能性はあります。

ただ、 これを買ったあなたの手元には Claude Code がいるんですよね。 何か動かなかったら、 エラーをそのまま Claude に貼って「これ直して」 と言ってみてください。

ゆあ司書のセットアップ中、 setup.bat がここで止まった。
エラーメッセージは ○○。 原因を調べて直して。

Claude Code は自分の環境のファイルもエラーも直接見られるので、 環境差くらいならだいたいその場で直してくれます。 「AI に直してもらいながら使う」 のも含めて、 この環境の練習だと思ってもらえたら嬉しいです。

それでも詰まったら、 記事のコメントか note の DM へどうぞ。 手が空いたときに順次返します。

自分で作れる人へ

この記事に書いた仕組みに、 隠している秘密は特にありません。 ここに書いてある内容をそのまま Claude Code に伝えて「こういうの作って」 と言えば、 たぶん作れます。 Claude Code はそういうツールなので。

ただ、 実際にやると、 設計の試行錯誤とデバッグでけっこうな時間とトークンを食います。 僕は数ヶ月かけてここまで育てました。 その時間と手間とトークン代をスキップしたい人が、 コーヒー 1 杯分で買ってくれたら嬉しいな、 という値付けです。

セットアップの流れ

  1. API キーを取る(OpenAI 必須 / Gemini と Groq はあると良い。 各 5〜10 分)

  2. ZIP を解凍して、 `.env.example` を `.env` にコピーして、 API キーを貼る

  3. `setup.bat`(Windows)か `setup.sh`(Mac)を実行して、 `claude` を起動

細かい手順とトラブルシュート 7 項目、 Mac の個別対応は、 購入後に読める同梱 README にまとめてあります。

注意事項

  • Vault に入れたテキストは、 検索インデックスを作るために OpenAI の Embeddings API に送られます。 PDF / 画像の自動変換を使う場合は Google の Gemini API にも送られます

  • API キーは GitHub や SNS に絶対に貼らないでください

  • 医療・財務・他人の個人情報は Vault に入れない運用をおすすめします

値段について

500 円にしました。 v1 系のあいだのアップデートは、 この記事の添付ファイルを差し替える形でお届けします。 一度買ってもらえれば、 同じページから何度でもダウンロードできます。

いつか大きく作り変えた v2 を出すことがあったら、 それはまた別の記事でご案内すると思います。

ダウンロード(購入者限定)

ここから下が購入者エリアです。 ZIP 本体と、 セットアップの詳しい手順、 困ったときの連絡先があります。

 
 
香川県高松市のクリエイティブエンジニア。Claude Code や Codex で「自分専用の AI 秘書」を育てる実験を毎日してます。できたものはぜんぶお裾分けする派。讃岐GameN 理事 / 個人事業 わきまai / 子どもと大人の AI塾を準備中 / ゆあ司書 配布中🌱

あなたへのおすすめ