modscode / 図鑑 / deepgram-voice
deepgram-voice
Deepgram as Claude Code's voice: TTS readback of replies, overriding the system synthesizer
何をするか
- プロンプトの上の帯・欄・トーストを描く
- /dg-listen・/dg・/dg-voice を足す
- audio.speak・prompt.submit・session.start・turn.complete ほか 1 個にフックする
- ターンをまたいで自分の状態を持つ
- プロセスを起こす
良いところ
- ネットワークに出ない
- TypeScript で書かれている
- エラーを扱う
- ファイルを書かない
作り始めるためのコード
2 種類あります。上のデザインから modscode が書いた雛形と、その Mod 自身のコードのうち描いている部分です。
雛形(register.tsx)
import type { Register } from 'claude-code'
// Drawn like deepgram-voice by Sam Gutentag (pane, band, toast), as modscode read it from the mod's code:
// https://modscode.com/gallery/samgutentag-deepgram-deepgram-voice/
// Written by modscode from that reading, not copied from the mod: use it as you like.
// Each value below stands for one the mod works out at run time; put in your own.
export const register: Register = on => {
// the band above the prompt; what else goes there is drawn under it
on('ui.render', { component: 'AbovePrompt' }, async ($, e, next) => {
const { Box, Button, Text } = $.ui.resolve(e)
const circle = '…'
const word = '…'
const earsPad = '…'
const mic = '…'
const name = '…'
return (
<Box flexDirection="column">
<Box>
<Button plain label={`${circle}`} />
<Text dimColor>
{" "}
{word}
{" "}
</Text>
<Text>
{earsPad}
</Text>
<Text dimColor>
{" "}
{" "}
</Text>
<Text bold inverse color="cyan">
{" 🔊 SPEAKING "}
</Text>
<Text>
{" "}
</Text>
<Button plain label="■ stop" />
<Text dimColor>
{" · "}
</Text>
<Button plain dimColor label={`🎙 ${mic}`} />
<Text dimColor>
{" · "}
</Text>
<Button plain dimColor label="🔈 macOS output" />
<Text dimColor>
{" · "}
</Text>
<Button plain dimColor label="▤ clean view" />
</Box>
<Box>
<Text>
{"Is "}
{name}
{" headphones or speakers? "}
</Text>
<Button hotkey="h" label="Headphones" />
<Text>
{" "}
</Text>
<Button hotkey="s" label="Speakers" />
</Box>
{await next(e)}
</Box>
)
})
// the pane: open it with $.ui.open({ id: 'my-pane', title: "Mic and sound" })
on('ui.render', { component: 'Pane', requestId: 'my-pane' }, async ($, e) => {
const { Box, Text, Button } = $.ui.resolve(e)
const i = '…'
const micRow = '…'
const MODE_TEXT = '…'
return (
<Box flexDirection="column">
<Text dimColor>
No microphones found. Is one plugged in?
</Text>
<Button hotkey={`${i}`} plain label={`${micRow}`} />
<Button hotkey={`${i}`} plain label={`${micRow}`} />
<Button hotkey={`${i}`} plain label={`${micRow}`} />
<Button hotkey="0" plain label="System default ✓ in use" />
<Text dimColor>
Press a number, or Esc to close.
</Text>
<Text>
{" "}
</Text>
<Text>
{"Sound plays on: "}
the macOS output
</Text>
<Text dimColor>
{MODE_TEXT}
</Text>
<Button hotkey="t" plain label="Switch to speakers mode" />
<Button hotkey="o" plain label="Change output (opens macOS Sound settings)" />
</Box>
)
})
on('session.start', async ($, e, next) => {
await $.ui.toast(`Stopped. Go ahead.`)
await $.ui.toast(`Stopped. Go ahead.`)
return next(e)
})
}
Mod 自身のコード
Mod のライセンス(MIT)に従って載せています。全文は下にあります。写すときは著作権表示を残してください。
mod/deepgram-voice/hooks/register.tsx 694〜801 行 · バンド
on('ui.render', { component: 'AbovePrompt' }, async ($, e, next) => {
if (e.props.hasSurvey) return next(e)
const phase = await read($, earsPhase)
const speaking = await read($, isSpeaking)
if (!isStripShown({ isVoiceOn: await read($, isOn), isListening: phase !== 'off', isSpeaking: speaking })) return next(e)
const { Box, Button, Text } = $.ui.resolve(e)
const mic = micLabel(await read($, device))
const offered = await read($, newMic)
const silent = await read($, isSilent)
const out = await read($, output)
const known = modeFor(out, await read($, duplexByOutput))
const chosen = known !== undefined
const mode = known ?? 'speakers'
const level = await read($, micLevel)
const isEchoNotice = await read($, isEchoDetected)
const viewNow = await read($, view)
const choose = (picked: Duplex) => () => chooseDuplex($, picked)
// The circle is the mic switch; the word next to it says what the mic is doing
const [circle, word] =
phase === 'off'
? ['○', 'MIC OFF']
: phase === 'starting'
? ['○', 'STARTING MIC']
: silent
? ['●', 'NO SOUND']
: phase === 'hearing'
? ['◉', 'HEARING YOU']
: phase === 'echo' && speaking
? ['◎', 'HEARING ITSELF']
: ['●', 'LISTENING']
// The second row only when something needs an answer
const question = !chosen && phase !== 'off' ? (
<Box>
<Text>Is {out ? out.name : 'your sound output'} headphones or speakers? </Text>
<Button key="pick-headphones" hotkey="h" label="Headphones" onPress={choose('headphones')} />
<Text> </Text>
<Button key="pick-speakers" hotkey="s" label="Speakers" onPress={choose('speakers')} />
</Box>
) : isEchoNotice ? (
<Box>
<Text>Your mic hears the speakers, so it switched to speakers mode. </Text>
<Button key="back-to-headphones" hotkey="h" label="I'm on headphones" onPress={choose('headphones')} />
<Text> </Text>
<Button key="ok-echo" hotkey="o" label="OK" onPress={() => update($, isEchoDetected, () => false)} />
</Box>
) : offered ? (
<Box>
<Text>New mic plugged in: {offered} </Text>
<Button key="use-new-mic" hotkey="u" label={`Use ${offered}`} onPress={() => chooseMic($, offered)} />
<Text> </Text>
<Button key="dismiss-new-mic" hotkey="x" label="Dismiss" onPress={() => update($, newMic, () => null)} />
</Box>
) : null
return (
<Box flexDirection="column">
<Box>
<Button key="mic-toggle" plain label={circle} onPress={() => toggleListening($)} />
{phase === 'off' ? (
<Text dimColor> {word} </Text>
) : phase === 'starting' ? (
<Text bold color="yellow"> {word} </Text>
) : phase === 'hearing' ? (
<Text bold inverse color="green"> {word} </Text>
) : word === 'HEARING ITSELF' ? (
<Text bold color="yellow"> {word} </Text>
) : (
<Text bold color="green"> {word} </Text>
)}
<Text>{earsPad(word)}</Text>
{/* the meter's slot stays when the mic is off, so nothing after it moves */}
<Text dimColor>{phase === 'off' ? ' '.repeat(METER.length) : meter(level)} </Text>
{speaking ? (
<>
<Text bold inverse color="cyan"> 🔊 SPEAKING </Text>
<Text> </Text>
<Button key="stop-voice" plain label="■ stop" onPress={() => stop($)} />
</>
) : (
// padded to the speaking slot's width, so the mic and output don't move when it talks
<Text dimColor>{QUIET + quietPad()}</Text>
)}
<Text dimColor> · </Text>
<Button key="mic-name" plain dimColor label={`🎙 ${mic}`} onPress={() => openPicker($)} />
<Text dimColor> · </Text>
<Button
key="output-name"
plain
dimColor
label={`${mode === 'speakers' ? '🔈' : '🎧'} ${out ? out.name : 'macOS output'}`}
onPress={() => openPicker($)}
/>
<Text dimColor> · </Text>
<Button
key="view-toggle"
plain
dimColor
label={viewNow === 'clean' ? '▤ clean view' : '▦ full view'}
onPress={() => chooseView($, viewNow === 'clean' ? 'normal' : 'clean')}
/>
</Box>
{question}
</Box>
)
})mod/deepgram-voice/hooks/register.tsx 856〜902 行 · ペイン
on('ui.render', { component: 'Pane', requestId: PICKER }, async ($, e) => {
const { Box, Button, Text } = $.ui.resolve(e)
const listed = await read($, mics)
const current = await read($, device)
const out = await read($, output)
const mode = modeFor(out, await read($, duplexByOutput)) ?? 'speakers'
return (
<Box flexDirection="column">
{listed.length === 0 && <Text dimColor>No microphones found. Is one plugged in?</Text>}
{listed.map((m, i) => (
<Button
key={`mic-${m.index}`}
hotkey={i < 9 ? String(i + 1) : undefined}
plain
label={micRow(m, current)}
onPress={() => chooseMic($, m.name)}
/>
))}
<Button
key="mic-default"
hotkey="0"
plain
label={`System default${current === DEFAULT_MIC ? ' ✓ in use' : ''}`}
onPress={() => chooseMic($, DEFAULT_MIC)}
/>
<Text dimColor>Press a number, or Esc to close.</Text>
<Text> </Text>
<Text>Sound plays on: {out?.name ?? 'the macOS output'}</Text>
<Text dimColor>{MODE_TEXT[mode]}</Text>
<Button
key="mode-toggle"
hotkey="t"
plain
label={mode === 'headphones' ? 'Switch to speakers mode' : 'Switch to headphones mode'}
onPress={async () => chooseDuplex($, (await effectiveMode($)) === 'headphones' ? 'speakers' : 'headphones')}
/>
<Button
key="open-sound-settings"
hotkey="o"
plain
label="Change output (opens macOS Sound settings)"
onPress={() => void $.process.run(['open', 'x-apple.systempreferences:com.apple.Sound-Settings.extension'])}
/>
</Box>
)
})ライセンスの全文(MIT)
MIT License Copyright (c) 2026 Deepgram, Inc. Permission is hereby granted, free of charge, to any person obtaining a copy of this software and associated documentation files (the "Software"), to deal in the Software without restriction, including without limitation the rights to use, copy, modify, merge, publish, distribute, sublicense, and/or sell copies of the Software, and to permit persons to whom the Software is furnished to do so, subject to the following conditions: The above copyright notice and this permission notice shall be included in all copies or substantial portions of the Software. THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY, FITNESS FOR A PARTICULAR PURPOSE AND NONINFRINGEMENT. IN NO EVENT SHALL THE AUTHORS OR COPYRIGHT HOLDERS BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER LIABILITY, WHETHER IN AN ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING FROM, OUT OF OR IN CONNECTION WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN THE SOFTWARE.
コードが呼ぶもの
プログラム起動Claude を動かす保存
コードから読み取ったデザイン
読み取ったコミットのソースから描いたもので、動かした結果ではありません。一覧は 3 回描き、条件はデスクトップアプリで描く最初の分岐を取り、動かしたときにだけ決まる値は仮の例(点線の下線)にするか省きます。色と書体はこのサイトのものです。
コードから読めること
2026-10-06 に読んだコミット da2d70413a86 のソースから。最初のまとまりが載せる条件で、残りは自分で判断するための材料です。後のコミットは、次に読むまで見ていません。
| 載せる条件: 確かめやすいコード | |
|---|---|
| 入口を読んだ | hooks/hooks.json が名指すモジュールをすべて読んだ。mod/deepgram-voice/hooks/register.tsx |
| 解析できる | すべてのファイルが TypeScript か JavaScript として解析できる。6 ファイルを解析 |
| コードが Mod の中で完結 | import は Mod 自身のファイルかエンジンのモジュールだけ。パッケージも require もない。コードはすべて Mod の中 |
| 読める | 圧縮した行・eval・new Function・計算した道の import()・符号化した塊がない。圧縮・eval・符号化した塊なし |
| 呼び出しが見える | 通信とプログラム起動はその場で $.http.fetch・$.process.run と書き、他へ渡さない。外への呼び出しはすべてその場の $ で |
| 入れる前に自分で判断する材料 | |
| 描く場所 | コードから読んだ、描く先。ターミナル・デスクトップアプリ・両方・何も描かない(フックだけ: 見張りやプロンプトの書き換え)のどれか。出すだけで、外す理由にはしない。ターミナルとデスクトップアプリに同じように描く |
| 入れる手順 | リポジトリ自身の .claude-plugin/marketplace.json にこの Mod が載っていて、ページに書いた手順でそのマーケットプレイスから入れられるか。リポジトリの .claude-plugin/marketplace.json に載っており、そこから入れられる |
| Windows のプログラム | $.process で起動するプログラムが Windows にあるか(tail・date・open・osascript・/usr/… などは無い)。mod/deepgram-voice/hooks/register.tsx:172 system_profiler(Windows にない); mod/deepgram-voice/hooks/register.tsx:265 pkill(Windows にない); mod/deepgram-voice/hooks/register.tsx:898 open(Windows にない) |
| 通信 | fetch の送り先(https のホスト)がコードに書いてあるか。通信なし |
| プログラム | 起動するプログラムの名前がコードに書いてあり、シェル・インタプリタ・通信用の道具でないか。mod/deepgram-voice/hooks/register.tsx:88 実行時に決まるプログラム; mod/deepgram-voice/hooks/register.tsx:97 python3(シェル・インタプリタ); mod/deepgram-voice/hooks/register.tsx:227 python3(シェル・インタプリタ); mod/deepgram-voice/hooks/register.tsx:397 node(シェル・インタプリタ) |
| 読んで送る | ファイルや環境変数を読み、かつ通信するか。通信するが、ファイルも環境変数も読まない |
| ソースの鍵 | ソースに API キーや秘密鍵らしきものがあるか。ソースに鍵なし |
| ライセンス | オープンなライセンス(MIT・Apache-2.0・BSD・ISC・Unlicense・0BSD・CC0)で全文があれば、modscode にコードを載せる。違えばリンクだけ。MIT |
コードの文面を読んだだけで、安全の審査ではありません。動かしてはおらず、起動するプログラムの中で何が起きるかも見えません。入れる前の確認はあなたの役目です。 載せる条件
入れる
入れる前に、必ず自分で確かめてください。Mod はサンドボックスなしで、あなたの権限で動きます。modscode はこのコードの安全を保証しません。下のコードを読み(またはフォルダーで claude plugin validate .)、触るものを見て、読んだコミットを入れてください。
リポジトリがそのままマーケットプレイスです。このマーケットプレイスを足し(ターミナルでは次のコマンド、デスクトップアプリではプラグインの設定)、そこから Mod を入れます。
/plugin marketplace add samgutentag-deepgram/claude-code-voice-mod/plugin install deepgram-voice@deepgram-voice入るのはマーケットプレイスの最新のコミットで、ここで読んだもの(da2d70413a86)と違うことがあります。入れる前に見比べてください。
Claude に聞く
modscode のコネクタを入れると、Claude がこのデザイン・コードが触るもの・コードを読んで、それをもとに作れます。たとえば:
modscode のデザイン「samgutentag-deepgram-deepgram-voice」をコードごと読んで、同じようなペインを作って似たデザイン
-
Claude に頼む…2h 10m · █████░░░✓ build ✓ build ✓ buildJavaKotlin3 Python■ ok 3 ■ ok 3 ■ ok 3 Razor proven 3 Razor proven 3 Razor proven 3Phases ──────── 3/3build Pythonbuild Pythonbuild Python… 3 more phasesLua ──────── 3/Kotlin■ the whole upgrade Ruby■ build build Ruby■ build build Ruby■ build build Ruby … 3 moreNext ──────── PythonRuby (by hand)Podsclick a button, or ctrl+x tab then Tab, EnterAttention ──────── 3! Scala ! Scala ! Scala … 3 moreSession ──────── okJava
-
Open a file first: /crit-tui file <path>Reopen this one in the crit browser view.Claude に頼む…
-
Claude に頼む…TodayOct 63 left · Mar overdueRemCTL: Sep✓ All done for today.● build3● Fix login ● ⚑Jul · build✓● Fix login ● ⚑Jul · build✓● Fix login ● ⚑Jul · build✓● build3● Fix login ● ⚑Jul · build✓● Fix login ● ⚑Jul · build✓● Fix login ● ⚑Jul · build✓● build3● Fix login ● ⚑Jul · build✓● Fix login ● ⚑Jul · build✓● Fix login ● ⚑Jul · build✓Updated 14:32UndoRefresh
-
Claude に頼む…TO graph› Fix login › Fix login › Fix loginScopeThis featureWhole projectHide done stepsReconnect
-
Claude に頼む…Blast Radius⚠ Blast Radius · buildCommand npm testWould CancelProceed Proceed ProceedBash1 Proceed2 CancelClaude is waiting on your answer
-
Claude に頼む…Agent Radar● Edit note · 2h 10m · 0 toolsnow: starting────────No messages yet.agent: (tool calls)agent: (tool calls)agent: (tool calls)Back bClose q