Quick start

$ docker run -d --name whissle \
  -p 9000:9000 -p 8001:8001 -p 8003:8003 \
  -v whissle-models:/models -v whissle-data:/data \
  -e VARIANT=en-full \
  -e ANTHROPIC_API_KEY=your-key \
  whissleasr/whissle-gateway:latest

VARIANT=

DEVICE=

POST localhost:8001/transcribe

$ curl -X POST http://localhost:8001/transcribe \
    -F "file=@call.mp3" \
    -F "diarize=true" \
    -F "num_speakers=2" \
    -F "punctuation=true" \
    -F "metadata_prob=true" \
    -F "summarize=sales_coaching" \
    -o result.json

Response — transcript + metadata per segment + AI analysis

{
  "segments": [
    {
      "speaker":  "SPEAKER_00",
      "text":     "Hello, good morning.",
      "start":    1.0,  "end": 1.9,
      "metadata": {
        "emotion":  "EMOTION_NEUTRAL",
        "behavior": "BEHAVIOR_DIRECT",
        "role":     "ROLE_INTERVIEWER",
        "age":      "AGE_30_45",
        "gender":   "GENDER_MALE"
      },
      "words": [{"word": "Hello", "start": 1.0, "end": 1.3}]
    }
  ],
  "analysis": {
    "overall_score": 78,
    "buyer_outcome": "Converted",
    "practices":     { "followed": 6, "total": 8 },
    "highlights":    [...]
  }
}

┌──────────────────────────────────────────────────────────────┐
│                     Docker Container                        │
│                                                             │
│  ┌────────┐ ┌────────┐ ┌────────┐ ┌────────┐ ┌──────────┐  │
│  │ ASR    │ │ Video  │ │ TTS    │ │Pipecat │ │ Agent    │  │
│  │ :8001  │ │ :8002  │ │ :8003  │ │ :8000  │ │ :8765    │  │
│  │        │ │        │ │ Kokoro │ │        │ │          │  │
│  │ ONNX   │ │MediaPip│ │ 82M    │ │ WebRTC │ │ Any LLM  │  │
│  │ +KenLM │ │+Vision │ │55 voice│ │ Twilio │ │ Cloud or │  │
│  │ +ECAPA │ │  LLM   │ │        │ │Voice AI│ │  Local   │  │
│  │ +VAD   │ │        │ │        │ │        │ │          │  │
│  │ +Punct │ │Face    │ │        │ │ Auth   │ │Summarize │  │
│  │ +ITN   │ │Gesture │ │        │ │Multiorg│ │ Coach    │  │
│  └────────┘ └────────┘ └────────┘ └────────┘ └──────────┘  │
│                     │                                       │
│              ┌──────────────┐                               │
│              │ PostgreSQL   │                               │
│              │ :5432        │                               │
│              └──────────────┘                               │
│                                                             │
│  /models  (Docker volume — cached ASR models)               │
│  /data    (Docker volume — PostgreSQL, auth, conversations) │
└──────────────────────────────────────────────────────────────┘