Palmerbeetling15/Council

Council 是做什麼的？

在單一 macOS 應用程式中比較多個 LLM 的回應。向多個模型提問，檢視盲評，並從獨立結果中找出共識。

功能

• 同時向多個 LLM 提出問題
• 檢視每個模型的原始回應
• 執行盲評（模型彼此評估，不揭露身分）
• 從獨立結果中找出共識
• 支援多種 LLM 供應商

使用方法

1. 下載並安裝 macOS 應用程式
2. 設定 API 金鑰（如 OPENAI_API_KEY）
3. 在應用程式中輸入問題
4. 選擇要查詢的模型
5. 檢視回應、盲評和共識結果

支援的模型

• GPT-4
• Claude
• Gemini
• 以及其他透過 API 存取的模型

環境變數

• OPENAI_API_KEY：用於 OpenAI 模型的 API 金鑰
• ANTHROPIC_API_KEY：用於 Anthropic 模型的 API 金鑰
• GOOGLE_API_KEY：用於 Google 模型的 API 金鑰

輸出範例

{
  "question": "什麼是機器學習？",
  "responses": [
    {
      "model": "GPT-4",
      "response": "機器學習是人工智慧的一個子領域..."
    },
    {
      "model": "Claude",
      "response": "機器學習是一種讓電腦從資料中學習的方法..."
    }
  ],
  "blind_reviews": [
    {
      "reviewed_model": "GPT-4",
      "score": 8,
      "comment": "解釋清晰，但可以更具體"
    }
  ],
  "consensus": "多數模型同意機器學習是人工智慧的一個子領域，涉及從資料中學習模式。"
}

注意事項

• 確保所有 API 金鑰已正確設定
• 回應時間取決於模型和網路速度
• 盲評結果僅供參考，不應視為絕對真理