Community程式設計與開發github.com

arize-ai/arize-prompt-optimization

使用生產追蹤數據、評估和註釋來優化、改進和偵錯LLM提示詞。從跨度中提取提示詞,收集性能信號,並使用ax CLI運行數據驅動的優化循環。

arize-prompt-optimization 是什麼?

arize-ai/arize-prompt-optimization 是一個專為開發者和 AI 代理用戶設計的技能,旨在通過生產環境中的追蹤數據、評估結果和人工註釋,自動化地優化、改進和調試大型語言模型(LLM)的提示詞。該技能的核心價值在於將提示詞優化過程從手工試錯轉變為數據驅動的自動化循環:它首先從追蹤跨度(spans)中提取實際使用的提示詞,然後從評估和註釋中收集性能信號(如準確率、響應質量等),最後使用 ax CLI 工具運行一個迭代優化循環,以找到最優的提示詞配置。該技能支持多種 AI 代理平台(如 Claude Code、Cursor、Codex 等),特別適用於用戶提到“優化提示詞”、“改進響應質量”、“提示工程”或“系統提示詞改進”等場景。通過自動化評估和反饋閉環,它能顯著提高 LLM 應用的輸出一致性、相關性和準確性,是提示詞工程領域的實用工具。

相容平台~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/arize-ai/arize-skills/tree/main/skills/arize-prompt-optimization

Installed? Explore more 程式設計與開發 skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →

在你喜歡的 AI 中提問

開啟一個已預先載入此 Agent Skill 的新對話。

說明文件

arize-prompt-optimization 是做什麼的?

使用生產追蹤數據、評估和註釋來優化、改進和偵錯LLM提示詞。從跨度中提取提示詞,收集性能信號,並使用ax CLI運行數據驅動的優化循環。當用戶提及優化提示詞、改進提示詞、讓AI回應更好、改善輸出品質、提示工程、提示詞調優或系統提示詞改進時使用此技能。

Individual skills in this repo

This repo contains 2 individual skills — each has its own dedicated page.

相關技能