Community연구 & 데이터 분석github.com

ZhongKuang/taiji-메트릭-스크래퍼-스킬

TAAC/Taiji 훈련 메트릭, 로그, 체크포인트 및 코드 파일을 스크래핑하기 위한 Codex 스킬입니다.

taiji-메트릭-스크래퍼-스킬란 무엇인가요?

이 스킬은 AI 에이전트(특히 Codex)가 TAAC/Taiji 훈련 과정에서 생성된 메트릭, 로그, 체크포인트, 코드 파일을 스크래핑하고 분석할 수 있도록 지원합니다. 사용자는 훈련 진행 상황을 모니터링하거나, 특정 시점의 체크포인트를 추출하거나, 로그 파일의 패턴을 분석하는 등 다양한 작업을 자동화할 수 있습니다. 주로 터미널 기반 환경에서 동작하며, 파일 시스템 접근 및 쉘 명령 실행을 통해 데이터를 수집합니다. 이 스킬을 통해 개발자는 일일 훈련 파이프라인 리뷰, 장애 분석, 또는 메트릭 시각화 준비 작업을 효율적으로 수행할 수 있습니다.

지원 대상~Claude Code✓Codex CLI~Cursor
npx skills add ZhongKuang/taiji-metrics-scraper-skill

Installed? Explore more 연구 & 데이터 분석 skills: affaan-m/uspto-database, affaan-m/scholar-evaluation, affaan-m/literature-review · View all 6 →

즐겨 사용하는 AI에게 물어보기

이 에이전트 스킬이 미리 로드된 새 채팅을 엽니다.

문서

taiji-메트릭-스크래퍼-스킬은(는) 무엇을 하나요?

TAAC/Taiji 훈련 메트릭, 로그, 체크포인트 및 코드 파일을 스크래핑하기 위한 Codex 스킬입니다.

개요

이 스킬은 Codex가 TAAC(Taiji 아키텍처 어시스턴트 코드) 및 Taiji 훈련 시스템과 상호작용할 수 있도록 설계되었습니다. 스크래핑, 메트릭 수집, 로그 분석, 체크포인트 관리, 코드 파일 탐색을 자동화합니다.

주요 기능

  • 메트릭 스크래핑: 훈련 실행 중 손실, 정확도, 학습률 등의 성능 메트릭을 추출합니다.
  • 로그 수집: 훈련 로그 파일(training.log, output.log 등)을 캡처하고 분석합니다.
  • 체크포인트 액세스: 저장된 모델 체크포인트를 나열하고 세부 정보를 추출합니다.
  • 코드 파일 탐색: 구성 파일, 유틸리티 함수, 훈련 스크립트를 읽고 검색합니다.

지원 플랫폼

  • Codex (터미널 기반 AI 에이전트)
  • TAAC 프레임워크
  • Taiji 교육 플랫폼

사용 방법

# 메트릭 스크래핑 예시
codex skill invoke "ZhongKuang/taiji-metrics-scraper-skill" --params '{"action": "scrape_metrics", "path": "/path/to/training/run"}'

# 로그 수집 예시
codex skill invoke "ZhongKuang/taiji-metrics-scraper-skill" --params '{"action": "collect_logs", "run_id": "experiment_123"}'

# 체크포인트 나열
codex skill invoke "ZhongKuang/taiji-metrics-scraper-skill" --params '{"action": "list_checkpoints", "path": "/path/to/checkpoints"}'

구성

이 스킬은 추가 구성 없이 기본적으로 작동하지만, 다음 환경 변수를 설정하여 동작을 사용자 정의할 수 있습니다:

  • TAIJI_METRICS_PATH: 기본 메트릭 디렉토리 경로
  • TAIJI_LOG_PATTERN: 로그 파일 필터링 패턴 (예: *.log)
  • TAIJI_CHECKPOINT_EXT: 체크포인트 파일 확장자 (예: .pt, .h5)

예제 워크플로우

  1. 최신 훈련 실행 메트릭 스크래핑
  2. 로그 파일 수집 및 오류 패턴 분석
  3. 특정 에포크의 체크포인트 추출
  4. 구성 파일 읽기 및 하이퍼파라미터 검증
  5. 모든 데이터를 단일 보고서로 집계

지원

문제나 기능 요청은 GitHub 리포지토리에 이슈를 제출해 주세요.

관련 스킬