TobikoData/sqlmesh

sqlmesh은(는) 무엇을 하나요?

데이터베이스 방언 정규화 계층으로, 기업 데이터 저장 자산 간 변환 명령을 정확하게 변환합니다.

개요

이 스킬은 SQLMesh를 사용하여 다양한 데이터베이스 방언(예: Snowflake, BigQuery, Databricks, Postgres) 간의 SQL 변환 명령을 정규화합니다. 이를 통해 사용자는 단일 변환 로직을 작성하고 여러 데이터 저장소에 배포할 수 있습니다.

주요 기능

• 데이터베이스 방언 간 SQL 변환 자동화
• 버전 관리 및 롤백 지원
• 데이터 파이프라인 의존성 관리
• 실시간 오류 감지 및 수정

사용 방법

1. sqlmesh CLI를 설치합니다.
2. config.yaml에서 데이터베이스 연결을 설정합니다.
3. 변환 모델을 작성하고 sqlmesh plan을 실행하여 변경 사항을 계획합니다.
4. sqlmesh run을 사용하여 변환을 실행합니다.

지원 플랫폼

• Snowflake
• Google BigQuery
• Databricks
• PostgreSQL
• MySQL (제한적)

예제

-- models/example_model.sql
MODEL (
  name db.example_model,
  kind FULL,
  start '2020-01-01',
  cron '@daily',
  dialect snowflake
);

SELECT
  id,
  name,
  created_at
FROM
  source_table

참고 자료

• SQLMesh 문서
• GitHub 저장소