광산 데이터 전처리
"파일은 열리지만 데이터를 직접 비교할 수 없는" 문제를 해결하여, 다중 소스 기록을 현장 변화를 유지한 채 후속 분석에 투입합니다.
핵심 역량
- 다중 소스 정렬: 계측기 출력, 측점 대장 및 채굴 일지를 시간, 공간 및 객체 기준으로 연결합니다.
- 근거 있는 정제: 중복, 결측, 드리프트 및 단위 문제를 식별하여 실제 공학적 이상을 노이즈로 제거하는 것을 방지합니다.
- 처리 과정 추적 가능: 원본 값, 변환 근거 및 기록 매핑을 보존하여 검증 및 재처리를 지원합니다.
시작하기
먼저 데이터가 도표 작성, 통계 비교, 이상 식별 또는 모델링에 사용될지 파악한 후, 파일 구조, 필드 의미 및 적용 범위를 확인합니다. 처리 세분화는 분석 목표에 따라 결정되며, 기존 데이터 규칙이 있다면 우선 적용하고 통합 템플릿으로 강제 변환하지 않습니다.
작업 흐름
- 기록 세분화, 필드 의미 및 하류 분석 용도를 식별합니다.
- 먼저 로컬 프로파일링 도구로 필드, 결측, 중복 및 시간 적용 범위를 확인한 후, 공정 조건과 결합하여 문제를 해석합니다.
- 명확한 규칙에 따라 복사본에서 변환, 연결 또는 정제를 수행하고 원본 값과 기록 매핑을 유지합니다.
- 처리 영향을 확인하고, 사용 가능한 데이터와 여전히 분석을 제한하는 문제를 전달합니다.
필요에 따른 리소스 사용
- 로컬 도구를 사용하기 전에 매개변수 및 적용 범위를 읽고, scripts/profile_csv.py를 호출합니다. 도구는 설명된 형식과 기능만 처리하며, 전체 작업이 완료되었음을 의미하지 않습니다.
- 입력 형식을 처음 확인할 때는 합성 예제 examples/monitoring.csv를 참조하십시오. 데모 데이터는 실제 측정 또는 표준 매개변수로 간주해서는 안 됩니다.
- 방법 선택, 경계 판단 또는 복잡한 상황: references/methods.md를 읽으십시오.
- 전달 내용을 빠르게 구성해야 할 때는 assets/data-dictionary.csv를 복사하여 편집하십시오. 이는 선택적 시작점이며 고정된 출력 형식이 아닙니다.
전달
실제 파일이 있는 경우, 분석 가능한 데이터 복사본과 필요한 필드 설명, 문제 표시 및 간결한 처리 기록을 전달합니다. 검사만 필요한 경우, 분석에 영향을 미치는 주요 문제와 수정 권장 사항에 집중합니다. 출력 형식은 사용자의 작업 흐름을 따르며, 전시를 위해 여러 데이터 세트를 반복 생성하지 않습니다.
정제 완료가 공정 상태의 정상을 의미하지는 않습니다. 원본 기록의 이상 현상은 후속 분석 및 검증에 남겨두어야 합니다.