채용공고 스크레이퍼은(는) 무엇을 하나요?
새로운 게시글을 발견하고, 후보자의 프로필에 맞게 필터링하여 진정으로 새로운 것만 보고합니다.
설정
$JOB_SEARCH_HOME/integrations.yaml에서 읽어옵니다:
| 필요 항목 | 키 |
|---|---|
--where용 위치 문자열 | search_locations |
| 구조화된 게시판 CLI | tools.board_search_cli |
| 선택적 LinkedIn CLI | tools.linkedin_search_cli |
| 중복 제거용 추적기 파일 | tracker_path |
- 카테고리, 역할 키워드 및 필터:
references/search-queries.md - 후보자 정보:
$JOB_SEARCH_HOME/profile.md
search_locations 또는 tools.board_search_cli가 비어 있으면 중단하고 키를 명시하십시오. 하드코딩된 도시로 대체하거나 CLI 경로를 임의로 만들지 마십시오.
호출
"새 일자리 찾기", "일자리 스크래핑", "새 포지션", /scrape 명령어로 트리거됩니다.
선택적 인수:
- 관심 분야 —
/scrape platform broad— 모든 우선순위 카테고리 실행remote— 원격 및 하이브리드로만 엄격 필터링linkedin— LinkedIn 채널 선택 (2b단계 참조, 기본적으로 비활성화)
0단계 — 상태 로드
job_scraper/seen_jobs.json을 읽고, 없으면{"seen": {}}으로 생성- 이미 지원한 회사와 역할에 대해
tracker_path읽기 - 카테고리, 키워드 및 위치 계층을 위해
references/search-queries.md읽기 - 4단계 평가의 근거를 위해
$JOB_SEARCH_HOME/profile.md읽기
1단계 — 구조화된 게시판 검색 (기본)
각 우선순위 카테고리에 대해 역할 타이틀 키워드당 한 번씩 CLI를 실행합니다. 기본적으로 상위 3개 카테고리; broad일 경우 모든 카테고리; 관심 분야일 경우 해당 카테고리만 실행합니다.
python3 <board_search_cli> --keywords "<역할 타이틀>" --where "<위치>" --pages 2
# 원격 스위프:
python3 <board_search_cli> --keywords "<역할 타이틀>" --where "All Australia" --remote --pages 2
# 최근 것만:
python3 <board_search_cli> --keywords "<역할 타이틀>" --where "<위치>" --days 14 --pages 2
Bash를 통해 실행합니다. JSON 배열을 출력하므로 직접 파싱합니다. 키워드 호출을 일괄 처리합니다; 각 호출은 빠릅니다. --where에는 search_locations를 순서대로 사용합니다.
2단계 — 스타트업 및 ATS 게시판 (보조, 선택 사항)
창업 엔지니어 및 초기 단계 역할의 경우 메인 게시판에서 충분히 다루지 못하므로, 스타트업 게시판과 ATS 호스트에 대해 몇 가지 웹 검색을 실행합니다. 강력한 매치처럼 보이는 게시글만 가져옵니다. 웹 검색은 지역 편향이 있으므로, 제시하기 전에 후보자 국가에서의 적격성을 확인하십시오 — 많은 결과가 현지 것이 아닙니다.
2b단계 — LinkedIn (선택 사항에 한함)
후보자가 명시적으로 동의한 경우에만 실행합니다. 자동화는 플랫폼 이용약관을 위반하므로 기본적으로 비활성화되어 있습니다. 동의한 경우, 이는 본인의 책임임을 명시하고, 볼륨을 낮게 유지하며, 결과를 기본 채널과 동일한 중복 제거 및 순위 시스템에 통합합니다.
tools.linkedin_search_cli가 비어 있으면, 추측하지 말고 채널이 구성되지 않았다고 말합니다.
3단계 — 중복 제거
모든 결과에 대해:
- 게시판 ID나 URL, 또는
company+title키가 이미seen_jobs.json에 있으면 건너뜀 company+role이 이미tracker_path에 나타나면 건너뜀
4단계 — 빠른 적합성 평가
신호일 뿐, 전체 평가 과정이 아닙니다. 검색에서 반환된 티저, 제목, 급여, 근무 형태 및 글머리 기호를 사용합니다:
- 상 — 핵심 기술, 위치 또는 원격 근무 가능, 급여(표시된 경우)가 최소 기준을 충족
- 중 — 인접 역할, 또는 위치와 급여 확인 필요
- 하 — 상당한 기술 격차, 또는 구성된 위치 외부의 출근 근무이며 원격 옵션 없음
제목보다 직무 분야를 확인하십시오. 시니어 직함이 직무 분야의 신호는 아닙니다. "리드 엔지니어" 또는 "스태프 엔지니어"로 광고된 역할은 백엔드 또는 애플리케이션 엔지니어링 역할로, Java, Spring Boot, .NET 또는 PHP와 같은 언어에 대한 전문가 수준의 실무 경험이 핵심 요구사항일 수 있습니다. 핵심 요구사항이 후보자의 문서화된 프로필 외부의 직무 분야나 언어라면, 직함이 아무리 시니어하고 도메인이 아무리 익숙해도 하 등급으로 평가하십시오. 결제, 뱅킹 또는 플랫폼 관련 맥락이 백엔드 역할을 플랫폼 역할로 바꾸지 않습니다.
제외할 스택은 $JOB_SEARCH_HOME/targets.md에서, 실제로 입증된 핵심 기술은 profile.md의 Core Skills에서 읽으십시오. 공고에 명시된 요구사항이 후보자가 해당 기술을 보유하고 있다는 증거는 아닙니다.
references/search-queries.md의 위치 필터를 적용합니다.
5단계 — 저장
발견된 모든 일자리(건너뛴 것 포함)를 기록합니다:
{
"seen": {
"<board-id-or-company-title-key>": {
"title": "…", "company": "…", "location": "…", "url": "…",
"salary": "…", "work_arrangement": "…",
"first_seen": "YYYY-MM-DD", "fit": "high|medium|low",
"status": "new|skipped|evaluated"
}
}
}
6단계 — 제시
## 새로운 채용 매치 — YYYY-MM-DD
X개의 새 포지션 발견 (Y개 상, Z개 중, W개 하 매치).
| # | 적합성 | 제목 | 회사 | 위치 | 근무 형태 | 급여 | URL |
|---|--------|------|------|--------|-----------|------|-----|
| 1 | 상 | … | … | … | 원격/하이브리드 | … | [링크](…) |
그런 다음 각 상 매치에 대해 2~3개의 글머리 기호: 적합한 이유, 확인해야 할 요구사항, 위험 신호.
마지막으로 상세 평가나 지원을 요청할 것인지 묻습니다. job-application-assistant 워크플로우가 실행되려면 전체 설명이 필요합니다 — 검색 단계는 티저만 반환하므로 먼저 세부 정보를 가져오십시오.
7단계 — 추적기 업데이트
후보자가 지원하기로 결정하면 tracker_path에 행을 추가합니다.
규칙
- 게시글을 절대 조작하지 마십시오. CLI 또는 실제 가져오기가 반환한 것만 제시하십시오.
- 항상
seen_jobs.json과tracker_path모두에 대해 중복 제거하십시오. - 구성된 위치 계층을 준수하십시오. 선택하지 않는 한 구성된 위치 외부의 출근 역할은 건너뛰십시오.
- 채용 중인 역할만. 결과는 실시간이지만, 명백히 오래된 것은 건너뛰십시오.
- 평가하거나 지원하기 전에 전체 설명을 가져오십시오.
- 직무 분야가 직함보다 우선합니다. 요구사항의 주요 언어와 직무 분야를 기준으로 선별하고, 절대 직함만으로 판단하지 마십시오. 후보자가 보유하지 않은 스택의 시니어 직함은 하 매치입니다.
- 효율성. 먼저 제목, 티저, 급여로 필터링하고 모든 게시글을 가져오지 마십시오.
- 명시적 동의 없이 LinkedIn을 절대 쿼리하지 마십시오.