과목 구분 없음계리직공무원 컴퓨터 일반 · 2022년05월14일 · 9/20
9.조직의 내부나 외부에 분산된 여러 데이터 소스로부터 필요로 하는 데이터를 검색하여 수동 혹은 자동으로 수집하는 과정과 관련된 기술에 해당하지 않는 것은?
1
ETL(Extraction, Transformation, Loading)
2
로그 수집기
3
맵리듀스(MapReduce)정답
4
크롤링(crawling)
해설
1. ETL: 데이터 추출 → 변환 → 적재하는 과정. 주로 데이터 웨어하우스 구축 때 사용, 수집 + 변환 + 적재 2. 로그 수집기: 서버/서비스에서 발생하는 로그 데이터를 수집하는 도구.예) Fluentd, Logstash 3. 맵리듀스(MapReduce): 대규모 데이터를 처리하는 분산 처리 기술. 수집이 아니라 처리에 초점 4. 크롤링(crawling): 웹페이지 등에서 자동으로 필요한 데이터를 긁어오는 기술