동화그룹 데이터 엔지니어 자기소개서

1. 본인의 데이터 엔지니어링 관련 경험과 기술에 대해 구체적으로 기술해 주세요.

데이터 엔지니어로서 다양한 프로젝트를 통해 데이터 수집, 처리, 분석의 전 과정을 경험하며 실무 역량을 키워왔습니다. 가장 먼저 데이터 수집 단계에서는 여러 다양한 데이터 소스에서 정보를 추출하는 기술을 갖추고 있습니다. 웹 크롤링 도구인 BeautifulSoup과 Scrapy를 활용하여 공개된 데이터와 내부 시스템 데이터를 효율적으로 수집할 수 있으며, API 연동 경험도 풍부합니다. 데이터 수집 후에는 정제 과정이 중요하다는 것을 깊이 인식하고 있으며, 파이썬을 이용하여 결측치 처리, 중복 제거, 이상치 검증 등의 데이터 클렌징 작업을 수행하였습니다. 이 과정에서 pandas와 numpy 라이브러리의 활용 능력을 갖추었으며, 데이터 품질 향상에 집중하였습니다. 데이터 저장과 관리 측면에서는 대용량 데이터를 효율적으로 저장하고, 빠르게 조회할 수 있는 데이터베이스 설계 경험이 있습니다. 관계형 데이터베이스는 MySQL과 PostgreSQL을 활용하였으며, 데이터 모델링을 통해 정규화와 인덱스 최적화를 수행하여 쿼리 성능 향상에 기여하였습니다. 또한, 비관계형 데이터 저장…