[SK플래닛] ASAC 빅데이터전문가 11기 | 31일차

31일차는 오전에는 Git 특강과 실습을 진행했고, 오후에는 AWS 기반 분석 자동화 흐름을 다룬 날이었다. Git은 단순히 팀 협업할 때만 쓰는 도구라고 생각하기 쉬운데, 이번에는 혼자 개발할 때도 변경 이력을 남기고 필요할 때 특정 시점으로 돌아가기 위해 필요하다는 점을 먼저 잡았다.오후에는 S3 Tables / Iceberg 기반의 데이터, Athena SQL 실행, Bedrock 모델 호출, Markdown 보고서 생성 흐름을 봤다. 직접 분석 코드를 짜는 것에서 한 단계 더 나아가, 사용자의 질문을 받아 SQL을 실행하고 LLM으로 분석 보고서를 만드는 구조였다. 다만 이 과정에서도 LLM이 만든 SQL이나 해석 결과를 그대로 믿으면 안 되고, SQL 결과와 수치가 맞는지 확인해야 한다는 점이 ..

• format_list_bulleted [SK플래닛] ASAC 빅데이터전문가 11기/학습기록
• · 2026. 6. 1.

[SK플래닛] ASAC 빅데이터전문가 11기 | 21일차

21일차는 깔끔하게 정리된 예제 데이터가 아니라, 실제로는 꽤 자주 만날 법한 지저분한 엑셀/CSV 데이터를 어떻게 코드로 정리할 것인가가 중심이었다. World Happiness Report 데이터를 기준으로 시작했지만, 핵심은 행복지수 자체를 해석하는 것보다 여러 파일을 코드로 불러오고, 서로 다른 연도/출처의 데이터를 병합하고, 안 붙는 데이터를 찾아서 처리하는 과정이었다.특히 이번에는 데이터가 한 파일에만 있지 않았다. 2022년 행복도 데이터, 2021년 지역 구분 데이터, World Bank 인구 데이터처럼 서로 다른 파일과 출처를 같이 써야 했다. 게다가 국가 이름도 완벽하게 맞지 않았고, 어떤 파일은 연도가 아래로 쌓여 있었는데 다른 파일은 연도가 컬럼으로 옆으로 펼쳐져 있었다. 결국 21..

• format_list_bulleted [SK플래닛] ASAC 빅데이터전문가 11기/학습기록
• · 2026. 5. 19.