월 20달러로 고용하는 데이터 분석가 with 챗GPT

코드 한 줄 없이 기초 통계부터 분석, 예측까지

테리엇 , Bob Lee 저자(글)

한빛미디어 · 2024년 10월 29일

책 소개

시장 조사, 고객 분석, 매출 예측, 보고서를 한 번에
코드 한 줄, 수식 계산 없이 기초 통계부터 고급 데이터 분석까지!

이 책은 데이터 분석을 경험해 본 적이 없는 사람 또는 데이터 분석에 AI를 적용하려는 사람을 위해 AI를 활용한 데이터 분석의 전 과정을 쉽게 익힐 수 있도록 구성했습니다. 단순히 데이터 분석 과정을 훑는 것이 아니라 실무에서 데이터 분석 프로젝트가 어떻게 시작되고 마무리되는지 체감할 수 있도록 데이터 분석을 시작하는 ‘김대리’와 ‘박차장’이라는 인물을 활용했습니다. 이제 막 데이터 분석을 시작해 데이터의 개념, 챗GPT 사용법부터 고급 데이터 분석과 시각화까지 한 단계씩 나아가는 김대리를 통해 실무에서 흔히 마주치는 데이터 분석 문제를 살펴볼 수 있습니다. 이 과정에서 여러분은 실무에 바로 적용 가능한 지식과 기술을 습득할 수 있는 것은 물론이고 실제 분석 과정에서 자주 부딪치는 문제를 해결하는 방법도 알 수 있습니다.

작가정보

저자(글) 테리엇

영업 부서에서 사회생활을 시작해, 지금은 증권사 데이터 사이언티스트로 일하고 있다. 파이썬의 간결한 문법과 다양한 활용성에 반해 실생활에 유용하게 활용하는 방안을 연구하고 있다. 인공지능을 활용해 자동화하는 일에도 관심이 많다. 개인 블로그 'AI테크 업데이트(aitechupdate.com)'를 운영 중이다.

저자(글) Bob Lee

금융 분석 연구원으로 시작했으나 데이터 분석에 매력을 느껴 데이터 사이언티스트로 전향해 지금은 금융사에서 데이터를 분석 업무를 하고 있다. 데이터 조직의 시작부터 데이터 인프라 세팅, 데이터 엔지니어링, 분석 기반 서비스 배포까지 데이터 분석 영역 전반의 업무를 고루 경험했다. 진행했던 프로젝트로는 추천 알고리즘 개발, 고객 심리 분석, 추천 상품 분석, 고객 자산 관리 솔루션 개발 등이 있다. 현재는 블록체인을 활용한 거래 시스템을 개발하고 있으며, 에듀테크 스타트업에 합류해 생성형 AI 엔진 개발과 앱 개발 전반을 리드하고 있다.

목차

• 1부 데이터 분석을 위한 도구, 챗GPT & 데이터 애널리스트
  
  01장 데이터 분석 도구로서 생성 AI
  챗GPT의 탄생
  데이터 분석 GPT, 데이터 애널리스트
  회사 데이터 분석도 가능할까?
  
  02장 챗GPT 사용 가이드
  챗GPT 시작하기
  사용자 맞춤 설정하기
  더 나은 대화를 위한 프롬프트 엔지니어링
  다양한 GPT 살펴보기
  API를 활용한 나만의 GPT 만들기
  챗GPT와 음성 대화하는 방법
  
  03장 데이터 애널리스트 사용 가이드
  데이터 애널리스트 시작하기
  PDF 파일로 PPT 보고서 만들기
  코드 파일로 코드 리뷰하기
  CSV 파일로 데이터 분석하기
  데이터 애널리스트의 한계
  
  
  2부 데이터 분석의 기초 쌓기
  
  04장 데이터는 어디에 있죠? - 데이터와 데이터베이스
  데이터 & 데이터베이스
  DBMS와 SQL
  원시 데이터
  
  05장 무엇을 분석하나요? - 분석 주제 선정 방법
  데이터로 할 수 있는 일
  분석 과제 도출 방법
  하향식 접근 방법
  상향식 접근 방법
  원활한 인터뷰를 위한 4단계
  
  06장 어떻게 분석할까요? - 데이터 유형에 따른 분석 방법
  정형 데이터와 비정형 데이터
  범주형 데이터와 수치형 데이터
  
  07장 데이터가 크면 어떻게 하죠? - 다양한 데이터 분석 환경의 이해
  데이터 샘플링
  데이터 분석 플랫폼
  
  
  3부 챗GPT로 데이터 분석 쉽게 하기
  
  08장 분석 주제 질의하기
  데이터 파악을 위한 메타 데이터와 ERD
  분석 주제 탐색 및 확장
  단계별 접근 및 문제 해결 기법 적용
  주제를 평가하는 새로운 관점
  보고서 초안 작성
  
  09장 데이터 확인 및 검증하기
  데이터 애널리스트를 활용한 데이터 확인
  분석 창을 활용한 코드 확인
  중복 데이터
  
  10장 결측값 처리하기
  결측값과 EDA
  결측값 처리 방법
  결측값 대체하기
  결측값 삭제하기
  
  11장 데이터 분포 파악
  수치형 데이터 특성 파악하기
  데이터 시각화하기
  데이터 샘플링하기
  
  12장 이상치 처리 방법
  이상치 찾기
  이상치 처리하기
  
  13장 범주형 데이터 분석
  범주형 데이터 분석하기
  범주형 데이터와 수치형 데이터 결합하기
  데이터 시각화 패키지
  
  14장 데이터 재범주화
  데이터 재범주화란?
  데이터 재범주화하기
  
  15장 통계 검정
  통계 검정이란?
  데이터 분포 시각화하기
  통계 검정하기
  
  16장 데이터 변환
  데이터 변환이란?
  범주형 데이터 변환하기 ①
  범주형 데이터 변환하기 ②
  데이터 취합하기
  
  
  4부 챗GPT와 고급 데이터 분석 도전하기
  
  17장 고액 연봉 개발자 예측하기
  고급 데이터 분석과 머신러닝 알고리즘
  상관관계 분석이란?
  예측을 위한 통계 기법, 회귀 분석
  회귀 분석으로 모델링하기
  스케일링하기
  트리 모형으로 모델링하기
  
  18장 멤버십 회원 확대 방안 분석
  의사결정나무란?
  데이터 처리하기
  알고리즘 학습시키기
  트리 구조 시각화하기
  트리 구조 텍스트화하기
  결과 정리하기
  
  19장 이탈 회원 분석
  군집 분석과 LDA 알고리즘
  데이터 처리하기
  알고리즘 학습시키기
  의사결정나무로 시각화하기
  
  20장 타기팅 분석
  분류 분석과 회귀 분석
  타기팅 모델링하기
  리프트 게인 차트로 모델 평가하기
  앙상블과 부스팅 모델
  LightGBM으로 모델링하기
  
  21장 선호하는 채널 분석
  챗GPT API란?
  오픈AI 플랫폼 둘러보기
  챗GPT API 사용하기
  배치 사용하기
  분석하기
  
  부록 데이터 분석에 필요한 최소한의 파이썬
  변수
  연산
  함수

출판사 서평

누구나 프로처럼,
나만의 데이터 분석가를 월 20달러로 고용하는 방법
챗GPT는 누가 어떻게 쓰느냐에 따라 무궁무진한 가능성을 가진 도구입니다. 때로는 SNS 콘텐츠를 뽑는 유능한 콘텐츠 기획자였다가, 의뢰인의 상담을 도와주는 변호사면서 막힘 없이 데이터 분석 주제 제안부터 보고서 작성까지 깔끔하게 정리해 주는 똑똑한 분석가가 되기도 합니다. 이 모든 역량을 가진 뛰어난 파트너를 챗GPT라는 하나의 도구로 고용하는 방법을 알려드립니다.

책 한 권으로 누구나 프로처럼,
챗GPT를 파트너로 활용하는 8단계
● 데이터 분석 도구로서 챗GPT 이해하기
● 나만의 챗GPT 설정하기
● 분석할 주제와 데이터 찾기
● 챗GPT로 분석 방향 설정하기
● 데이터 애널리스트로 결측값과 중복 데이터 처리하기
● 데이터 시각화 도구로 결과 보고서 만들기
● 고급 분석 기법으로 예측 모델 구축하기
● 데이터 분석에 필요한 최소한의 파이썬 학습하기

이 책의 대상 독자
● 데이터 분석을 막 시작한 주니어 데이터 분석가
● 데이터 기반 기획, 마케팅이 필요한 기획자 & 마케터
● 생성 AI를 데이터 분석 실무에 활용하고 싶은 IT 종사자
● 데이터 분석과 생성 AI에 관심이 있는 누구나


누구나 이 책에서 다루는 모든 프로젝트를 직접 실습할 수 있도록 데이터 파일을 제공합니다.
● 실습 파일: aitechupdate.com/월20달러-데이터-분석-실습

기본정보

ISBN	9791169212977
발행(출시)일자	2024년 10월 29일
쪽수	512쪽
크기	153 * 223 * 23 mm / 786 g
총권수	1권
시리즈명	누구나 프로처럼, 생활 AI

Klover 리뷰 (3)

[ja*******]

이 책은 AI 특히, 생성형AI나 LLM을 잘 모르거나 들었다 하더라도 챗GPT만 잠깐 사용하는 초보자라면 그리고, 챗GPT를 여전히 번역이나 자료 정리 용도로 사용하는 AI왕초보자라면 이 책을 강력히 강력히 추천합니다.

왜냐하면, 이 책은 ChatGPT에 대한 개념이나 원리 내부 로직, 아키텍처를 설명하지 않습니다. 만약, 여러분이 GPTs를 만들고 API호출을 해서 구현할 수 있다면 이 책은 skip하셔도 좋습니다. 오히려, ChatGPT를 어떻게 우리 일상생활에 쉽게 활용할 수 있는지를 알려주는 활용서입니다. 그래서, 옆에다 두고두고 보면서 사용하기에 가장 알맞은 책이라 생각합니다. 509페이지에 달하는 방대한(?) 책이지만 내용은 너무도 쉽게 읽고 이해할수 있도록 잘 만들어졌습니다.
이 책은 크게 보면 3가지 챕터로 볼 수 있을거 같습니다.

1. 챗GPT의 기본 개념 잡기
초반 도입부분에서는 챗GPT의 개념과 사용방법에 대해서 알려줍니다. 챗GPT 유료버전에 가입해서 질의 응답, 그림 그리기 뿐만 아니라 사용자 맞춤형 환경설정하는 방법, 다양한 GPTs, 그리고, 최신 ChatGPT의 기능중에 하나인 음성채팅 활용하는 방법, 프롬프링 방법등 초보자들을 위한 다양한 가이드와 내용을 명시하고 있습니다. 이외에도 Pdf파일을 ppt 보고서로 만들거나, 코드파일 코드 리뷰, CSV 파일로 데이터 분석하는 가이드등은 챗gpt로 이런것까지 할 수 있구나 하는 방법을 알 수 있습니다.
그리고, 맨뒤에 있는 ChatGPT API를 연동하거나 사용하여 분석하기의 내용도 크게 보면 ChatGPT의 기본 활용으로 볼 수 있을거 같습니다.


개인적으로는 명확하고 구체적으로 질문하기, 필요한 배경정보 제공하기, 청중 설정하기, 임부와 역할 부여하기, 직업 세분화 몇 단계별로 생각 , Chain of thought 작성하기, 긍정지시문 사용하기, 키워드 제시가하기, 편견 제거하기등의 다양한 프롬프팅 노하우를 알려주고 있어 초보자들에게 특히 도움 될 거 같다는 생각이 들었습니다. 그리고,특히, 아래의 도표처럼 ChatGPT의 사고의 폭을 넓힐 수 있는 다양한 단계별 접근 및 문제 해결기법은 기존 다른 책에서는 보지못한 부분일뿐만 아니라 다른 업무에도 적용해볼 수 있어서 더욱 의미가 있는거 같습니다.

2. 데이터 분석의 기본 개념 잡기
대부분의 데이터분석가나 데이터 과학자들은 알 수 있는 데이터나 데이터베이스, SQL, 원시데이터, 그리고, 분석 주제 선정을 위한 분석과제 도출방법으로 상향식, 하향식 접근 방법은 흥미롭게 읽은 부분중에 하나였습니다. 데이터 분석을 잘 모르는 저와 같은 초보자들에게는 데이터분석을 위해서는 이런 기본지식들이 필요하구나 하는 내용을 이해하는 장이기도 하였습니다.
하향식 접근방법: 회사의 비전이나 전략 또는 특정 비즈니스 목표와 전략을 세우고 이를 달성할 수 있는 프로젝트와 연계시키고, 과제를 찾는 방식
상향식 접근방법: 데이터를 바탕으로 인사이트를 도출하거나 문제를 해결하는 분석과제로써 데이터의 특성을 최대한 활용하여 가치 창출에 집중
3. 챗GPT로 데이터 분석하기 & 고급데이터 분석 도전
사실 이 책의 핵심적인 내용은 바로 3장과 4장으로 고급 프럼프팅 기술의 향연(?)이 펼쳐집니다.

챗GPT에서 원천소스가 되는 엑셀데이터를 업로드해서 데이터의 타입, 용량, 수량, 출처, 중복데이터 체크, 샘플데이터의 확인등의 데이터 검증 과정을 시작으로 표기반의 데이터 통계 요약 및 결측값 처리, 데이터 시각화나 샘플링, 이상치 찾아서 제거하거나 숫자형 범주형 데이터 분석, 통계 검정 및 데이터 변환 및 취합, 상관관계 분석등의 내용을 배우게 됩니다.
결측값(Missing Value): 데이터에 있는 빈 값은 기록되지 않거나 잘못 입력했을때 발생하는 값
이상치(outlier): 데이터 분포에서 벗어난 극단적인 값
통계검정: 데이터를 기반으로 가설을 검증하는 과정으로 예를 들어 2개 이상의 집단 사이에 어떤 연관성이나 차이나 있는지 검증하는 형태
그리고, 머신러닝 알고리즘에 대해서도 체계적으로 설명을 해주고 있으나, 보다 깊이 있는 이해가 필요하신분들은 머신러닝 알고리즘 전문 서적을 별도로 읽으시면 좋을거 같습니다. 🙂

고급 기술로써 트리모형으로 모델링하거나 트리구조로 시각화 및 텍스트화하기, 의사결정트리로 시각화하거나 타기팅 분석을 위해 회귀분석과 모델링 하는 내용들은 데이터분석을 잘 모르거나 초보자에게 이런 개념도 있어하고 알려줍니다. 물론, 파이썬이나 Panda, R등을 잘 모르는 초보자들에게는 중간중간 막히는 부분이 있을수도 있으나 이런 부분들은 skip하고 넘어가면 됩니다. ^^




다만, 한가지 우려는 챗GPT의 강력한 기능에 집중한 나머지, ChatGPT의 환각증세등의 한계에 대한 논의는 다소 부족하게 느껴집니다. 특히 챗GPT의 답변은 가끔씩 불완전하거나 틀릴 수 있다는 점, 그리고 데이터 품질이 낮을 경우 결과의 신뢰성 역시 떨어질 수 있다는 문제점에 대해서도 인지할 필요가 있습니다. 따라서, 데이터 분석의 신뢰성을 높이기 위해서는 챗GPT의 답변을 맹신하기보다는 결과를 검토하고, 다른 방법과 비교하는 등의 보완이이 필요하다고 생각됩니다.

그럼에도 불구하고, 데이터 사이언티스트들이 기존에 하고 있는 데이터 분석 및 모델링등의 업무를 챗GPT를 이용해서 하는 방법을 이렇게 쉽게 가이드하고 이해할 수 있도록 한 책은 이 책밖에 없는거 같습니다. 데이터 분석의 과정이 어떻게 이루어지고 있고, 데이터 사이언티스트 전문 기술이나 업무를 배우지 않은 사람들도 이제 ChatGPT만 있으면 할 수 있습니다.

저 역시도 사실 데이터 사이언티스트 관련 내용을 체계적으로 배우지 않아서 온/오프라인의 몇달짜리 과정을 알아보다가 만적도 있었는데, 이번 기회를 통해서 데이터 분석 업무의 실체(?)와 이론에 대한 활용등을 알게되었습니다. 챗GPT의 여러 효능(?)중에 하나로 데이터 분석을 하고자 하시는분들은 필독을 권합니다!!!

[ho******]

#️⃣ 데이터도, Chat GPT도 잘 몰라요. 그런데 분석이 하고 싶어요.
영업지원부서에서 일을 할 때 단순 데이터를 정리하는데 그치고 싶지 않고 분석을 해보고 싶다는 생각에 무작정 책도 사고, 자격증 공부도 해보고, 통계 무료 강의를 찾아서 듣기도 했다.



사실 요즘은 이렇게 무식하게 할 필요가 없다.

코로나를 기점으로 이미 데이터분석과 관련된 커리큘럼과 학습 환경이 매우 잘 조성되었기 때문이다. 그 중에서도 가장 간단하게 현업에 적용해볼 수 있는 방법은 Chat GPT를 활용하는 것이다. 파이썬이 데이터 분석에 적합하고 GPT가 이를 사용하고 있기 때문에 이미 하위 서비스로 제공하고 있다.

다만, 내가 아는 게 없는 그야말로 '미지'의 상태라면 시작하기 어려우니, 시동을 걸 수 있는 부스터가 필요하다. 그게 오늘 리뷰할 책이다.


#️⃣ 데이터 분석을 한다고 원리까지 다 알 필요는 없잖아요?
위 명제는 데이터를 공부하시는 수 많은 사람들에게 상당히 실례되는 표현이지만, 통계학자가 아니라고 해서 데이터 분석을 하면 안되는 법은 없다고 생각한다.

이 책은 철저히 데이터 분석을 '활용하는' 관점에서 설명하고 있다. 당연히 각 개념에 대한 설명과 원리에 대해서 언급하지만 복잡한 증명이나 상세한 이론을 풀어놓지 않는다. 예를 들어 '랜덤 포레스트 회귀 모델'을 소개하면서 트리 구조를 상세히 설명하거나 파이썬으로 동작하는 사이킷런(sklearn) 라이브러리를 이용한 코드 예제를 나열하지 않는다. 대신 간단한 알고리즘 개념만으로 빠르게 실무에 적용할 수 있도록 안내한다.

물론 이런 실용적 접근에는 한계가 분명히 존재한다. 결론을 도출하고 분석 결과를 해석하고, 또 의사결정하는 과정에서 분석자가 알고리즘의 원리를 깊이 이해하지 못하거나 데이터의 특성을 충분히 고려하지 않을 경우, 잘못된 결론에 도달하거나 과도한 일반화를 할 수 있기 때문이다.


#️⃣ 데이터를 입문할 때 가장 빠르게 흥미를 붙일 수 있는 책
그럼에도 데이터 분석을 처음 입문하는 사람이면 다소 분석 주제를 선정하는 일부터 전처리, 이상치 처리, 분석, 예측까지의 프로세스를 경험해보는 게 '흥미'면에서 아주 도움이 된다.

또한, 책의 구성이 실제 현업을 수행하는 팀의 역할극으로 구성되어 있기 때문에 캐주얼하고 쉽게 느껴진다. 특히 위에서 언급한 것 처럼 복잡한 코드를 나열하지 않고 실제 GPT의 프롬프터를 보여주고 있어 책과 함께 실습을 하지 않고 먼저 책만 읽어보고 학습을 할 수 있다. 예제 코드가 있는 책과는 달리 장점이라 느껴지는 부분이다.


추천독자
추천 독자는 당연히 데이터 분석을 처음하는 모든 직장인이다.
내가 어떤 직무를 하건, 데이터 분석을 빼놓을 수 없는 시대에 살고 있다. 이 책을 통해 Chat GPT와 데이터 분석을 함께 입문하면 좋을 것 같다.

💡 한빛미디어 <나는 리뷰어다> 활동을 위해서 책을 제공받아 작성된 서평입니다.

[kc********]

만약 한달에 20달러를 자유롭게 쓸 수 있다면 어디에 쓸 것인가? 요새 환율이 올라서 약 3만원에 가까운 돈이긴한데... 물론 각자의 필요에 맞게 쓰겠지만, 나는 당연히 chatGPT plus를 구독하는데 쓸 것이다. 이 20달러라는 가격이 바로 chatGPT plus를 구독하는데 필요한 비용인데, 이번 포스트에서 소개할 책의 제목에서 설명하는 것이 ChatGPT plus를 구독함으로써, 우리에게 주어진 데이터에 대해서 분석해줄 수 있는 AI 에이전트를 활용하자는 것이다.

사실 책의 표지에서 담고 있는 것처럼 코드 한 줄없이 기초 통계부터 예측을 할 수 있다는 키워드에 꽂혀서 책을 선택하게 되었다. 만약 내가 활용하고 있는 센서 데이터도 이런데 올리면 뭔가 abnormality나 상관관계같은 것을 알아서 분석을 해줄 수 있을까 하는 막연한 기대감을 가지고 말이다. 그리고 실제로 책에서도 그런 관련 정보를 얻기까지의 과정을 예시 데이터를 통해서 소개하고 있었다.
 여타 책과 다르게 이 책이 좀 특이한 부분은 책의 진행이 대화형으로 이뤄진다는 것이다. 일반적인 책들이 단순히 지식을 쭉 서술하고, 관련 코드 설명하고 이런 방식이었다면, 이 책에서는 가상의 인물인 김대리와 박차장이 주어진 데이터를 가지고 분석을 할때 챗GPT를 활용하는 방안을 소개하고 있다. 그리고 책 표지에 나와있다시피, 책의 내용속에는 데이터 분석에 필요한 코드가 거의 없다. 그렇기 때문에 이 책은 어떻게 보면 통계에 활용할 수 있는 프롬프팅 가이드북이라고 보면 좋을 것 같다.
 사실 어떤 데이터를 가지고 분석을 하기 위해서는 기본적인 통계 지식이 필요한 편이다. 데이터 유형이 어떤지, 아니면 내가 세운 가설이 맞는지 통계 검정도 해봐야 하고, 앞에서 언급한 것처럼 이상치 탐지도 하기 위한 방안도 고민해야 한다. 그래서 이 책은 그런 관련 내용을 각각의 장으로 나눠서 챗GPT와 함께 분석하는 과정을 소개하고 있다. 그래서 생각보다 각 장의 내용이 짦게 되어 있지만, 딱 통계에서 필요한 정보를 얻기 위해 챗GPT를 활용하는 방안을 잘 소개하고 있다. 특히 후반부에 소개되는 API를 활용한 자동화 과정은 앞의 데이터 분석 과정을 발전시켜 조금 더 실전적으로 활용할 수 있는 방법에 대해서 설명해주고 있다. 
다만 개인적으로 좀 아쉬운 부분은 챗GPT 활용 방안에 대해서 세부주제별 장을 나눠놓다 보니, 조금 통계 관련 기본 이론이 같이 설명되어 있으면 좋겠다는 생각이 들었다. 물론 챗GPT이 알아서 잘 분석해주겠지만, 어느덧 책을 읽으면서 "이게 통계책인지, 데이터 분석책인지, 아님 프롬프트책인지.." 좀 독자 타겟이 애매할 것 같다는 생각이 들었다. 그래도 데이터 분석을 하는데 있어서 이렇게 챗GPT를 활용할 수 있구나 하는 신선한 주제의 책이었기에 나름 책을 재미있게 읽었다.

(해당 포스트에서 소개하고 있는 "월 20달러로 고용하는 데이터 분석가 with 챗GPT" 책은 한빛미디어로부터 제공받았음을 알려드립니다.)