파이썬기반 SNS텍스트 데이터마이닝

서혜선 저자(글)

교우 · 2024년 02월 05일

책 소개

파이썬을 이용한 비정형 데이터의 웹 크롤링을 통한 데이터 수집 과정과 수집된 데이터의 전처리, 그리고 문장을 주요 어휘 단위로 나누기 및 주요 어휘에 대한 워드클라우드 시각화 등을 다루는 책이다. 또한 어휘들의 거리 유사도 기반의 군집화, 군집분석에 의한 토픽별 세부 분석으로 TF-IDF, LDA 토픽 모델링, 감성분석 그리고 일반화선형모형을 다루고 있다.

작가정보

저자(글) 서혜선

출간작으로 『파이썬기반 SNS텍스트 데이터마이닝』 등이 있다.

작가의 말

빅데이터의 풍요 속에서, 특히 소셜 미디어상의 방대한 정보들은 각 산업분야(도메인)별로 매우 의미 있게 사용되고 있다. 온라인 블로그나 카페 및 각종 기사, 웹문서들의 활용뿐만 아니라, 영화 예매 사이트, 온라인 쇼핑몰, 맛집 리뷰 및 댓글 등의 정보 기반 마케팅 활동들(영화, 제품, 맛집 추천 등)이 매우 활발하다. 따라서 이러한 비정형 형태의 소셜 텍스트 데이터를 수집 및 정리하여 분석하고, 데이터에 함축되고 내재된 의미를 찾는 과정을 수행 할 수 있다면 비록 빅데이터 관련 전공자가 아니라 할지라도 상당히 경쟁력 있는 역량을 갖추게 될 것이다.
이렇게 온라인상의 다양한 정보를 크롤링하여 수집하고 분석하는 일련의 작업을 위해 필요한 소프트웨어 중에서 가장 대표적인 것이 파이썬이다. 이 책에서는 파이썬을 이용한 비정형 데이터의 웹 크롤링을 통한 데이터 수집 과정과 수집된 데이터의 전처리, 그리고 문장을 주요 어휘 단위로 나누기 및 주요 어휘에 대한 워드클라우드 시각화 등을 다룬다. 또한 어휘들의 거리 유사도 기반의 군집화, 군집분석에 의한 토픽별 세부 분석으로 TF-IDF, LDA 토픽 모델링, 감성분석 그리고 일반화선형모형을 다루게 된다.
이 책을 학습한 독자들은 본인들의 주된 관심 영역에 대해 텍스트 데이터 마이닝의 전 과정을 수행 할 수 있다. 특히 3장에서 7장까지 차근차근 학습하고 각 장별 연습문제를 크롤링 과정을 통해 정리해 간다면 이 책의 마무리가 될 즈음 여러분은 텍스트 데이터 분석에 대한 자신감으로 충만할 것이다.
본문에 사용된 크롤링 데이터와 프로그램은 ㈜교우(www.kyowoo.co.kr)나 https://github.com/Hyesun-SUH/Text-data-mining에서 다운 받을 수 있다.
마지막으로 방학동안 웹 크롤링 세미나에 함께 참여했던 빅데이터 랩 연구실의 학생들에게 감사의 마음을 전한다.

목차

• 1장 웹 크롤링 준비
  1.1 SNS 텍스트 데이터의 이해
  1.2 웹 크롤링에 필요한 분석 도구 파이썬과 아나콘다 소개
  1.3 아나콘다 설치하기
  1.4 웹 크롤링시 주의점
  
  2장 웹 크롤링 경험하기
  2.1 쥬피터 노트북 소개
  2.2 웹 크롤링 시작하기
  2.3 BS4를 활용한 기사 제목 수집
  2.4 수집된 데이터의 전처리 및 워드클라우드 맛보기
  2.5 연습문제
  
  3장 Selenium을 이용한 동적 크롤링
  3.1 파이썬 라이브러리 Selenium 소개
  3.2 Selenium의 주요 메서드
  3.3 Selenium을 이용한 동적 크롤링 해보기
  3.4 네이버 카페와 다음 카페 크롤링
  3.5 연습문제
  
  4장 크롤링 데이터의 전처리
  4.1 크롤링 데이터 합치기
  4.2 데이터 전처리
  4.3 연습문제
  
  5장 텍스트 데이터 마이닝
  5.1 명사별 상위 빈도
  5.2 워드클라우드(Wordcloud)
  5.3 TF-IDF(Term Frequency-Inverse Document Frequency)
  5.4 K-평균 군집화
  5.5 토픽 모델링
  5.6 연습문제
  
  6장 감성 분석
  6.1 감성 분석 방법론
  6.2 감성 사전
  6.3 KNU 기반 감성 분석
  6.4 EmpLex 기반 감성 분석
  6.5 감성 상관분석
  6.6 연습 문제
  
  7장 텍스트 데이터의 모델링
  7.1 N-gram 언어 모형
  7.2 일반화선형모형(Generalized Linear Model, GLM)
  7.3 연습문제

기본정보

ISBN	9791125103844
발행(출시)일자	2024년 02월 05일
쪽수	190쪽
크기	188 * 257 * 12 mm / 541 g
총권수	1권

Klover

[oh*****]

내용은 차치하고서라도 본문의 실습코드를 다운로드 받으려 했는데 안보인다. 서적 안내에서 두 가지 방법이 쓰여있다. (1)출판사(교우)에 들어가 보라고 해서 갔더니 코드없다. 해서 담당자 홈피 Q&A에 연락 남겼는데 함흥차사다. (2)저자 Github를 알려줘 들어갔더니 여기도 아무것도 없다. 실망이다! 독자는 20년 이상 이전부터 텍스트마이닝 등을 코딩하고 연구해 온 독자인데 너무 어이없다. 참고로 하려는 것이고, 대단한 실습코드도 아닌데 어떻게 이런식으로 영업하나?!