Python 데이터 수집과 분석
주제
BigData
강사명
백명숙
교육목표
본 과정은 파이썬을 통해 웹상의 데이터를 수집하고 가공하는 방법에 대해서 학습하고 웹 스크래핑과 크롤링 기법을 통해 웹에 존재하는 다양한 데이터로 추출하는 방법을 알아보고, Requests와 BeautifulSoup를 이용하여 Http통신을 통하여 웹상의 데이터를 파싱하여 수집하고, 수집된 데이터를 Pandas를 이용하여 분석하고 Pymysql과 SqlAlchemy를 이용하여 데이터베이스에 저장하고, Matplotlib와 Seaborn을 이용하여 시각화 해보는 과정임.
교육시간
2일 15시간
커리큘럼
가. 파이썬 기본 문법 이해하기
- 파이썬 소개
- 파이썬 기본 문법
- 개발환경 설정
나. 웹 스크래핑 개념 이해하기
- 오픈 API 사용과 JSON
- 동적으로 생성된 HTML 분석
- 웹 스크래핑 개념과 사용 되는 오픈소스 이해하기
다. 데이터 수집과 저장하기
- Request와 Beautifulsoup 라이브러리 사용 CSV, 엑셀 파일 처리
- Binary Data(image,audio) 다운로드
라. 데이터 분석/저장/시각화 하기
- 데이터 분석을 위한 Pandas 라이브러리 사용
- 데이터 DB에 저장을 위한Pymysql, sqlAlchemy 사용
- 데이터 시각화를 위한Matplotlib, Seaborn 라이브러리 사용"
수강신청 방법
아래 일정 기입된 부분 두 번 클릭 시 수강신청 사이트로 이동
12월
13 more properties
