문자열 가공, CSV 파일 처리, 통계 분석, 웹 크롤링까지 | 내 손으로 직접 만든다!

뼛속까지 문과생인 지리학 박사가 집필한 파이썬 생활 프로그래밍 책! 웹 크롤링부터 데이터 분석까지, 11가지 프로그램을 내 손으로 직접 만든다!

이 책은 생활 프로그래머 김창현 박사가 일상과 업무에서 파이썬 프로그래밍을 활용한 경험을 바탕으로 만들어졌습니다. 가장 쉬운 활용법인 계산기부터 미드 ‘프렌즈’에서 대사 추출, 아파트 실거래가 통계 분석, 포털 사이트 기사 수집까지 총 11개 프로그램을 직접 만들어 볼 수 있습니다. 이 프로그램들은 파이썬 문법을 한 번이라도 배운 적이 있는 사람이라면 누구나 따라 할 수 있는 수준으로 설계했습니다. 또한, 각각의 프로그램은 우리 삶과 밀접한 생활 속 주제이므로 프로그램의 동작 방식을 이해하려고 억지로 애쓰지 않아도 됩니다. 이 책은 파이썬 입문서와 함께 보면서 프로그래밍 감각을 기르는 사람, 또는 공부나 업무에 필요한 프로그램을 직접 개발해 보고 싶은 사람에게 적합합니다. 또한, 이미 다른 언어에 익숙한 개발자가 파이썬을 빠르게 습득하고 싶을 때 지루한 문법서보다 즐겁게 배울 수 있습니다. ‘구슬이 서 말이어도 꿰어야 보배’라는 속담처럼 파이썬 문법 공부를 마쳤다면 이제 나만의 유용한 프로그램을 직접 만들어 보세요.

01장 파이썬 프로그래밍 준비하기
-------------------------------------------------

01-1 지리학 박사는 왜 파이썬에 빠졌을까
__내가 파이썬의 매력에 빠진 이유
__깊이를 알수록 심오한 파이썬
__오류를 극복하고 프로그램을 완성하세요

01-2 파이썬 개발 환경 준비하기
__Do it! 아나콘다 설치하기

01-3 인터프리터와 에디터 준비하기
__인터프리터와 에디터의 차이 이해하기
__IDLE은 언제 활용할까
__Do it! 노트패드++ 설치하기
__Do it! 노트패드++에서 파이썬 프로그램 만들기
__Do it! 노트패드++에서 프로그램 바로 실행하기
연습문제

-------------------------------------------------
02장 기초 문법으로 프로그램 만들기
-------------------------------------------------

02-1 파이썬을 계산기로 활용하기
__기본 연산자 알아보기
__Do it! 평균 나이 구하기

02-2 19단 곱셈표 출력하기
__2단 곱셈표 직접 출력하기
__Do it! for 문으로 곱셈표 출력하기
__Do it! for 문을 두 번 사용해 19단 곱셈표 출력하기
__Do it! 19단 곱셈표 완성하기
__문자열 포매팅으로 print( ) 함수 더 편하게 사용하기

02-3 부가세 출력 프로그램 만들기
__부가 가치세 쉽게 계산하기
__lambda로 간단하게 함수 만들기
__def 문으로 함수 만들기
__input() 함수로 사용자에게 입력값 받기
__if-else 문으로 조건에 따라 결괏값 출력하기
__Do it! 서비스 가격 출력 프로그램 완성하기
연습문제
칼럼: 왜 첫 코딩으로 파이썬을 추천할까?

-------------------------------------------------
03장 텍스트 파일 가공하기
-------------------------------------------------

03-1 파일 입출력 연습하기
__현재 위치 설정하기
__파일 열고 닫기
__파일 열기 모드 알아보기
__with 문으로 객체를 만들지 않고 파일 입출력하기
__한글 파일 오류 해결하기

03-2 정규표현식으로 문자열 다루기
__정규표현식이란
__정규표현식의 정의와 필요성
__match 메서드- 문자열 도입에서 패턴 찾기
__search 메서드 - 문자열 전체에서 패턴 찾기
__findall 메서드 - 패턴을 모두 찾아 리스트로 반환하기
__split 메서드 - 문장 나누는 패턴 만들기
__sub 메서드 - 문자열 바꾸기
__Do it! ly로 끝나는 단어 추출하기

03-3 드라마 대본 파일 가공하기
__Do it! 드라마 대본 파일 준비하기
__Do it! 특정 등장인물의 대사만 모으기
__Do it! 등장인물 리스트 만들기
__Do it! 지문만 출력하기
__Do it! 특정 단어의 예문만 모아 파일로 저장하기
연습문제
칼럼: 코딩으로 논리력을 키워 보자

-------------------------------------------------
04장 CSV 파일로 데이터 다루기
-------------------------------------------------

04-1 CSV 데이터 알아보기
__CSV 파일이란
__CSV 파일 만들고 읽기

04-2 파이썬으로 CSV 파일 읽고 쓰기
__CSV 파일 읽기
__CSV 파일 쓰기
__Do it! 나만의 모듈을 만들어 사용하기

04-3 CSV 파일 안의 문자를 숫자로 전환하기
__CSV 파일 불러와서 형식 확인하기
__Do it! 문자형 자료를 숫자형으로 바꾸기
__예외 처리로 오류 넘어가기
__Do it! 예외 처리로 숫자만 골라서 숫자형으로 바꾸기

04-4 CSV 파일 데이터 분석하기
__Do it! 외국인 비율이 3% 넘는 구 정보만 CSV 파일로 저장하기
__Do it! 부동산 실거래가 살펴보기
__Do it! 번역한 예문을 표로 저장하기
연습문제

-------------------------------------------------
05장 다양한 패키지로 데이터 분석하기
-------------------------------------------------

05-1 데이터 분석 패키지 준비하기
__데이터 분석 패키지 설치하기

05-2 넘파이로 배열 다루기
__넘파이로 배열 정의하기
__배열 슬라이싱 하기
__배열의 크기 알아내기: shape
__배열의 원소 유형 확인하기: dtype
__배열 유형 바꾸기: astype()
__넘파이 함수 알아보기
__배열의 사칙 연산
__파이썬 리스트와 넘파이 배열의 차이점
__Do it! 설문지 데이터 전처리하기

05-3 넘파이로 사업성 분석하기
__사업성 분석이란
__Do it! 자본의 현재 가치 구하기
__Do it! 놀이공원 사업의 사업성 분석하기

05-4 판다스로 데이터프레임 만들기
__데이터프레임이란
__Do it! CSV 파일 불러와 데이터프레임으로 만들기
__Do it! 데이터프레임 살펴보기

05-5 판다스로 통계 데이터 다루기
__Do it! 기초통계량 살펴보기
__Do it! 기초통계량 분석하기

05-6 실전 통계 분석 맛보기
__Do it! 싸이파이 패키지로 t검정하기
__피어슨과 스피어만 상관관계 분석 알아보기
__Do it! 두 변수의 상관관계 분석하기
__회귀 분석 알아보기
__Do it! statsmodels 패키지로 회귀 분석하기

05-7 맷플롯립으로 그래프 그리기
__그래프는 엑셀로만 그리면 안 될까
__그래프 만들고 출력하기
__그래프 모양과 색 지정하기
__축 이름 지정하기
__그래프를 이미지 파일로 저장하기
연습문제
칼럼: 통계 분석을 할 때 어떤 도구를 골라야 할까?

-------------------------------------------------
06장 웹 크롤링으로 정보 모으기
-------------------------------------------------

06-1 웹 크롤링 알아보기
__웹 크롤링이란
__HTML 몰라도 웹 크롤링을 할 수 있을까
__인터넷에는 중요한 자료가 정말 없을까
__수많은 정보를 어떻게 활용할까

06-2 웹 크롤링 준비하기
__Quotes to scrape 페이지 살펴보기
__뷰티풀수프 설치하기
__기본 모듈 임포트 하기
__Do it! 웹 문서 자료를 가져와 가공하기
__Do it! 특정 태그에서 텍스트만 추출하기
__Do it! 웹 브라우저에서 특정 태그 찾아 명언 출력하기

06-3 포털 사이트에서 기사 크롤링 하기
__Do it! 웹 크롤링 기본 환경 준비하기
__Do it! 머리기사 제목 추출하기
__Do it! 하이퍼링크 주소 추출하기
__Do it! 원하는 영역에서 하이퍼링크 모두 추출하기
__Do it! 기사 제목과 내용 한꺼번에 추출하기
__Do it! 하이퍼링크된 모든 기사의 제목과 본문 추출하기

06-4 프로그램 실행 파일 만들기
__Do it! URL 주소 저장하기
__Do it! 기사 본문을 파일로 저장하기
__Do it! 기사 제목, 본문, 하이퍼링크를 파일로 저장하기
__Do it! 웹 크롤링 실행 파일 만들기
__웹 크롤링을 끝내면서
연습문제
칼럼: 마지막으로 하고 싶은 이야기
찾아보기

내가 필요한 프로그램 직접 만들어 쓴다!
11가지 프로그램을 만들면서 파이썬 프로그래밍 감각을 길러 보자
-----------------------------------
파이썬 문법을 아는 것에 그치지 않고 자기 공부나 업무에 써먹고 싶다면 프로그래밍 감각을 틈틈이 길러야 합니다. 어떤 상황에 어떤 프로그램이 필요한지 스스로 떠올리고 실제로 만들 줄 알아야 파이썬을 제대로 써먹을 수 있으니까요. 프로그래밍 감각을 키우려면 어떤 도구를 한몸처럼 다루기 위해 여러 상황에서 써 보는 것처럼 실제로 쓸만한 프로그램을 여러 개 만들어 봐야 합니다. 이 책과 함께 계산기부터 미드 ‘프렌즈’에서 대사 추출, 아파트 실거래가 통계 분석, 포털 사이트 기사 수집 등 생활에 밀접한 프로그램 11개를 직접 만들면서 프로그래밍 감각을 길러 보세요. 이 과정에서 자연스럽게 정규표현식, CSV 파일 처리, 파일 입출력, 통계 분석, 웹 크롤링 등 다양한 파이썬 활용 분야까지 경험해 볼 수 있습니다.★ 이 책에서 만드는 프로그램 목록
1.19단 곱셈표 출력
2.부가세 자동 계산기
3.‘프렌즈’ 대본에서 대사 추출
4.서울시 인구 비율 조사
5.아파트 실거래가 검색
6.영문과 번역문 자동 정렬기
7.CSV 파일을 활용한 사업성 분석
8.주택 실거래가 기초 통계 분석
9.직업 만족도 설문조사 통계 분석
10.웹 사이트 명언 자동 수집
11.포털 사이트 기사 자동 수집(목차에서 ‘Do it!’이 붙은 부분의 실습을 차례대로 따라 하면 누구나 쉽게 프로그램을 완성할 수 있습니다.)-----------------------------------
파이썬 기초만 알아도 충분하다!
실용적인 교재를 찾는 교강사께도 강추! 문과생, 중학생도 쉽게 따라 만들 수 있다
-----------------------------------
이 책은 누구나 책에 나오는 프로젝트를 쉽게 따라 할 수 있도록 실습 환경을 만드는 것에서부터 시작합니다. 그런 다음 가장 간단한 파이썬 활용인 계산기 만들기에서 출발해 구구단을 만들고 19단을 만듭니다. 그리고 엑셀로 할 수 있는 간단한 작업을 파이썬에게 시켜봅니다. 하나하나 프로젝트를 업그레이드하며 프로그램을 만드는 데 필요한 문법의 개념과 사용법을 바로바로 본문과 팁으로 설명하고, 코드가 어떻게 작동하는지 주석으로 친절하게 알려줍니다. 독자가 더 실감나게 프로젝트를 진행할 수 있도록 프로그램이 필요한 상황을 〈이런 상황이라면〉 코너로 제시하고, 프로그램을 어떻게 만들지 먼저 순서도를 그려봅니다. 본격적으로 코딩을 시작하는 부분에는 ‘Do it!’ 마크를 달아 독자가 읽다가 실습을 놓치지 않도록 배려했습니다.-----------------------------------
이제는 누구나 생활 프로그래머가 되어야 하는 시대!
저자도 여러분과 같은 직장인, 프로그래밍 문외한이었다
-----------------------------------
저자는 뼛속까지 문과생인 지리학 박사 출신으로, 2014년 지리학 박사 논문을 끝낸 다음에야 처음 파이썬을 만났다고 합니다. 바로바로 결과물이 나오는 파이썬에 매료된 그는 파이썬을 업무과 일상에 어떻게 적용할지를 즐겁게 고민하며 주말에 시간이 날 때마다 프로그램을 개발했습니다. 처음에는 계산기로만 파이썬을 활용하다가 공부한 시간이 점점 쌓여 이제는 파이썬을 활용해 자동으로 원하는 기사를 긁어와 자료집을 만들고, 길고 복잡한 텍스트에서 특정 패턴을 가진 문장만 추출할 정도로 발전했다고 합니다. 시간을 많이 써야 하는 단순 작업은 파이썬 프로그램으로 해결하게 된 것입니다.
이 책은 저자처럼 기존 개발자가 아닌 일반인, 또는 프로그래밍 초심자가 실제로 프로그램을 만들어 조금이라도 써먹을 수 있는 데 초점을 맞췄습니다. 특히, 03장에서 ‘정규표현식’을 사용해 텍스트를 다루는 건 누구에게나 꼭 필요한 기능입니다. 정규표현식을 매일 연습해서 써먹는다면 글을 다루는 모든 직장인이 생산성을 폭발시킬 수 있을 거라고 저자는 강조합니다. 또한 오류를 해결하는 데 익숙하지 않을 독자를 위해 코드 한 줄에 최소 한 시간 넘게 시간을 써서 모든 실습 코드를 최소 10번 이상 테스트 했습니다. ★ 이런 사람이 읽으면 좋아요
“파이썬 입문서를 읽은 다음에 뭘 해야 할지 모르겠어요.”
“코딩은 처음이지만 바로 프로그램을 만들면서 배워보고 싶어요.”
“직접 프로그램을 만들어서 생활이나 업무에 활용하고 싶어요.”사무실에서 하루 종일 숫자와 씨름하는 직장인들, 표 안의 숫자를 매일 채워 넣는 연구원, 좋은 글을 쓰기 위해 매일 문서 프로그램으로 글을 고치며 고심하는 작가들, 그리고 더 많은 정보를 얻고 싶어하는 대학생들에게 이 책, ‘Do it! 파이썬 생활 프로그래밍’ 책은 날개를 달아줄 수 있습니다.★ 이 책은 출간 전에 독자들이 미리 읽어 보았습니다. “프로그래밍을 어려워 하는 초심자, 문과생, 일반 사무직 직장인에게 꼭 추천합니다.”
- 허민(15년차 개발자)“진짜 생활에 써먹을 수 있는 파이썬 프로그래밍 방법이 들어 있습니다.”
- 오정민(소프트웨어 전공 대학생)“처음 프로그램을 만들어 보는 사람도 쉽게 이해할 수 있도록 실습을 하나하나 뜯어서 설명해 주는 부분이 좋았어요!”
- 김대엽(컴퓨터공학 전공 대학생)“실무에서 많이 사용하는 데이터 분석 패키지를 가볍게 사용해 볼 수 있습니다.”
- 고재영(인공지능 연구원)“실습을 따라 하다 보면 코딩 실력이 자연스럽게 한 단계 상승할 거예요.”
- 장현정(직업능력개발 훈련교사)“파이썬 입문을 막 끝낸 다음 데이터 과학 또는 인공지능을 더 공부해 보고 싶다면, 이 책을 먼저 읽어 보세요!”
- 이요셉(14년차 IT인)“프로그램 완성을 향해 양파 껍질을 벗기듯 하나씩 접근하는 구성이 돋보입니다.”
- 복종순(파이썬 코딩 강사)“이 책의 다양한 프로그램을 만들면서 앞으로 무엇을 더 공부해야 할지 감을 잡을 수 있었어요.”
- 박서빈(프로그래밍을 전공하는 고등학생)함께 배우고, 나누고, 성장하는 ‘Do it! 스터디룸’으로 오세요!
혼자 계획을 세우고 공부하다 보면 금방 지치기 마련이죠? 나와 비슷한 고민을 하고 있는 독자를 만나 어려운 내용을 공유해 보세요. 서로 도움을 주고받다 보면 공부가 더 보람찰 것입니다. 멀리 가려면 친구와 함께 앞으로 나아가 보세요.-두잇 스터디룸: https://cafe.naver.com/doitstudyroom※ 이 책의 전체 실습 파일은 이지스퍼블리싱 홈페이지 자료실 또는 저자 깃허브에서 제공합니다.-이지스퍼블리싱 홈페이지: http://www.easyspub.co.kr → [자료실] 클릭 → 도서명 검색
-저자 깃허브: https://github.com/skytreesea/do-it-python