코드공부방

AI(인공지능)라는 말을 못들어본 사람은 없을 것이다. 나도 인공지능이라는 말은 수없이 보고 듣고 했지만 인공지능에 대해 설명해보라고 하면 음... 알파고...? 이 책의 구성은 크게 "인공지능 파도가 오고있다", "인공지능 파도에 발을 담그자", "서핑을 잘하기 위한 유연성 기르기", "인공지능과 동행하기" 이렇게 4파트로 되어있다. 책은 인공지능이라는 주제를 생각할때 전반적으로 어렵진 않았다. 개인적으로 빅데이터, 인포메이션, 통계, 딥러닝의 사용처에 대해 비교적 쉽게 설명해놓은 부분이 마음에 들었지만 중간중간 내 수준에선 이해하기 힘든 수학공식이 잠깐씩 나오거나 할때는 눈을 질근 감고 읽었지만 못본척 넘겼다. (그렇다고 겁먹을 것은 없다. 내가 아예 수학과 등지고 살아왔기 때문에 그런 것이다.) 사..

정말 놀랍게도 올해 첫 완독서다. 챗봇 개발에 도전하며 정말 많은 책을 샀지만 완독한 책은 없다. 챗봇을 만들어보기 위해 딥러닝, 케라스, 파이썬 코드 관련 책은 여럿 샀는데 정작 챗봇을 만들기 위해 어떤 것들을 준비해야하는지에 대한 책은 읽지 않았던 것이다. 그래서 아무 지식없이 막 부딛혀가며 만들어왔었는데, 이 책은 그런 가려웠던 부분을 잘 긁어준 책이다. 구성은 "크게 챗봇의 이해", "국내에서 개발된 다양한 챗봇 사례", "챗봇의 기획", "챗봇의 제작 - 봇빌더" 이렇게 4파트로 나뉜다. 나는 챗봇 빌더를 활용해 만드려던거 아니다보니 마지막 파트는 흝어보듯이 넘겼다. 기업 내 FAQ용도로 챗봇을 구축해보려는 담당자, 또는 나와 같이 챗봇을 직접 만들어보려는 사람이 챗봇에 대해 이해가 필요한 사람..

파이썬으로 최신 부동산 뉴스를 모아서 보자! (웹 크롤링/스크래핑) (4) 이제 특정 언론사에서 뉴스를 수집하여 카테고리별로 DB에 저장하는 것까진 완료되었다. "뉴스 수집" 과정의 남은 과제는 수집된 뉴스 목록의 상세 내용을 수집하여 DB에 넣어주기만 하면 된다. 프로세스는 간단하다. 뉴스 목록 테이블 (TBL_LAND_NEWS_LIST)에서 NEWS_CONTENT Column의 값이 "수집 중입니다."인 row의 뉴스 URL값을 가져와 한번씩 조회하여 뉴스 상세 내용을 가져와 다시 뉴스 목록 테이블의 NEWS_CONTENT Column의 값을 UPDATE해줄 예정이다. (좀 더 깔끔한 방법은 뉴스 목록 테이블에 DETAIL_STATUS라는 Column을 하나 추가하여 상태값에 따라 상세 내용 수집 여..

파이썬으로 최신 부동산 뉴스를 모아서 보자! (웹 크롤링/스크래핑) (3) python에서 MariaDB를 접근할땐 mysql.connector라이브러리를 사용한다. 앞서 얘기했듯이 본 포스팅에선 DB서버 구축이나 라이브러리의 설치 등의 과정은 생략하고 나중에 별도로 정리해볼 예정이다. import mysql.connector dbconn = mysql.connector.connect(host='host명', user='DB 서버 접근 ID', password='DB서버 접근 PW', database='DB명', port='포트') cursor = dbconn.cursor() insert_data(dbconn, cursor) dbconn.commit() dbconn.close() 위와 같은 방식으로 db..

파이썬으로 최신 부동산 뉴스를 모아서 보자! (웹 크롤링/스크래핑) (2) 앞선 포스팅에서 서울경제에서 원하는 카테고리의 뉴스 목록을 수집하여 console에 print하는 것까지 작업을 진행하였다. 파이썬으로 최신 부동산 뉴스를 모아서 보자! (웹 크롤링/스크래핑) (1) 파이썬으로 최신 부동산 뉴스를 모아서 보자! (웹 크롤링/스크래핑) (1) 벌써 2021년 10월이다. 맙소사.. 2020년 12월 28일에 회고 글을 작성하며 2021년엔 많은 것들을 이뤄보자라는 생각을 했었 code-study.tistory.com 이번 포스팅에서는 수집한 데이터를 단순히 print하여 휘발시키는 것이 아닌 DB에 입력하는 것까지 진행해보려고 한다. 먼저 테이블 구조를 설계해야하는데, 복잡한 구조가 아니기때문에 테..

파이썬으로 최신 부동산 뉴스를 모아서 보자! (웹 크롤링/스크래핑) (1) 벌써 2021년 10월이다. 맙소사.. 2020년 12월 28일에 회고 글을 작성하며 2021년엔 많은 것들을 이뤄보자라는 생각을 했었는데.. 무엇을 해냈는가.. 이 블로그도 열심히 해보려고 했는데.. 2021년에 작성된 글은 고작 4개이다. (반성하자..) 뒤늦게 정신을 차리고 작은 프로젝트라도 시작해야겠다 싶어 뭘 해볼까 고민하다가 요즘 관심이 있는 부동산 분야의 뉴스를 여기저기서 모아와 한 곳에서 보여주는 웹페이지를 만들어보기로 했다. 단순히 긁어서 뉴스를 제공하는 것도 좋지만 모아와서 유의미한 정보를 제공해주고 싶기도 하다. 하지만 생각이 많아지면 당장 실행이 안될 것 같아 일단 부동산 뉴스부터 긁어보기로 했다. 먼저 검색..