반응형
반응형
검색어 분석 트렌드를 알아보기 위해서 파이썬으로 코드를 만들어봅니다. 검색어 분석을 위해 다양한 프로그램이나 웹사이트를 이용하지만 나에게 맞게 커스터마이징을 할 수 없어서 쉽게 볼 수 있는 페이지를 하나 만들려고 합니다.검색어 분석 트렌드 파이썬 코드 만들기 with Streamlit1차로 만들 페이지는 아래와 같습니다. 네이버 검색 키워드를 가져온 후 월간검색 및 월 클릭 수 작성된 페이지 수를 네이버에서 받아서 정보를 뿌려줍니다.이렇게 한 후 모바일(모바일이 대세라)검색 수는 많지만 경쟁정도가 낮은 키워드를 추천하도록 먼저 설계를 해보겠습니다. 전체 코드는 아래와 같습니다.import streamlit as stimport urllib.requestimport jsonimport pandas as ..
부동산 매물 정보 수집 방법 - 부동산 데이터 크롤링 및 처리 #1 ㅣ 네이버 부동산 데이터는 매우 유용하게 활용할 수 있지만, 원하는 형태로 변환된 자료를 얻는 것은 상당히 어렵습니다. Excel의 VBA를 사용하여 데이터를 변환하는 방법이 소개되곤 하지만, Python의 뛰어난 기능을 통해 실시간 부동산 매물 정보를 크롤링하는 구체적인 방법을 공부하고 있습니다.이제 네이버 부동산에서 방대한 데이터를 Python을 활용해 필요한 정보를 직접 수집해 보겠습니다.부동산 매물 정보 수집하기 - 부동산 데이터 크롤링 및 가공 #1네이버 부동산은 PC 환경과 모바일 환경으로 나누어져 서비스 되어지고 있으며,각각의 환경을 크롤링하는 방식도 차이가 있습니다. 두 방식 중에서 모바일 환경을 크롤링하는 방식이 보여지는..
파이썬 부동산 매매가 조회 프로그램 만들기 4편 (전국 데이터) ㅣ 서울 부동산 매매가를 조회하는 메소드가 잘 동작하는 것을 알았으니, 다 되었습니다. 약간 구조를 바꾸어서 서울 이외 지역의 부동산 매매가를 조회하는 메소드를 만들어보겠습니다.파이썬 부동산 매매가 조회 프로그램 만들기 4편 (전국 데이터)2024.09.14 - [부동산/자동화 프로젝트] - 파이썬 부동산 매매가 조회 프로그램 만들기 1편2024.09.14 - [부동산/자동화 프로젝트] - 파이썬 부동산 매매가 조회 프로그램 만들기 2편 (지역코드)2024.09.14 - [부동산/자동화 프로젝트] - 파이썬 부동산 매매가 조회 프로그램 만들기 3편 (서울아파트 컬럼 정리)서울 이외 지역 부동산 매매가를 조회하는 메소드# 사용자에게 시/도 이..
파이썬 부동산 매매가 조회 프로그램 만들기 3편 (서울아파트 컬럼 정리) ㅣ 저번 포스트에서는 지역 구분별 코드를 컨버팅해주는 클래스를 만들어보았습니다. 이번 포스트에서는 일단 라이브러리를 이용해서 추출을 한다음에 어떤 컬럼이 필요한지, 필요없는지, 추가해야할 데이터는 무엇이 있을지 생각해보고 추가해서 정제한다음, 대표적으로 서울 아파트 매매가를 조회해보겠습니다.파이썬 부동산 매매가 조회 프로그램 만들기 3편 (서울아파트 컬럼 정리)해당 포스팅은 1편, 2편에 이은 3편이므로 1,2편을 보지 않으신 분들은 먼저 포스팅을 보고 오세요!2024.09.14 - [부동산/자동화 프로젝트] - 파이썬 부동산 매매가 조회 프로그램 만들기 1편2024.09.14 - [부동산/자동화 프로젝트] - 파이썬 부동산 매매가..
파이썬 부동산 매매가 조회 프로그램 만들기 2편 (지역코드) ㅣ 지역 구분 코드 체계를 정리하는 것은 공공 데이터를 다루는 데 있어서 매우 중요한 과정입니다. 시, 도, 시군구, 읍면동의 계층적 관계를 파악하고, 이를 사용하기 쉽게 데이터 구조로 변환하는 것이 조회 및 데이터 처리 과정에서 큰 도움을 주기 때문이죠. 특히, 시군구 코드만으로도 많은 작업이 가능하지만, 다양한 상황에서 읍면동까지 세부적으로 사용할 일이 생길 수 있어 미리 준비해두면 좋습니다.아직 1편을 못보고 넘어오신 분들이라면 1편 먼저 보고 오시는게 좋을 것 같아요!2024.09.14 - [부동산/자동화 프로젝트] - 파이썬 부동산 매매가 조회 프로그램 만들기 1편 파이썬 부동산 매매가 조회 프로그램 만들기 2편 (지역코드)지역 구분 ..
파이썬 부동산 매매가 조회 프로그램 만들기 1편 ㅣ 최근 들어 부동산 시장의 변화가 심상치 않게 다가오고 있습니다. 뉴스나 주변에서 부동산에 대한 이야기를 듣다 보면, 나도 자연스럽게 관심을 가지게 되더군요. 그래서 저 역시 시간이 날 때마다 네이버 부동산이나 기타 부동산 관련 플랫폼을 통해, 제가 살고 있는 지역이나 마음에 드는 다른 지역의 부동산 시세를 계속해서 살펴보곤 했습니다. 하지만 문제는, 이런 정보를 일일이 수작업으로 찾아보다 보니 시간이 많이 들고, 특정 가격대의 매물을 찾는 데도 한계가 있다는 것이었어요.파이썬 부동산 매매가 조회 프로그램 만들기 1편부동산 매매가 확인의 중요성부동산이나 주식 같은 자산들은 매매된 가격이 그 지역이나 자산의 시세를 반영하는 중요한 지표가 됩니다. 즉, 최근..
오늘은 Pandas 총 정리를 해보려고 한다. 이전에는 엑셀을 다루는 모듈을 openpyxl 만 썼었는데 엑셀의 내부 data를 가공하는데 Pandas가 좀더 효율적인 것을 깨달았다. openpyxl은 엑셀의 특정 셀에 접근해서 값을 쓰고 읽어오는데 장점이 있다면 Pandas는 전체적인 표, 전체적인 data를 읽어오고 내가 원하는대로 가공할 수 있다는 것이 장점인 것 같다. 이번에는 Padnas 모듈을 사용하기 위한 기본적인 내용들을 정리하려고 한다. Pandas를 사용하려면 먼저 Series와 Dataframe의 개념을 먼저 알아야 한다. 해당 개념을 이해하기 위해 아래와 같이 간단히 도식화해보았다. [Python/파이썬] Pandas 총 정리 Series, Dataframe 개념 Series : 위..
본 포스팅에서는 파이썬 차트 스타일 적용하는 방법에 대해서 알아 보려고 합니다. Python-pptx 패키지를 활용하여 차트를 그리고 스타일을 적용하는 방법에 대해 소개를 하려고 하는데요, python으로 차트를 그리는 방법을 다루는 블로그들은 많지만 디자인 변경까지 알려주는 튜토리얼은 찾기 힘들었던 기억이 있는데요, 차트를 좀더 예쁘게 그려보고 싶은 분들께 오늘 글이 도움이 되었으면 좋겠습니다. 파이썬 차트 스타일 적용하기 차트 그리기 준비물 리스트 위 글에서는 차트를 ppt에서 그리지 않고 그림 파일로 만들어져 있는 차트(charts 폴더에 있는 이미지들)를 삽입하는 방법을 소개했는데, 이번에는 좀더 심화된 버전으로 ppt 차트를 직접 그리는 방법을 다루어보겠습니다. 결과물(우측상단 차트) 예시 먼저..
오늘은 파이썬 주식 분석 자동 프로그램 을 만들어 보려고 합니다. 파이썬은 활용도가 무궁무진한 것 같아요. 자동으로 분석하여 나에게 자동으로 메일을 보낼 수 있도록 한번 같이 만들어봅니다. 파이썬 주식 분석 자동 프로그램 만들기 1. 학습 목표 요즘은 재테크가 선택이 아닌 필수 입니다. 금리가 낮을수록 주식으로 재테크를 하고자 하는 분들이 많이 늘어납니다. 그래서 그런지 퇴근후에 재테크 공부하시는 분들도 많은것 같습니다. 그런데, 주식의 경우는 장이 열리고, 끝나는 시간이 오전 9시~15시30분인데요. 회사에서 집중적으로 업무를 하는 시간이기도 하고, 학생들은 한창 수업이 있는 시간입니다. 또 어떤 경우는 회사는 주식 관련 사이트를 접근 차단을 해 두어, 주식 정보를 보기가 참 어렵죠. 그래서 이런 불편..
여러분도 ' 내가 직접 황금 키워드 분석 하는 방법은 없을까 ' 라는 생각을 해본 적 있으신가요? 모두가 알고 있는 키워드 마스터나 블랙 키위와 같은 서비스를 이용하고 있으신가요? 해당 사이트들은 역시 좋은 서비스 들이지만 일일이 키워드를 입력해야된다는 귀찮음과 쓸만한 기능을 쓰려면 유료 서비스를 이용 해야하는 불편함이 있습니다. 무엇보다 앞서 말한 서비스들은 너무 많이 알려졌습니다. 따라서 남들과의 차별성을 확보하기란 어려운 일이죠. 그래서 약간의 코딩으로 여러분의 경쟁력을 확보할 수 있도록 파이썬 코드를 만들어 보려고 합니다. 직접 황금 키워드 분석 하는 방법은 없을 전문적인 코딩은 필요 없습니다. 제가 코드를 다 제공해 드릴테니 천천히 따라오시면 됩니다. 쉽게 만들어서 알차게 사용 해보시죠! 자 그..