도히의 연구 다이어리

KNIME(나임)으로 데이터를 불러어고 데이터를 전처리하는 과정을 살펴보도록 하겠습니다. 전처리 과정은 일반적인 코딩인 Python과 다른 코딩방법을 사용합니다. 또한 코딩 한줄이 아닌 노드(Node)를 활용하여 데이터를 불러오게 됩니다. 일반적인 코딩보다 훨씬 쉬우니 잘 따라오시길 바랍니다. 우선 데이터를 수집하도록 하겠습니다. 데이터는 '국토교통부 실거래가'를 활용하도록 하겠습니다. (링크: http://rtdown.molit.go.kr/) 일자는 20220501 ~ 20220531, 아파트, 서울특별시의 강남구를 선택하였습니다. 이제 이 데이터를 활용하여 데이터불러오기, 전처리를 진행하도록 하겠습니다. (하단에 실습용 데이터를 업로드 해두었으니 활용하시면 됩니다) 1. workflow 생성 우선 앞..

Python(파이썬)을 활용한 데이터 분석을 진행하기 앞서 버전확인, 라이브러리 설치에 대해 포스팅하고자 한다. 파이썬은 전공자, 비전공자에게도 인기있는 언어로 데이터 분석을 할때 많이 사용되고 있다. 사용자에 따라 jupyter, PyCharm, Anaconda 등 오픈 소스 소프트웨어를 활용할 수 있다. 본 포스팅에서는 SPYDER를 사용한다. 명령프롬프트(윈도우-검색-CMD)를 키고, 'python --version' 를 치면 파이썬 버전을 확인할 수 있다. 현재 사용하고 있는 Python 버전은 3.9.7 로 명령 프롬프트에 뜬 것이 확인되었다. 데이터를 핸들링하고 활용하는데 있어서 파이썬에선 pandas를 가장 많이 사용하게 된다. 판다스(pandas)는 데이터 프레임과 시리즈를 사용하기 쉽게 ..