뇌운동일지

구글 뉴스 국내 사이트를 크롤링 하여 자연어 분석을 위해 txt 문서로 저장하고 워드클라우드 차트로 출력 1. 크롤링 툴 outwit-hub를 설치 기본설정과 기본위치에 설치 2. outwit-hub를 이용하여 크롤링 작업 ( 주의점 : 저장시 엔코드 값 확인. 그리고 필요에 따라서 1차 전처리 가공을 수동 처리 해야함. 우리가 사용하는 자연어 처리 패키지가 5000 단어 미만만 가능하므로 주의 ) 여기서 활용하기 어려운 데이터와 분량을 적절히 조정하고, 인코딩 방식을 바꾸어줌 수정 전과 후는 대략 이러한 차이가 있다. 3. R을 이용하여 자연어 분석을 해보자 (한글만 분석) install.packages("multilinguer") library(multilinguer) install.packages(..

2015년 한국복지패널 통계 자료를 로드한 후 성별 평균 임금 차이가 있는지 분석한 후 시각화 우선 install.packages() 로 필요한 패키지를 설치해야 한다. installed.packages() 로 확인해본 결과, 이미 설치되어 있으므로 넘어간다. 사용할 패키지를 로드한다. 데이터 프레임을 생성하고, 복사본을 만든다. 원본 데이터에 변화가 생기지 않도록 복사본을 만드는 것이다. R studio에서 가져오는 파일의 위치를 볼 수 있다. 데이터를 확인해본다. 결과가 너무 많으므로 아래는 생략한다. View(welfare) 를 실행하면, 이렇게 볼 수 있다. 분석에 편리하도록 각 컬럼마다 이름을 지정해준다. 성별과 관련된 데이터를 전처리한다. sex column 의 데이터형은 numeric 이고,..

R 설치 및 셋팅 R - 통계 프로그램에서 출발 - 시각화 쉬움, 코드 간결 => 많은 인기 지금은 빅데이터, 머신러닝 등에도 많이 사용됨. 1. R 설치 - jdk 다운로드 : https://cran.r-project.org/ The Comprehensive R Archive Network cran.r-project.org 모두 default에 놓고 설치한다. 2. R studio 설치 - eclipse 다운로드 : https://rstudio.com/products/rstudio/download/ Download RStudio RStudio is a set of integrated tools designed to help you be more productive with R. It includes a..