본문 바로가기

R

[R] 머신러닝 - Naive Bayes로 학습 후 분류
R 2022. 2. 18. [R] 머신러닝 - Naive Bayes로 학습 후 분류 머신러닝(machine learning) : 인간의 학습 능력과 같은 기능을 컴퓨터가 하게 만드는 기술로 인공지능(AI) 연구분야의 하나이다. *인공지능이란 인간이 원래 가지고 있는 지적 능력을 컴퓨터가 하게 만드는 기술 분류 : 주어진 데이터 분류 예측 : 과거의 수치를 기반으로 미래의 수치 예측 군집 : 데이터를 비슷한 집합으로 모으는 작업 지도학습(supervised learning) : 레이블(정답)이 달려 있고 정해져 있는 데이터를 가지고 학습 예) 이미지학습 개/고양이, 스팸/햄, 긍정/부정, 시험성적예측, 로또예측, 주가예측 비지도학습(unsupervised learning) : 레이블(정답)이 없는 데이터를 학습을 통해 군집한다. 유사한 뉴스를 그룹으로 모으는 학습 문장 레이블(정답) 오늘..
[R] ngram, 토근화
R 2022. 2. 18. [R] ngram, 토근화 ngram(s) : 연이어 사용된 n개의 단어를 엔그램(ngram)이라고 한다. 1-gram : 하나의 단어 2-gram : bigram 두단어 3-gram : trigram 세단어 4-gram .. 연이어 사용되는 단어의 쌍을 분석 ex) 죽는 날까지 하늘을 우러러 한 점 부끄럼 없기를 잎새에 이는 바람에도 나는 괴로워했다. 죽는 날까지 날까지 하늘을 하늘을 우러러 우러러 한 한 점 점 부끄럼 부끄럼 없기를 없기를 잎새에 잎새에 이는 이는 바람에도 바람에도 나는 나는 괴로워했다 토근화 install.packages("RWeka") library(RWeka) Tokenizer
[R] 감성분석 예제 - 취임사 분석(군산대 감성분석사전)
R 2022. 2. 18. [R] 감성분석 예제 - 취임사 분석(군산대 감성분석사전) [문제216] 문재인 대통령의취임사 감성분석하기 스크롤링 library(rvest) html
[R] 자연어 처리 - NLP
R 2022. 2. 16. [R] 자연어 처리 - NLP Sys.setenv(JAVA_HOME="C:/Program Files/Java/jdk1.8.0_271") install.packages("rJava") library(rJava) install.packages("openNLP") library(openNLP) library(NLP) NLP::annotate() : 텍스트 데이터에 주석 작업을 수행하는 함수 openNLP::Maxent_Sent_Token_Annotator() : 문장단위 주석 작업을 하는 함수 openNLP::Maxent_Word_Token_Annotator() : 단어단위 주석 작업을 하는 함수 openNLP::Maxent_POS_Tag_Annotator() : 품사를 태깅하는 함수 text
[R] 감성분석
R 2022. 2. 16. [R] 감성분석 감성분석 감성분석(sentiment analysis) 또는 opinion mining : 텍스트에 내재되어 있는 감정적 상태나 주관적 평가를 식별하고 추출하는 텍스트 분석 기법 install.packages("tidytext") library(tidytext) install.packages("textdata") library(textdata) bing : positive, negative 분류 get_sentiments('bing') get_sentiments('bing')$word unique(get_sentiments('bing')$sentiment) afinn : -5(부정) ~ +5(긍정)의 범위를 갖는 점수로 표현 get_sentiments('afinn') get_sentiments('afinn..
[R] text mining
R 2022. 2. 15. [R] text mining data mining : 수많은 데이터 중 의미있는 정보를 추출해 내는 분석과정 text mining : 텍스트로부터 의미 있는 정보를 추출하는 데이터 분석 기법으로 text analytics,text analysis라고 한다. 활용) 1. 문서 분류 2. 문서나 단어 간의 연관성 분석 3. 감성 분석 corpus(말뭉치) : 언어 연구를 위해 텍스트를 컴퓨터가 읽을 수 있는 형태로 모아놓은 언어의 집합(사전 작업) 텍스트 마이닝을 하기 위한 단계 문서(비정형 데이터) -> corpus -> 구조화된 문서 -> 분석 install.packages("tm") library(tm) data
[R] 다나와 사이트 Web scrapling(selenium)
R 2022. 2. 15. [R] 다나와 사이트 Web scrapling(selenium) [문제210] 다나와에서 apple 노트북 정보를 수집해서 데이터프레임으로 저장해주세요. cmd 포트에 port접속 cd c:/data java -Dwebdriver.chrome.driver="chromedriver.exe" -jar selenium-server-standalone-4.0.0-alpha-1.jar -port 7777 자동화 웹페이지 열고(다나와 사이트) apple 제품만 검색하기 library(RSelenium) library(xml2) library(rvest) remdr %html_text(trim=T) 제품 정보 추출 #제품정보 prod_info %html_text(trim=T) prod_info
[R] web scraping - selenium
R 2022. 2. 10. [R] web scraping - selenium F12 -> Network -> Name 에서 Request URL 못 찾을 때 반응형 웹사이트(made by 자스) selenium : 웹브라우저를 컨트롤하여 웹을 자동화하는 프로그램 1. chrome driver 다운로드 도움말>크롬정보 Chrome이 최신 버전입니다. 버전 98.0.4758.82(공식 빌드) (64비트) https://chromedriver.chromium.org/downloads 맞는 버전(최대한 비슷한 버전) 다운로드 2. selenium jar file 다운로드 (chrome driver랑 같은 위치에 있어야함) selenium-server-standalone-4.0.0-alpha-1.jar 3. 설치(in R) install.packages("RSelenium") librar..
[R] web scraping - css, xpath,JSON
R 2022. 2. 10. [R] web scraping - css, xpath,JSON 웹 페이지 주소가 위치정보만 가지고 있을 때(1페이지,2페이지 주소가 같을 경우) 요약 ) 실제 주소를 찾는 방법 F12 -> Network -> Preview 확인하면서 수집할 대상이 있는 Name 찾기 -> Headers Request URL 확인 가능 +) RequestURL에 https://comment.daum.net/apis/v1/posts/149671721/comments?parentId=0&offset=0&limit=10&sort=RECOMMEND&isInitial=true&hasNext=true offset=m limit=n : m번째부터 n개의 데이터를 출력함(JSON) 1. css 선택자 사용 방법 실제 주소 찾기 F12 -> Network -> Preview 확인하면서 수집할 대상이..
Recent Posts
Popular Posts
Tags
더보기
Recent Comments

티스토리툴바