메뉴 건너뛰기

프로그래밍


R에서 페이스북 페이지의 포스트를 크롤링 하는 예제입니다.

이런 저렁 방법을 많이 찾아보고 시도 하였으나 본인 것이 아닌 타인의 타임라인에 있는 포스트들을 크롤링 하는 (공개된) 방법은 없더군요.

단, 개인 타임라인이 아닌 공개 "페이지"는 가능합니다. 


#필요 패키지
install.packages("Rfacebook")
library(Rfacebook)

#페이스북 앱id 정보와 secret 값 입
fbAuth = fbOAuth(app_id = "facebook_app_id", 
                 app_secret = "facebook_app_secret",
                 extended_permissions = FALSE)

start_date = '2016/12/01'
end_date = '2017/01/30'
scrape_days=seq(from = as.Date(start_date), to = as.Date(end_date), by = 'days')

#공인 페이지s
stars <- c("iu.loen", "OfficialLeeMinho", "barackobama")
posts <- c()

#공인 페이지로부터 페이지 정보 얻기
for (i in 1:length(stars)) {
  for(scrape_day in scrape_days) {
    tryCatch(
      {
        daypost=getPage(page = stars[i],
                        token = fbAuth,
                        since = as.Date(scrape_day, origin = "1970-01-01"),
                        until = as.Date(scrape_day, origin = "1970-01-01") + 1)
        
        posts = rbind(posts, daypost)
      },
      
      error = function(e){}
    )
  }
}

View(posts)





번호 제목 날짜 조회 수
공지 [TIP] PYTHON 에서 "UnicodeDecodeError: 'cp949' codec can't decode byte 0xe2 in position 6987: illegal multibyte sequence" 오류 날때... [52] 2016.02.20 246881
공지 [펌] ARM GCC Inline Assembler Cookbook 2006.08.18 44834
» [TIP] R에서 페이스북 페이지 정보 크롤링 하기 [6] 2017.02.11 26252
149 [TIP] 파이선에서 서브프로세스를 실행시키고 출력되는 내용을 얻어오기 2018.01.22 11656
148 [TIP] 아두이노에서 AWS Lambda로 제작한 Restful API 호출하기 (The way how to call AWS Lambda Restful API from Arduino) 2018.01.18 1232
147 [TIP] 파이선에서 Redis 이벤트 받기 2017.10.12 1337
146 [TIP] 파이선에서 SyntaxError: (unicode error) 'unicodeescape' codec can't decode bytes in position ... 오류 해결 방법 2017.09.29 2199
145 [TIP] The function size must be used with a prefix when a default namespace is not specified 오류 해결하기 2017.08.02 3545
144 [TIP] 페이스북 개인 담벼락의 좋아요수 크롤링하기 2017.07.15 1578
143 [TIP] 자바스크립트와 PHP코드간에 암호화 통신하기 (Encrypt with Javascript, Decrypt with PHP) [2] 2017.03.16 5226
142 [TIP] GUNMAN의 영화 점수 테이블을 이용한 딥러닝 예제 2017.02.15 2288
» [TIP] R에서 페이스북 페이지 정보 크롤링 하기 [6] 2017.02.11 26252
140 [TIP] 네이버 영화 정보와 전문가 평점 얻어오기 2017.02.10 7662
139 [TIP] 네이버 오픈 API를 로컬 PC에서 호출하기 2017.02.01 3504
138 [TIP] php로 기상청에서 제공하는 기상정보 API 호출하기 2017.01.17 9912
137 [TIP] node 에서 Basic authentication 인증과 함께 http, https 요청하기 2016.09.01 1667
136 [TIP] node의 lambda-local 테스트 팁 2016.08.19 891
135 [TIP] 데이터를 Node에서 암호화하고 PHP에서 복호화 하기 2016.08.19 1000
134 [TIP] Docker상의 Syntaxnet 결과 포맷을 수정하기 2016.08.07 1974
133 [TIP] SyntaxNet을 Windows에서 실행하기 [1] 2016.05.25 1029
132 [TIP] TensorFlow를 윈도우에서 사용하기 (A way to use TensorFlow on Windows) [3] 2016.04.16 22448
131 [TIP] 파이선으로 TED에서 가장많이 사용된 단어들 줄세우기 2016.04.03 1892
130 [TIP] 파이선에서 구글 스프레드시트 사용하기 [5] 2016.03.27 5380
위로