Streaming API1 [TIP] Twitter API 이용 팁 - 트위터 데이터 수집과 401에러 현재 빅데이터 학습을 위한 전초 단계로 '빅데이터'를 만드는 작업을 진행 중이다.개인의 자격으로 거대 규모의 데이터를 만들어내기란 여간 어려운 것이 아니다.때문에 일단 의미 있는 분석이 가능한 데이터를 어느 정도 선까지 모으는 것을 목표로 하고 있다.현재 목표로 하고 있는 것은 대략 100Gb선이다. 그래서 선택한 것이 트위터의 트윗들이다. 특정 키워드로 검색을 했을 경우 검색되는 트윗들을 모아보기로 한 것이다.이를 분석하면 검색어로 사용된 특정 단어에 대한 분석이 어느정도 가능하지 않겠냐는 판단에서 내린 결정이다. 그래서 Twitter API를 이용하여 작업을 진행 중인데처음엔 시행착오가 좀 있었다. 우선 기존에 사용해본 적이 있는 REST API 중 search API를 이용하여 데이터 수집을 진행하.. 2013. 8. 8. 이전 1 다음 반응형