메뉴 건너뛰기

DEVIEW 2012

PROGRAME

프로그램

전체 시간표 보기

SESSION 1 ~

Real-time large data at Twitter

Raffi Krikorian | Twitter

Twitter's architecture deals with "now".  Everything must happen in real-time and the real-time constraint is its hardest problem.  At steady state, Twitter receives thousands of tweets a second that it needs to deliver to disks, in-memory timelines, email, and mobile devices. Simultaneously, Twitter deals with changes to its graph -- each change affects the way that data flows through the system.  This talk delves into the three nouns of twitter: tweets, timelines, users, and using them at scale at Twitter.


[B1]real time large data at twitter from deview


트위터의 실시간 빅 데이터

트위터의 아키텍쳐는 “현재성”을 다룬다. 모든 것은 실시간으로 이루어져야 하기에 실시간성을 제약하는 것이 가장 어려운 문제이다. 트위터는 정상상태에서 1초에 수천 개의 트윗을 받아 디스크, 인 메모리 타임라인, 이메일, 모바일 단말로 보낸다. 동시에 트위터는 그래프의 변화도 다룬다. 즉, 각각의 변화가 시스템 내의 데이터 움직임에 영향을 준다. 본 세션은 트위터의 3가지 측면, 즉 트윗, 타임라인, 사용자 그리고 이것들을 트위터에서 대규모로 사용하는 것을 다룰 예정이다.


다시보기

EVENT 세션에 대한 의견과 질문을 소셜 댓글로 공유해 주세요.
이 세션에 기대하는 내용은 무엇인가요?

이 세션을 통해 알고싶은 내용이나 듣고싶은 이야기를 댓글로 남겨주세요.
매주 20분을 추첨하여 스타벅스 음료쿠폰(아이스 아메리카노)을 드립니다.

  • 기간: ~
  • 발표: 매주 월요일, 개별연락 드립니다.

사용할 SNS를 선택해 주세요.

댓글
로그인해주세요.
profile image
전체 : 8
  • Redis의 replication 은 어떻게 구현되어 있나? 2012.09.17 04:37:43
  • 트위터 api 를 써보면 굉장히 많은 데이터를 얻을수 있는데요 물론 limit이 있지만 api를 요쳥 하는 수가 굉장히 많을텐데 실제로 이런요청들은 실제 트위터 데이터 처리하는데 영향이 크지 않나요? 2012.09.17 04:37:03
  • 다수의 서버들의 트랜잭션 정챋을 어떻게 가져가고 있는가요? 2012.09.17 04:33:16
  • 오늘 연설 잘듣고 있는데요..대부분 기술적인 내용이네요..저는 그보다 트위터의 다음(미래 )은 무엇인지 궁금해 지네요..단순히 나의 글을 다른사람에게 나르거나 팔로우하는것 외에 어떤 것을 더 할수있을까요?? 2012.09.17 04:32:57
  • Redis has no bulit-in consistency hashing. So, what hashing strategy is used in fanout to Redis cluster flow? 2012.09.17 04:24:03
  • 대량의 데이터를 처리하기위한 데이터베이스 제어를 어떻게 하는지 궁금합니다 2012.09.17 04:01:52
  • 절대적인 양때문에 어쩔 수 없이 실시간성이 떨어지는 빅데이터를 실시간으로 다루는 방법에 대한 소개가 정말 기대되네요. 2012.09.16 08:42:17
  • Wish to know and share real-time big data handling architecture and technique. Original concept of big data with hadoop and other similar open source software does batch process not real-time processing. 2012.08.14 06:35:03