카우치베이스 커넥트 2015의 빅 데이터 트랙을 소개하게 되어 매우 기쁩니다.
스파크, 카프카, 하둡, NoSQL에 대해 자세히 알아보고 싶으신가요? 제대로 찾아오셨습니다. 통합, 아키텍처 및 솔루션에 대해 이틀 동안 논의하는 시간을 6월에 리바이스 스타디움에서 가질 예정입니다.
LinkedIn의 기술 담당자의 이야기를 들어보실 수 있습니다. 이들은 단순히 빅 데이터 솔루션을 구현하는 데 그치지 않고 청사진을 만들고 있습니다.
또한 Couchbase의 NoSQL 전문가, Hortonworks의 Hadoop 전문가, Confluent의 Kafka 전문가 등의 이야기를 들을 수 있습니다!
메뉴 항목 선택
Hadoop에서 NoSQL의 역할
제공: 카우치베이스 제공: 카우치베이스
NoSQL 또는 Hadoop? 아니요, NoSQL과 Hadoop입니다. NoSQL과 Hadoop의 차이점, 장단점, 그리고 서로를 보완하는 방법을 이해하세요. 더 이상 혼동하지 마세요.
Hadoop 에코시스템 소개
제공: 호튼웍스 제공: 호튼웍스
Hadoop에는 HDFS와 MapReduce보다 훨씬 더 많은 것이 있습니다. Hadoop의 구성 요소와 그 에코시스템에 대해 알아보세요. 호튼웍스보다 더 좋은 발표자가 있을까요? 결국, 호튼웍스 데이터 플랫폼(HDP)에는 이러한 모든 구성 요소가 포함되어 있습니다.
빅 데이터 아키텍처를 위한 청사진
제공: 카우치베이스 제공: 카우치베이스
NoSQL과 Hadoop은 서로를 보완합니다. 이제 이 두 가지가 실제 환경에서 어떻게 그리고 왜 통합되는지 알아보세요. Aol Advertising, LinkedIn, LivePerson과 같은 빅 데이터 솔루션을 사용하는 사람들이 만든 청사진입니다.
Apache Sqoop을 사용하여 Hadoop으로 데이터 가져오기/내보내기
제공: 카우치베이스 제공: 카우치베이스
빅데이터 정제소를 만드는 방법을 알아보세요. Couchbase Server에서 데이터를 수집하고, 정제하기 위해 Hadoop으로 내보내고, 정제된 데이터를 Couchbase Server로 가져오는 방법을 알아보세요. 구식일 수 있지만 효과적입니다.
아파치 카프카로 데이터 스트리밍
발표자 제공: Confluent
데이터가 작성, 삽입, 업데이트, 삭제될 때 Couchbase Server에서 Kafka로 데이터를 스트리밍할 수 있다는 사실을 알고 계셨나요? 데이터베이스가 기차의 마지막 정거장일 필요는 없습니다. 첫 번째 정거장이 될 수도 있습니다. 데이터는 계속 이어질 수 있습니다. Kafka를 만든 팀으로부터 직접 들어보는 것도 좋습니다.
Apache Spark로 데이터 분석
제공자 발표: 미정
DAG는 들어오고, MapReduce는 나갑니다. Spark와 문서용 SQL, Spark SQL을 통해 Couchbase Server에서 데이터를 분석하는 방법을 알아보세요. 메모리가 부족하신가요? Couchbase Server에서 수집된 많은 데이터를 분석하세요. 그런 다음 결과를 Couchbase Server에 작성합니다. 마지막으로 결과를 확인합니다.
아파치 스파크 및 아파치 스톰을 이용한 스트림 처리
제공: 카우치베이스 제공: 카우치베이스
오프라인 처리를 위한 장소가 있습니다. 다른 모든 곳에는 실시간이 있습니다. 스트림 처리는 실시간 분석을 가능하게 할 뿐만 아니라 데이터 흐름을 생성합니다. Couchbase Server가 스트림 프로세서에 데이터를 제공하거나 스트림 프로세서에서 데이터를 소비하는 방법을 알아보세요.
Kafka 및 Hadoop을 사용한 데이터 수집 및 처리
발표자 제공: LinkedIn
카프카와 하둡에 대해 언급했나요? 카프카에서 HDFS로의 자체 파이프라인을 개발한 회사(Camus)에서 알아보세요. 할 말은 충분합니다.
연간 스페셜
기계의 부상: 스카이넷의 빅 데이터 요구 사항
발표자 나(아놀드는 바빴음)
이것은 여러분의 아버지의 인터넷이 아닙니다. 상태 업데이트, 트윗, 업보트, 댓글만 있는 것이 아닙니다. 인터넷에 접속하는 사람은 수십억 명에 불과합니다. 하지만 지금 이 순간에도 200억 대의 컴퓨터가 인터넷에 연결되어 있습니다. 이들은 많은 데이터를 생성하고 우리보다 더 빠르게 타이핑합니다. 또한 데이터를 소비하기도 합니다. 그리고 터미네이터 구원에서 보았듯이 네트워크 액세스가 중단될 수 있습니다. 그러면 어떻게 될까요?
