빅데이터 시스템 – 엔지니어 관점

최근 모든 시장은 빅데이터와 관련이 있다.

보안도 개발도 모두 빅데이터를 이용한다.

그리고 빅데이터 시스템으로 큰 시장으로 Elasticsearch와 Hadoop이 존재한다.

난 길게 글을 쓰는 것을 좋아하지 않고 결론 부터 얘기하자면, 이 두가지 시스템의 성질은 완전 다르다.

Elasticsearch는 실시간 베이스에 검색기능이 특화되어 있다고 할 수 있다.
이말은 우리가 무엇인가 조사를 하기에 매우 용이하다고 할 수 있다.

Hadoop은 대용량 데이터를 분석하는데 특화되어 있다고 할 수 있다.
이는 통계를 통한 예측에 용이하다고 할 수 있다.

따라서 만약 당신이 완벽한 데이터 분석 시스템, 측 차세대 데이터 플랫폼을 구축하고자 한다면, Elasticsearch와 Hadoop을 함께 이용해야 한다.

여기에 회사명을 적지는 않겠지만, 실제 몇몇 회사는 이미 이방향으로 시도하고 있는듯하다.

올바른 길이고, 매우 기대되는 시스템이라고 말하고 싶다.
나역시 조만간 이부분에 올인을 해볼까 한다.

Facebook Comments

Leave A Reply

Your email address will not be published. Required fields are marked *

This site uses Akismet to reduce spam. Learn how your comment data is processed.