Big Data
31 views | +0 today
Follow
Your new post is loading...
Your new post is loading...
Rescooped by Joon Hyung Kim from Scala & Cloud Playing
Scoop.it!

Hunk: Splunk Analytics for Hadoop Intro – Part 1

Hunk: Splunk Analytics for Hadoop Intro – Part 1 | Big Data | Scoop.it
As you might have already seen, we recently announced the beta availability of our latest product, Hunk: Splunk Analytics for Hadoop.

Via Wonil Lee Ph.D.
more...
No comment yet.
Scooped by Joon Hyung Kim
Scoop.it!

Get Started: Ambari for provisioning, managing and monitoring Hadoop | Hortonworks

Get Started: Ambari for provisioning, managing and monitoring Hadoop | Hortonworks | Big Data | Scoop.it
An Apache Hadoop Tutorial on getting started with the Apache Ambari provisioning, management and monitoring tool
more...
No comment yet.
Scooped by Joon Hyung Kim
Scoop.it!

Is Tumblr Really Worth $1 Billion?

Is Tumblr Really Worth $1 Billion? | Big Data | Scoop.it
The news of Yahoo’s acquisition of Tumblr launched many an irritated post on the microblogging site this week; the response is similar to Instagram users’ histrionic reactions after Facebook bought the photo-sharing company last year.
Joon Hyung Kim's insight:

[기사요약]
Tumblr가 야후에 11억달러에 팔리게 된 것에 대해 그만한 가치가 있는지 의문이 듬.
텀블러는 인수되기 전까지 광고로 수익을 내고 있지도 않았기 때문에 그 가치를 산정하는 데 다음과 같은 세 기준을 둠.
1. 얼마나 많은 사람이 쓰는지. 얼마나 자주 오는지. 얼마나 오래 머ㅜ는지.
텀블러는 지난 1년간 순수 신규 사용자가 2배로 증가. 사이트는 1억개이상의 블로그를 보유함.
텀블러는 다른 SNS사이트(페이스북, 트위터 등)보다 많은 수의 18~24살 의 유저를 보유함.
2012년 이후로 마이크로블로깅 사이트는 1300만달러의 이익을 냄. 야후는 긴 안목으로 텀블러가 더 젊은 측과 광고수입을 가져오길 바라고 있음.
야후는 '더 멋져져야한다'는 사명을 가지고 있음. 이번 텀블러 인수는 그러한 계기가 되길 희암함.
야후는 자사 사이트에 방문해서 사람들이 정보를 얻기보다는 다른 소셜미디어를 통해 정보를 얻고 있는 실정.
과거에 야후는 비슷한 벤쳐들을 인수했으나 키우지 못했음. 텀블러는 어떨지 지켜봐야함.

[나의 의견]
억단위가 넘어가는 블로그 수를 가진 서비스, 게다가 광고로 수입버는 것도 아니었던 무료서비스를 11억달러에 인수한다는 결정 자체가
야후의 절박함을 알려주고 있음. SNS의 비교적 빠른 피로도와 짧은 생명을 고려할때 야후에 판 것은 신의 한수였다고나 할까.
야후가 이전에 수많은 벤쳐를 끌어들이고도 그들의 잘나가는 비즈니스가 지금은 별볼일 없게 된 이유는 야후 자체가 가지고 있는
구식의 이미지 때문이 아닐까 함. 뭐든 '야후' 타이틀을 붙이면 옛날 서비스의 느낌이 되어버림이 없지 않음.
'쿨'해지기 위해서는 무리하게 광고등을 도입해서 기껏 인수한 '쿨'한 서비스를 망치지 말고, 그 서비스에 사람들이 더 몰릴 수 있도록
지원을 해주면서 서서히 수익을 실현하는 방향으로 가야하지 않을까?

more...
No comment yet.
Scooped by Joon Hyung Kim
Scoop.it!

How Google Is Fighting Sex Trafficking With Big Data

How Google Is Fighting Sex Trafficking With Big Data | Big Data | Scoop.it
For years human traffickers have used the latest technology to profit from the slave trade but now software engineers at big data companies like...
more...
Joon Hyung Kim's comment, May 27, 2013 8:57 AM
[기사요약]
세계적으로 수십억 달러 규모의 인신매매 시장이 형성되어 있음. 최첨단 기술과 장비로 인신매매를 진행하고 있음.
구글과 세일즈포스닷컴 등은 빅데이터를 활용하여 불법 인신매매를 근절하기 위한 프로젝트를 펼침.
인신매매단은 소셜 미디어를 통해 피해자들을 찾고, GPS가 탑재된 휴대기기로 피해 여성을 통제함.
또한 포르노 사이트에서 강제적으로 활동하게 하기도 함.
구글은 이에 대한 해결책으로 '핫라인'을 내놓음. 현재의 휴대전화, 온라인 리포팅, 이메일, SMS 등 다양한 경로로
핫라인을 통해 제보가 이루어지게 함. 그러나 지역에 따라 수집되는 정보는 고립되어지고 포맷이 달라 활용하기 힘듬.
인터넷을 통한 핫라인은 빅데이터 분석을 통해 이러한 제약을 극복할 수 있음.
데이터베이스 인프라를 표준화하고, 데이터를 분석하기 위한 소프트웨어 엔지니어들이 필요함.
핫라인이 모으는 데이터는 즉각적 반응과 패턴인식의 두가지 특징을 지님.
즉각적 반응은 인신매매 피해자나 강제노역자가 핫라인에 전화를 걸거나 메시지를 남길 때 일어남.
콜센터 오퍼레이터는 Java나 Html5로 구현된 웹앱이 띄워주는 피해자의 발신 지역의 지도를 보며 근방에 파트너쉽이나
NGO들이 활동하는지 알아보며, 가장 적합한 장소를 찾고 서로간의 연결을 쉽게 해준다.
그런 뒤 에디터는 자동으로 핫라인 오퍼레이터에 들어간다. 피해자가 주변의 주유소를 언급하면 연관성이 있는 데이터들이 표시된다.
이런 식으로 2분 내외로 피해자의 위치추정이 가능해진다. 수집되는 정보는 모두 자동으로 쌓이고 분석되어져 다음 검색에 활용된다.
그러나 데이터 공유는 여전히 큰 장애임. 개인을 특정할 수 있는 정보는 더욱 공유하기 어려움. 국가간의 정보도 공유하기 힘듬.

[나의 생각]
이 기사는 빅데이터의 활용도에 평소에 의문을 가지고 있던 나에게 어느정도 방향성을 제시한 것 같음.
빅데이터를 단지 상업용으로 어떻게 하면 돈을 벌 것인가가 아니라, 인류에 도움이 되는 방향으로 이용하는 것을 생각하게 함.
이렇게 따지면 빅데이터의 활용 범위는 확 커지는 느낌임. 단순히 이익을 쫓기 위해 기술을 이용하는 것이 아니라
모두에게 혜택이 되는 목적을 가지기 때문에 더 즐거운 마음으로 더 다양한 활용처를 찾을 수 있음.
우리 회사도 돈이 되는 사업을 찾는 것도 중요하지만 이렇게 모두 또는 정말 필요로 하는 사람들을 도울 수 있은 방향으로
빅데이터의 구현에 접근하면 어떨까 함.
그리고 마지막의 장애물로서 정보의 공유를 들었는데, 충분히 의미있는 데이터는 세계각국 또는 각 지역의 법률을 지켜가며 수집되어야 함.
이러한 점에 충분히 주의한다면 글로벌 빅데이터 서비스를 제공하는데 도움이 될 것임.
Rescooped by Joon Hyung Kim from Cloud & Bigdata Watching
Scoop.it!

RainStor Major Product Update Delivers Enterprise-Grade Security, Search On Hadoop

RainStor Major Product Update Delivers Enterprise-Grade Security, Search On Hadoop | Big Data | Scoop.it
New security features including data encryption, masking and identity management

Via Wonil Lee Ph.D.
more...
No comment yet.
Rescooped by Joon Hyung Kim from Scala & Cloud Playing
Scoop.it!

Proving Performance: Hadoop On vSphere – A Bare Metal Comparison

Proving Performance: Hadoop On vSphere – A Bare Metal Comparison | Big Data | Scoop.it
When architects think about putting big data and Apache Hadoop on virtualized commodity servers they usually see virtualization as a performance deterrent.

Via Wonil Lee Ph.D.
more...
Daejun Son's comment, June 21, 2013 1:14 AM
가상화된 장비를 사용 할 경우 Big data 처리나 Hadoop를 이용할 경우 baremetal 보다 느리다는 것이 보통적인 견해임.

자사의 Project인 HVE(Hadoop Virtualization Extension) 과 세렝게티를 이용할 경우
특정한 경우 Baremetal 보다 성능이 잘 나옴.

하나의 장비에서 연산관련 부분과 스토리지 부분을 분리하여 각각의 VM으로 만들어서 처리 함.
VM 이 적을 경우 속도가 Baremetal 보다 늦지만 VM이 많아 질 경우 속도가 빨라짐.


세렝게티(SERENGETI) - VMware에서 설립한 오픈소스 프로젝트로 가상화 기반에서 Hadoop을 신속하게 배포관리 하기 위한 프로젝트 임.
Scooped by Joon Hyung Kim
Scoop.it!

Teens Tire of Facebook—But Not Enough to Log Off | TIME.com

Teens Tire of Facebook—But Not Enough to Log Off | TIME.com | Big Data | Scoop.it
Has Facebook lost its cool? That’s a question TIME posed earlier this year to dozens of teenagers, who mostly insisted that newer social networks like Instagram, Tumblr, and Twitter were more engaging, even if (and partially because) everyone they...
more...
No comment yet.
Scooped by Joon Hyung Kim
Scoop.it!

Meet the Man Who Sold a Month-Old App to Dropbox for $100M | Wired Business | Wired.com

Meet the Man Who Sold a Month-Old App to Dropbox for $100M | Wired Business | Wired.com | Big Data | Scoop.it
Gentry Underwood answers our questions on the success of his app Mailbox and Mailbox's future now that it has been acquired by Dropbox.
more...
Joon Hyung Kim's comment, May 28, 2013 7:55 AM
[기사요약]
Mailbox라는 앱이 드롭박스에 1억달러에 팔렸음.
메일박스는 직관적이고 다루기 쉬운 메일관리툴로 인기를 끌었음. 앱이 인기가 있어지자 회사는 커지는데 커가는 회사를 제대로 관리하기 위해 과감히 드롭박스에 회사를 매각함.
문화가 맞지 않는 두 회사가 만나면 실패한 사례가 많음. 그 부분을 걱정함.
구글 등의 메일제공 회사가 메일에 접근을 어렵게 할 수 있다는 걱정이 드는지에 대해, 그다지 걱정하지 않는다고 함.

[나의 의견]
미국의 실리콘벨리는 이런 대박 터뜨리는 벤쳐기업이 많음. 창업자가 자신의 한계를 알고 회사를 성장시키기 위해 더 잘하는 기업에 매각하는 사례도 많음.
대박을 터뜨리려면 미국에서 창업해야하나?