'hadoop'에 해당하는 글 8

Data Science Trend가 궁금하다면? <Strata Data Conference!>

Analytic와 engineering 영역의 기술 동향을 파악하고자 컨퍼런스에 참가했는데요. 최근 클라우드 기반의 빅데이터 서비스, 머신러닝/딥러닝 등 고급서비스에 대한 니즈가 계속 증가하고, 기존의 빅데이터 플랫폼이 ‘AI Platform’으로 서비스 영역이 확대되는 등 변화가 지속되고 있습니다. 이번 컨퍼런스를 크게 3가지로 나누면 Tutorial, Keynote, Session으로 구분 지을 수 있는데요. Tutorial에서는 Tensorflow/Python을 활용한 머신러닝/딥러닝, 여전히 강세인 Spark 그리고 Kafka 관련 Tutorial이 주를 이뤘습니다. 마지막으로 3일간 진행된 다양한 Session들의 핵심 Keyword를 뽑는다면, Streaming/Kafka/Kubernets/딥..

Digital Transformation
2018.11.06 15:49

[김인범의 '지금은 오픈소스 시대'] 데이터 분석의 시작과 끝, R (4화)

Cloud의 시대를 넘어 Hadoop을 위시한 BigData 열풍이 불고 있습니다. 초기 BigData 처리를 위한 기술들이 각광받으며 시작되었던 BigData 열풍은 이제 BigData 분석에 이르러 절정을 맞이하고 있습니다. 많은 이들이 궁금해 합니다.그러한 데이터를 체계적으로 분석할 수 있는지? 분석할 수 있다면 우리는 그 속에서 무엇을 얻고자 하는지? BigData 분석은 단순히 이미 지난 사건의 통계 추출이라는 관점을 넘어 미래에 도래할 사건과 현상을 미리 살펴볼 수 있는 효과적인 방법이라는 점에서 많은 이들의 관심을 받고 있습니다. 이번 시간에는 이러한 오픈소스 분석 분야에서 가장 널리 쓰이는 R에 대해 살펴보고자 합니다. R 공식 사이트에 정의된 R의 정의는 다음과 같습니다. (R is a ..

Storyteller/Smart Story
2017.10.19 09:00

최신 빅데이터 동향과 SK(주)C&C 빅데이터 솔루션 'QUTA'

올해 세계 빅데이터 분석 시장의 규모가 1500억 달러를 넘어설 것이라는 전망과 함께 한때 600여명에 달했던 미국의 대표적인 투자은행(IB) 골드만삭스의 주식 매매트레이더들이 컴퓨터 자동거래 소프트웨어의 도입으로 이제 두명 밖에 남지 않았다는 충격적인 사실이 보도되었습니다. 지원 부서 역할에 머물던 IT직원들이 빅데이터 기반의 분석 프로그램의 출현으로 어느덧 금융 산업 전반에 걸쳐 핵심 인력으로 인정받고 있다는 사실은 요즘 4차 산업혁명이라는 거대한 흐름에 여러 산업 지형이 흔들리고 있다는 증거로 그저 바라보고 있어야만 할까요?‘17년에는 사물인터넷(IoT)과 클라우드 환경으로부터 생성되는 대량의 구조화된 데이터와 반대로 구조화 되지 않은 데이터를 지원하는 시스템이 계속 증가할 예정이라고 합니다. 지역..

Biz & Tech/C&C Techibrary
2017.04.21 11:17

“빅데이터 솔루션 SKYTALE을 말하다” SK㈜ C&C 제조digital사업팀 유재경 수석 인터뷰

▶관련기사 자세히 보기SKYTALE이라는 솔루션이 도대체 어떤 솔루션인지, 주요 특장점은 무엇인지, 이것이 고객에게 어떤 인사이트와 가치를 창출해 줄 수 있는지 등 자세히 알아보기 위해 SK㈜C&C 제조digital사업팀 유재경 수석을 만나 하나하나 이야기 들어 보았습니다. 빅데이터에 관심있는 분들에게 좋은 정보가 되었으면 좋겠습니다.Scytale이란? [네이버 지식백과] 고대암호 (훤히 보이는 정보보호, 2008. 11. 25., 한국전자통신연구원(ETRI)) ①분석 능력을 보유한 분석가에게 어떻게 하면 빅데이터를 활용하여 다양한 분석을 시도하고 그 결과를 보다 쉽게 공유하고 적용하게 할 수 있을까? ②이제 막 분석 업무를 시작하거나 예비 분석가 또는 빅데이터 환경을 모르는 분석가에게 쉽게 대용량 분산..

Storyteller/Smart Story
2017.04.12 13:40

SK주식회사 C&C, 지난달 디톡스에 이어 ICT 개발자 간 지식공유 문화 이끌어 가

SK(주) C&C, '스파크(Spark) 사용자 모임'의 정기 모임 후원하둡 창시자 더그 커팅 클라우데라 수석 아키텍트 겸 아파치 SW재단 의장 주제 발표 나서ICT 개발자들간의 신기술(New ICT) 교유의 장(場)으로 자리매김할 수 있도록 다양한 지원 지속할 터 SK주식회사 C&C가 지난달 AI를 주제로 열린 디톡스(D’Talks)에 이어 이번 달에는 빅데이터 시작과 미래, 하둡과 스파크을 주제로 한 ‘스파크(Spark) 사용자 모임’을 후원하면서 분당∙판교 근교 ICT 개발자들간의 지식공유 문화를 이끌어 가고 있다. ‘스파크 사용자 모임’은 SK주식회사 C&C New Tech팀의 이상훈 대리가 운영하는 SNS 커뮤니티 모임으로 약 2,600여 명의 회원이 활동하는 국내 유일한 스파크 개발자 모임이다..

함께해요 C&C/ News
2016.04.15 13:38

SK C&C Developed Big-Data-Based Platform for Integrated Security Log Analysis

SK C&C (www.skcc.com) announced on April 8 that the company, in collaboration with its security arm Infosec, had developed a big-data-based platform for integrated security log analysis. SK C&C completed overall security performance testing, including hacking detection, searching and tracking, on data traffic generated monthly from over 1,800 websites under Infosec’s security control. The amount..

함께해요 C&C/ News
2014.04.08 15:43

[국선의 생생 IT 현장 리포트] <CIO Summit 2014> 참석 후기 디지털 산업혁명의 물결, 새로운 Agenda로 대비하라!

지난 주 3월 6일 전자신문, CIO Biz., 한국 CIO포럼에서 주최하고 서울 플라자호텔에서 열린 “CIO Summit 2014” 주요 내용을 후기로 공유하고자 합니다. 모빌리티•Big Data 등 디지털 산업혁명 속에서 새로운 전략이 요구되는 IT시장 흐름에 따라, 최고정보책임자(CIO: Chief Information Officer)의 역할이 증대되고, 급변하는 정보통신기술(ICT)과 비즈니스 환경에 적합한 새로운 패러다임을 마련하여 최고경영자(CEO)를 지원해야 한다”라는 주제가 바탕이 되었습니다. 이러한 만큼 CIO 참석도 많으시고 일반 실무자들도 계셨습니다. 또한 SK C&C의 발표가 포함되어 있어 참석한 구성원들에게 더욱 의미 있는 세미나였습니다. 이어서 라는 주제로 토론이 이어졌습니다. ..

Storyteller/Smart Story
2014.03.12 14:31

[빅데이터, 너 어디까지 왔니?] 산업 현장에 적용된 Big Data 분석 사례와 효과 - Big Data at Work 세미나 참관 후기

최근 Big Data가 IT업계 화두로 떠오르면서 관련 세미나가 많이 개최되고 있습니다. 그 중 지난 2월 20일에 Oracle Korea에서 개최한 'Big Data at Work' 라는 세미나에 참관했는데 공유할만한 좋은 정보들이 많아 Big Data에 관심있는 분들과 공유하고자 이렇게 후기를 남겨봅니다. 이번 세미나는 제조업, 유통업, 통신업, 금융업, 공공산업 등 산업별로 구분하여 진행되었는데, 이 중에서 제조/유통/통신업 Track의 내용을 중점적으로 소개해드리고자 합니다. 첫 순서는 Oracle 본사의 Big Data 전략가 Paul Sonderegger가 라는 제목으로 기조연설이었습니다. 최근 Big Data에 대한 관심이 뜨거운데, 이 배경에는 스마트 기기가 증가하면서 Data 생산량까지 ..

Biz & Tech/ICT Report
2014.03.05 13:14