빅데이터, 사람을 읽다

빅데이터, 사람을 읽다 - 소비로 보는 사람, 시간 그리고 공간
BC카드 빅데이터센터 지음 / 미래의창 / 2020년 1월

'4차 산업혁명의 핵심은 빅데이터'라고 강조될 만큼 빅데이터는 오늘날의 디지털 경제를 주도하고 있습니다. 이에 더해 빅데이터에서 한 단계 더 나아간 D&A(Data & Analytics)의 중요성이 전 산업에 걸쳐 부각되고 있는 요즘입니다. 아시다시피 D&A란 실시간 끊임없이 생성되는 빅데이터를 바탕으로 분석한 자료를 토대로 인사이트를 제시하는 것을 말합니다.

특히 은행, 보험, 증권, 카드사를 포함한 금융 산업내 빅데이터는 그 증가 속도가 빠르고, 데이터 보유량이 많은 특징을 가지고 있으며, 타 산업 대비 높은 잠재 가치를 가지고 있습니다.

다양한 고객의 결제 정보를 분석하여 쿠폰을 발송하는 개인화된(Personalized) 타겟 마케팅 부터, D&A를 통한 예측모델을 도입하여 사기성 보험금 청구를 줄이고, 청구과정을 단축하는 등 금융산업에서의 D&A의 활용은 높은 생산성 향상과 궁극적으로 새로운 비즈니스 모델로의 전환 전략의 핵심이 될 것으로 기대되고 있습니다.

오늘 소개해 드리는 <빅데이터, 사람을 읽다>에서는 BC카드 빅데이터 센터가 보유한 방대한 결제 및 소비 데이터를 분석하여 다양한 형태의 소비 패턴 즉, 다양한 형태의 소비자 프로파일링과 대한민국에서 요즘 뜨는 소비트렌드 9가지 그리고 빅데이터로 본 요즘 뜨는 핫프레이스 상권 5곳을 조명하고 있습니다.

내용은 아래와 같습니다.

1. 소비자 프로파일링 유형 10 :

동네 생활 소비형, 종합 소비형, 오프라인 올빼미형, 외식 집중형, 온라인 온리형, 헤비 드라이버형, BMW형, 일상 소확행형, 워라벨 웰빙형, 레저 활동형

2. 빅데이터로 본 요즘 뜨는 소비 트렌드 9 :

미세먼지, 문화 소비, 홈쇼핑, 편의점, 워라벨, 디지털 생활비, 홈바디, 5060세대, 배달음식

3. 빅데이터로 본 요즘 뜨는 상권 5 :

합지로, 성수동 카페거리, 사로수 길, 황리단길, 해리단길

사실 이 3가지 큰 주제는 모두 밀접히 연관되어 있음을 알 수 있습니다. 즉, 현 경제상황(장기 저성장 고착화, 노동시간 단축) 과 인구구조의 변화(저출산&고령화, 1인 가구 급증) 그리고 혁신 디지털 기술의 발전 등이 혼재된 상태로 각 개인과 기업에 영향을 미치고 있기 때문입니다.

소비 활동은 '소비 욕구'가 있는 사람의 '시간'과 '공간'에서 이뤄지는 구매 행위를 의미하며, 누가 언제 어디서 무엇을 어떻게 소비하는지 알아가는 과정이라 했을 때, 궁극적으로 소비 활동을 담은 다양한 소비자의 빅데이터 분석을 통해 이성과 비이성을 넘나 드는 사람의 마음과 본성에 한 발짝 가깝게 다가섬으로써 우리의 삶을 긍정적인 형태로 발전시켜나가는데 도움이 되리라는 전망이 나오는 이유입니다.

지난 9일 국회에서는 관련 업계 최대 염원이었던 '데이터 3법' 개정안이 가결되었습니다. '개인정보보호법', '정보통신망법', '신용정보법'의 데이터 3법의 개정안이 국회를 통과함으로써 데이터의 활용범위를 법적으로 명확히 규정하고, 데이터 활용을 가로막는 규제들을 해소함으로써 마침내 개인이나 기업의 데이터를 적극적으로 활용하여 새로운 혁신적 비즈니스 생태계 구축의 실마리가 마련되었습니다.

물론 개인정보의 불법 유통이나 활용 등과 같은 부정적 시각이 팽배한 만큼 더욱 신중하고, 엄밀한 잣대의 데이터 활용 안이 마련되어야 함은 자명한 사실이지만, 기존 우리 경제의 버팀목이었던 기업들의 오프라인 기반의 레거시 사업들이 데이터 시장 개방 이후 어떤 방향으로 변화될 것인가를 예측하고, 이에 대비하는 것 또한 중요한 숙제로 남겨졌습니다.

이제 데이터는 ICT 업체만의 생존전략의 일부를 넘어 전 산업, 전 직종의 미래 생존 전략의 핵심으로 부각되고 있습니다. 소비자의 다음 타겟은 어디로 흘러갈 것인지를 수동적으로 따라가는 것이 아닌 능동적으로 예측하고, 선제적으로 제안하여 새로운 시장을 만들어내는 능력이 필요한 시점이 아닌가 생각해 봅니다.

2,800만 개인고객과 304만 가맹점에서 1초당 150건의 결제 데이터가 실시간 쌓이고, 월 4억 건의 결제 건수가 발생하는 BC카드 빅데이터센터의 '대한민국 소비자의 마음을 읽어내는 인사이트'가 담겨있는 책입니다.

일독을 권합니다.

공학계열 진로 로드맵

공학계열 진로 로드맵 - 로봇과 공존하는 기술자 ㅣ 진로 로드맵
정유희.안계정.김채화 지음 / 미디어숲 / 2020년 2월

최근 정부에서는 인공지능(AI) 강국 실현을 뒷받침하는 소프트웨어 인재 양성을 위해 올해 1633억원의 예산을 투입하여, 초, 중, 고, 대학 등에서 14만명의 인재를 양성할 계획을 발표한 바 있습니다.

과학기술정보통신부에서 내놓은 "SW 인재양성, 저변확충 사업 시행 계획"에 따르면 SW 중심대학 개교와 초, 중, 고 AI 심화교육 그리고 SW 미래채움센터 확대 개소 등의 내용을 담고 있지요.

4차 산업혁명시대의 핵심 기술로 자리잡은 AI를 구현하는 SW의 중요성이 점점 커지고 있으며, SW 인재양성을 통한 AI 일등국가 실현을 위해 향후 국가적 지원은 더욱 확대될 전망입니다.

그래서일까요? 초, 중, 고를 막론하고, 학생들이나 학부모님들의 '장래 진로 고민'은 오히려 더욱 깊어지는 듯 합니다. 장래의 진로는 곧 어느 계열의 대학으로 진학하느냐에 크게 좌우되므로, 결국 학생의 적성과 관심 그리고 지망 계열의 장래 비전으로 수렴되는 가운데, 특히 4차 산업혁명과 맞물린 비전을 쫒아 공학계열로 일찌감치 방향을 잡은 친구들이 꽤 많은 것이 요즘의 현실입니다.

그러나 진로를 잡았다 할지라도 그 학과에서 어떤 일을 하는지, 미래 비전은 무엇인지 그리고 진학을 위해 어떤 사전 지식이나 기술 그리고 경험이 필요한지 자세하게 알기는 쉽지 않습니다.

오늘 소개해 드리는 <공학계열 진로 로드맵>에서는 특히, '로봇과 공존하는 기술자'들을 표방하는 공학계열로 진학하고자 하는 학생과 학부모를 위한 세밀한 진로 로드맵을 제공하고 있습니다.

산업현장의 적재 적소에 필요한 인재를 양성하기 위해 대학의 학과들은 많은 변화를 거듭하고 있습니다. 다양한 형태의 채용형 학과, 현장 학습 강화형 학과 그리고 인문, 사회 계열과 공학계열의 융합형 학과 등...

이러한 시대 조류에 발맞춰 대학에서는 학과 전공에 필요한 사전 활동을 담은 '학생부 종합전형(학종)'을 통한 선발비중을 높이고 있으며, 특목고나 자사고 등의 입학전형에서도 학종에서 착안한 자기주도 학습전형으로 선발하는 추세가 두드러집니다. 적성과 계열에 맞는 각종 사전 활동을 자기소개서에 담아 면접을 통해 우수한 학생들을 걸러내겠다는 뜻이지요.

본서에서는 공학계열을 진학하는 학생들이 다른 학생들과의 차별화를 위한 단계별 과정을 통해 '잠재 역량'을 키울 수 있게하는데 주안점을 두고 있습니다. 또한 '계열별 역량'을 향상시킬 수 있는 진로 로드맵과 선배들의 성공스토리를 통해 구체적인 자신만의 스토리를 작성할 수 있도록 배려하고 있는 점이 인상적입니다.

본서에서는 공학계열 중 학생들이 가장 많은 관심을 보이는 3가지 진로를 소개하고 있습니다.

1. 기계로봇 자동차계열 진로 사용설명서

2. 컴퓨터 SW & 전기전자계열 진로 사용설명서

3. 스마트도시건축계열 진로 사용설명서

이상 3가지 진로에 대해 고등학생 때 부터 준비해야할 것들과 관련 학과, 대학 입학 후 수강하는 과목 그리고 졸업해서 나갈 수 있는 직업 분야 및 계열별 연계 도서와 동영상 추천의 순서로 자세한 설명과 도표를 통해 알기쉽게 설명해 주고 있습니다.

예를 들어, 컴퓨터 관련 분야를 공부하고 싶은데 고등학교 때는 어떤 활동을 하는 것이 좋을까에 대해, 정보나 과제 연구 과목을 수강하여 학업역량을 키우는 것 뿐 아니라 다양한 독서활동과 자율활동(창의적 체험활동) 그리고 동아리 활동 등의 구체적 사례를 소개해주는 코너 등은 학생들에게 실제적인 도움을 줄 수 있으리라 생각합니다.

특히 각 계열의 '추천도서와 동영상 코너에'서는 독서와 영상이라는 간접체험을 통해 자신이 목표하는 학과의 비전을 좀 더 명확히 하는데 큰 힘이 될 것으로 보입니다.

그러나 세상의 모든 일이 그렇듯 가장 중요한 것은 자신의 성향이 지망하는 계열(직업)의 전문성과 일치하거나 어울리는 정도에 따라서 성공과 실패로 이어질 것이라는 점입니다. 공학 계열로의 진로와 관련된 전문성을 지닌 본서를 통해 자신이 원하는 진로 로드맵을 차근 차근 훑어 본 후 자신의 성향과 지망 계열을 다시 한번 신중하게 되짚어볼 수 있는 기회가 되었으면 하는 바램입니다.

공학계열로의 진학을 준비하시는 학생들과 학부모님들의 일독을 권합니다.

R로 하는 빅데이터 분석

R로 하는 빅데이터 분석 : 데이터 전처리와 시각화 - 개념적 기초에서 심층 활용까지, 개정판
김권현 지음 / 숨은원리 / 2020년 1월

4차 산업혁명시대를 다른 말로 '데이터 경제 시대'라고들 이야기합니다. 즉, 모바일 폰과 센서를 통해 개인과 기업의 실시간 데이터를 분석하여 의미있는 패턴을 찾아내고, 이러한 분석된 패턴을 통해 현재와 미래의 소비 방식과 일하는 방식을 예측하여 기업 마케팅에 적용하거나 생산성, 효율성 극대화를 도모해 나갈 수 있습니다.

빅데이터 분석과 활용이 기업의 미래 생존전략에 필수 불가결해짐에 따라 빅데이터를 분석하는 기술에 대한 관심이 뜨거워지고 있습니다. 물론 데이터 분석을 통해 취업 진로를 모색하는 분들 또한 많아지고 있습니다.

빅데이터를 다루기 위한 가장 대표적인 오픈소스 언어이며, 도구로서 'R'과 파이썬(Python)을 많이들 언급합니다. 두 언어 모두 범용성이 뛰어나기 때문에 어떤 형태의 데이터든 자유롭게 분석이 가능한 장점이 있습니다. 물론 통계분석과 데이터 탐색 그리고 시각화에 탁월한 'R'이 데이터 분석 엔진의 표준으로 업계에 자리잡아 가고 있는 모양새입니다.

데이터 분석 기술 분야를 선도하는 구글, 페이스북, MS, 우버 등이 'R'을 사용하는 대표적인 기업이지요.

오늘 소개해 드리는 <R로 하는 빅데이터 분석>은 최근 지대한 관심을 끌고 있는 오픈소스 통계 분석 프로그램인 'R'을 체계적이고 효율적으로 학습할 수 있게 구성된 책입니다.

저자가 서문에서 밝히고 있다시피 사실 'R'의 복잡한 구문을 그 원리를 파고들어 독자를 쉽게 이해시키는 책은 그리 많지 않습니다. 특히 초심자들의 경우, 기존의 쿡북(Cookbook)의 소스코드를 있는 그대로 학습하는 경우가 많지만, 실제 현장에서 적용하기 위해서는 'R'의 복잡한 구문의 작동 원리를 파악하여 상황에 맞게끔 소스크드를 수정하거나 변경할 수 있어야 합니다. 당연히 쿡북 형식의 접근에는 한계가 있다는 이야기입니다.

아시다시피 'R'을 포함한 소프트웨어 패키지의 문법을 통째로 암기하기란 불가능합니다. 경우에 따라 조금씩 달라지는 문법을 제대로 이해하지 못하면 당연히 외워야 하겠지만 이 또한 분량이 너무 많습니다.

당연히 핵심적인 원리를 이해하지 못하고 임시변통으로 프로그램을 작성하게 되면 논리적 오류가 생기게 마련이며, 이런 오류(Bug)를 찾기 위해 부호 하나, 함수 하나 일일이 확인해야 하는 생고생(?)이 기다리고 있습니다.

사실 본서는 초심자들 보다는 어느 정도 'R' 프로그램을 접한 분들에게 큰 도움이 될 것 같습니다. 어느 책에나 있는 'R' 패키지 설치를 위한 자세한 설명과 Step by step 식의 그림은 거의 생략되어 있으며, 바로 'R'의 변수, 자료형 그리고 연산/함수로 이어지기 때문입니다.

통계분석, 머신러닝 모델링, 소셜 네트워크 분석, 텍스트 마이닝, 지도 시각화, 주식 분석, 이미지 및 사운드 분석 및 웹 애플리케이션 개발에 두루 활용할 수 있는 만능 데이터 분석 엔진인 'R'의 개념적 기초에서 부터 심층적 활용까지 특히 '데이터의 전처리와 시각화'에 골몰하시는 데이터 통계 분석 프로그래머 분들께 추천할 만한 도서로 평가합니다.

아웃사이드 인사이트

아웃사이드 인사이트
욘 리세겐 지음, 안세민 옮김 / 21세기북스 / 2019년 12월

2020년 현재, 전 산업의 패러다임을 바꾸고 있는 큰 흐름 하나를 꼽아보자면 역시 '데이터(Big Data) 분석을 통한 새로운 패러다임으로의 전환'을 들 수 있습니다. 이는 곧 "정보에 입각한 의사 결정" 으로 요약할 수 있을 겁니다.

인터넷에 남겨진 개인과 기업의 정보, 온라인 뉴스, 소셜미디어, 온라인 광고 등 새로운 온라인 콘텐츠가 매일 수십억 건씩 뿜어져 나오는 현실에서 기존과 비교할 수 없이 정교해진 알고리즘, 자연어처리(NPL), 머신 러닝, 빅데이터 분석기술을 통해 과거에는 상상치 못했던 개인과 기업의 현재와 미래의 통찰(insight)을 제공하고 있습니다.

오늘 소개해 드리는 <아웃사이드 인사이트> 에서는 기업의 외부데이터를 통해 외부로부터 통찰을 얻어내는 능력이야 말로 지금과 같이 역동적이고 빠르게 전개되는 경쟁환경에서 우위를 점하고, 변화를 예상하고 대처하기 위한 필수 조건임을 강조합니다.

즉, 빠르게 변화하는 디지털 혁신과 세계의 변화 속에서 외부 데이터는 환경을 이해하고 내일의 시장을 탐색하는 데 필요한 통찰력(외부통찰 Outside Insight)을 제공한다는 것이죠.

예를 들어, 기업의 거래 데이터는 지난 주, 지난 달 혹은 지난 해에 판매한 제품에 대한 뷰(View)를 제공하지만, 내일, 내달 혹은 내년에 판매할 제품에 대한 통찰력은 다양한 외부 소스에서 얻을 수 있습니다. 경쟁사의 실적, 미래 지향적 소비자 동향 및 인구 통계 데이터 등이 그것입니다.

또한 상시 온라인으로 연결된 세계 덕분에 사용 가능한 개별 데이터 소스를 모니터링하고 분석함으로써 기업은 주변 환경과 운영 환경에 대한 인식을 구축할 수 있습니다. 최근 제조와 관련된 스마트팩토리에 적용되고 있는 '디지털 트윈(Digital Twin)'이 그 좋은 예가 될 것입니다.

소셜 미디어 및 기타 다양한 온라인 채널의 사용이 증가함에 따라 사람들은 물론 기업 또한 온라인으로의 패러다임 전환을 추진하고 있습니다. 따라서 외부 데이터를 무시하고 단순히 기존의 내부 데이터에만 중점을 두게 되면 올바르지 못한 결정, 더 나아가 사전 대응에 실패한 조직으로 전락될 가능성이 있습니다.

물론 개인 정보 보호 문제, 윤리적 문제와 같은 외부 데이터와 관련된 몇 가지 문제들이 있지만 외부 데이터를 통한 조직과 기업의 의사 결정 과정은 커다란 변화의 정점에 서 있는 것 같습니다. 저자에 주장에 따르면 온라인 정보와 같은 외부 데이터의 활용으로 몇 년 이내에 이사회의 운영 방식, 전략 개발의 방식, 기업의 건전성을 평가하는 방식, 경영자에게 보상을 지급하는 방식이 바뀔 것으로 보입니다.

Apple, Facebook, Coca Cola 그리고 Barak Obama 등의 브랜드가 만든 '데이터에 기반한 혁신적 의사결정의 실제 사례'를 바탕으로 기업의 의사 결정의 미래와 비즈니스 리더가 '외부 사고 방식(외부데이터 기반 의사결정; 외부통찰 Outside Insight)'을 회사와 조직의 내부 프로세스에 구현할 수 있는 세부 계획을 제공하는 다소 '거시적 조직 의사결정 방법론'을 제공하는 책으로 평가합니다.

일독을 권합니다.

빅나인

빅 나인 - 9개의 거대기업이 인류의 미래를 지배한다
에이미 웹 지음, 채인택 옮김 / 토트 / 2019년 12월

미래를 예측하는 것은 누구에게나 쉬운 일은 아니지만, 그 전조(前兆) 징후를 찾는 것 그리고 그것이 진짜인지 가짜인지, 언제 메인스트림(Main Stream)이 될 것인가에 대한 자신만의 견해를 가지는 것은 지금처럼 급격히 변화하는 시대에 무엇보다 중요한 능력이 될 것이며, 성공과 실패를 가르는 핵심역량이 될 것입니다.

이러한 미래예측의 한 가운데는 4차 산업혁명을 견인해가는 핵심기술인 '인공지능(AI)'의 행보가 자리하고 있습니다. 현재 AI 기술은 우리 생활 깊숙이 자리하여 '언제', '어디서', '무엇을', '어떻게' 그리고 '왜' 를 결정해 주는 보이지 않는 인프라 기술로 작동하고 있습니다.

특히, 데이터(빅데이터)를 통한 학습을 통한 "예측과 최적화(개인화)"를 통해 공급과 소비의 새로운 기업 패러다임을 변화시켜 생산성, 효율성 향상을 통한 경제 부흥과 같은 긍정적 영향력 뿐 아니라 미래 일자리를 빼앗고 급기야 인간을 멸종시킬지도 모른다는 부정적 영향력이 세간의 주의를 끌기도 합니다.

오늘 소개해드리는 <빅나인 : 9개의 거대기업이 인류의 미래를 지배한다>에서 저자는 사회를 구성하고 지배하는 구조와 시스템이 AI에 의존하게 된다면 기계적인 시스템이 내린 결정과 결과는 우리가 꿈꾸는 이상적인 삶과는 크게 다를 것이라 주장하며, AI 기술발전의 두 축인 미국과 중국의 AI 연구 과정이 이대로 진척된다면 지금으로 부터 50년 후인 2069년에도 크게 달라지지 않을 것이라 일축합니다.

이러한 인류 역사상 최악의 실존적 위기에 직면한 우리는 다음과 같이 물을 수 있어야 합니다.

소수의 사람이 설계한 시스템이 인류 모두의 의사 결정 권한을 독점하면 어떤 일이 발생할 것인가?

또 그런 결정이 시장 세력이나 야심있는 정당에 편향되어 있다면 어떻게 될까? 등..

앞으로 AI에 의해 통제되는 미래의 사회적 관례와 경제 운영 그리고 사람들과 연관되는 방식 안에 그 해답이 있을 것입니다.

본서의 빅나인은 AI 기술을 대표하는 미국과 중국의 대표 IT 공룡기업들을 지칭합니다. Google, Microsoft, Amazon, Facebook, IBM, Apple, Baidu, Alibaba 그리고 Tencent가 그 들입니다.

총 3부로 구성된 본서의 구성은 아래와 같습니다.

1부 : AI가 무엇이며, 빅나인이 AI의 개발가 발전에 어떤 역할을 했는가? 그리고 현재 그들이 직면한 상황은 어떠한가?

2부 : AI가 현재 속도로 발전함에 따라 구축되는 50년 뒤의 미래 시나리오를 데이터 기반의 모델링 기법을 통해 낙관적, 실용적 그리고 파국적 시나리오로 나누어 제시함으로써 AI의 발전에 따른 인류의 삶의 변화 모습 제시

3부 : 2부에서 제시된 시나리오에서 확인된 모든 문제에 대한 전략적 솔루션을 통해 우리가 직접 실천하고 행동에 옮길 수 있는 구체적인 권고를 포함

저자는 이야기 합니다. "이 책은 일반적인 AI를 이야기하는 책이 아니다. 더 나은 미래를 위한 경고이자 청사진이다."

사실 AI 기술이 미국과 중국 대기업(혹은 중국 정부)에 의해 주도되다 보니 기본 배경과 바탕이 미국과 중국의 현 상황에 기반되어 서술되어 있는 것이 사실입니다.

예컨데, 미국이 왜 장기적인 AI 계획을 수립하지 않는지, 왜 미국 기업, 학교 그리고 정부 기관은 AI에 대응하는 준비를 하지 않는지.. 또한 중국이 경제, 외교, 지역 정책 등에서 새로운 세계 질서 창조를 위해 AI를 통한 전략적 그림을 어떻게 그려나가고 있는지 등..

결론적으로 '미국 민간기업의 최대한의 이윤추구'와 '중국 공산당의 세계 패권 쟁취'를 위한 AI의 오용 혹은 방임을 그대로 보고만 있다면 빅나인으로 대표되는 AI 테크 기업들에 의해 인류는 되돌릴 수 없는 막대한 해를 입을 수 있음을 명심해야 합니다.

본서를 통해 다가올 AI 시대의 기술을 대할 때 "사용 목적"과 "의도하지 않은 오용" 의 가능성에 대비된 계획은 과연 무엇이 되어야 하는지 확인해 보실 것을 권합니다.