빅데이터를 활용한 경제데이터 분석 사례 및 방법론 연구

요약

통계청 등 정형 데이터는 공신력이 있지만, 정보량과 범위에 한계 존재

빅데이터는 전통적인 데이터를 완전히 대체할 수 없고, 기존 데이터를 보완하는 의미로 활용하는 것이 적절

문제 해결을 중심에 놓고 판단하면 효과적인 데이터를 찾을 수 있음

- 속보성, 예측이 중요한 경우 -> 포털 검색어, SNS텍스트 자료를 통한 상관관계 분석

①실시간 생성, 동기 부여된 이용자의 자발적 결과이므로 신속성이 높고, 편의성이 낮다

② 실제 경제현상과 높은 상관관계를 가진 변수 생성, 단기/중장기 예측에 활용할 필요가 있음

 

- 사후적 심층평가가 필요한 경우 -> 인과관계

① 경제 이론에 근거한 분석 모형이 제시되어야 한다

② 이중차분법, 도구변수추정법 등 인과관계 파악 가능한 계량기법 적용 필요

③ 샘플링 기법 등 자료의 대표성이 중요하다 (행정데이터의 적극 활용 필요)

 

* 인과관계 분석방법

① 가상 실험상황 구성

② 정책의 영향 받는 처치군, 영향 없는 통제군 구분하여 정책 시행 전후 변화 예측

③ 패널데이터를 이용해 이중차분법으로 정책시행 효과 파악

 

 

 

빅데이터의 특성

3V : Volume(양적으로 큰 규모), Variety(다양한 소스를 통해 얻어짐), Velocity(실시간 현황 파악)

가장 중요한 것은 '문제를 해결하는 것'

조사자료와 달리 응답편의(response bias) 발생 확률이 적음

디지털 확대 기능 : 작은 집단도 확대해 볼 수 있음

 

빅데이터의 분류

텍스트 : 포털 검색어, 소셜미디어, 인터넷 뉴스, 웹사이트 로그, 문서 자료

행정자료 : 인구센서스, 국세청, 건강보험, 국민연금, 고용보험 등

위치정보 : 교통정보, 지역정보, 부동산, 상권분석

이미지 : 위성이미지, 소셜이미지

민간 거래 정보 : 신용카드, 스캐너데이터, 신용정보 등

 

 

 

 

 

해외 사례

영국 실업수당 검색 빈도수로 실업률 예측 - McLaren and Shanbogue(2011)

표준편차 높은 교사의 학습지도는 학생의 평생 소득을 높인다 - Chetty et al(2011)

은퇴 자산과 연금 수령의 보완적 관계 확인 - Armour and Hung(2017)

미국 4년제 사립대학 졸업생의 소득이 오히려 감소, 석사생은 소득 증가 - Cellimi and Turner(2016)

Google Street View로 지역 소득과 주택가격 예측 - Glaeser et al(2018)

우버의 실시간 가격 상승 제안이 구매율과 연관이 있음 (회귀단절모형 이용) - Cohen et al(2016)

 

장점

풍부한 정책적 시사점 제시

 

단점

개인 식별 가능성이 높아 법 제도적 우려와 규제의 벽

 

 

 

국내 사례

포털뉴스의 정치 성향은 유사 성향을 가진 이용자를 유도함으로써 클릭수를 높이기 위한 경제적 요인이 존재 - 최동욱(2017)

후쿠시마 원전사고의 SNS 정보확산이 소비자의 수산물 소비를 감소시킴 - 최경덕 외(2016)

여성, 직장인, 고령자의 아르바이트가 최근 20년간 증가하는 현상 파악 - 오선정(2018)

임차인의 전세보증금 손실 위험 분석 - 이태리 외(2018)

서울시 직주 근접 선호 현상 확인 - 하나금융경영연구소(2019)

북한의 야간 조도와 소비활동의 관련성 - 김규철(2017)

 

 

 

 

 

배운점, 느낀점

소셜미디어 등 온라인 상의 비정형 데이터의 활용도와 중요성이 높아지고 있음 (비정형 데이터 전처리 스킬과 특징에 대해 다룬 글이 있다면 읽어보고 싶다)

이러한 데이터는 주로 기업이 마케팅 분석 용으로 이용하고 있으나, 차차 정부차원의 사회현상 분석 데이터로도 활용될 수 있을 것이라 기대됨

데이터 분석의 첫 걸음은 문제점의 파악이고, 분석 후 중요한 것은 한계점의 파악이다

문제점은 누구나 알고 있다. 하지만 왜 그렇게 되었는지 원인의 증명과 앞으로의 해결방안을 제시하는 것이 데이터 분석의 이유다

 

 

 

 

 

 

출처 https://www.nabo.go.kr › JSPservlet › download

https://www.nabo.go.kr/system/common/JSPservlet/download.jsp?fCode=33315667&fSHC=&fName=%EB%B9%85%EB%8D%B0%EC%9D%B4%ED%84%B0%EB%A5%BC+%ED%99%9C%EC%9A%A9%ED%95%9C+%EA%B2%BD%EC%A0%9C%EB%8D%B0%EC%9D%B4%ED%84%B0+%EB%B6%84%EC%84%9D+%EC%82%AC%EB%A1%80+%EB%B0%8F+%EB%B0%A9%EB%B2%95%EB%A1%A0+%EC%97%B0%EA%B5%AC.pdf&fMime=application/pdf&fBid=19&flag=bluenet