반응형
이번 사이드 프로젝트의 목표는 다음과 같다.
처음 시작하는 것이니 만큼. 데이터 파이프라인의 구축에 이르는 일련의 과정 만드는 데 감을 잡고
더 나아가 간단하게 분석까지 해보고자 한다.
프로젝트 목표
- 성별 / 연령별 트렌드 데이터 수집 및 분석 프로세스 구축
최종 소비자
- (가상의 스타트업) 데이터 분석가들
데이터 수집의 목적
- 네이버 쇼핑 데이터에서 발생하는 트래픽 분석
- 트렌드 변화추이를 분석함으로써 향후 카테고리 진출에 대한 인사이트를 얻고자 함
파이프라인 구현 목표
- 매일 정해진 시간에 전날의 트랜드 데이터를 가져와서 축적하는 시스템 구축
- AWS 를 이용하여 비용과 시간을 절약하고 장소에 구애받지 않는
효율적인 수집-분석 시스템 구축
- 데이터 초기화에 대비한 백업 데이터 베이스를 구축하여 그곳에서
데이터를 가져올 수 있도록 대비
참고 링크
https://developers.naver.com/docs/datalab/shopping/
반응형
'데이터 엔지니어링 프로젝트 및 인강 > 1. Naver shopping Project' 카테고리의 다른 글
Side Project 05( Final ). Naver Shopping 정리 (0) | 2020.06.04 |
---|---|
Side Project 04( Final ). Colab 을 통해 최종적 파이프라인 구축하기x (0) | 2020.05.31 |
Side Project 03. AWS 에 데이터 넣기 (3) | 2020.05.26 |
Side Project 02. 네이버 쇼핑 데이터 수집 함수 만들기 (0) | 2020.05.26 |
Side Project 01. 네이버 developer api 생성하기 (0) | 2020.05.26 |