프로젝트-troll-2
프로젝트 4차 중간 모임(18/08/12)
매주 토요일 전체 모임
매주 2,3회 씩 모임을 가지며 프로젝트 중
중간 모임은 정리하지 못함
- 맨 처음 기술 스택과 비교해서 조금 바뀌었다.
초기 버전에 맞추어서 중요한 부분을 구현중이고 크게 달라진 점은 아래와 같다
- AWS 에서 GCP의 사용
- AWS의 프리티어는 컴퓨팅 리소스가 너무 빈약하였고(아무리 테스트 목적이라도)
- GCP의 300크레딧은 강력했다.
- 현재 고민
- AWS Lambda를 GCP 대체 할 부분이 있을까?
- 현재까지 완성도
- 우리가 주로 사용해야 할 Api 분석 완료
- Scala를 활용한 데이터 가져오기 완료
- 주키퍼 카프카 셋팅완료
- 많은 데이터 중 필요한 데이터 추출 및 가공 완료
- 앞으로 필요한 부분
- 프로듀서가 될 기존의 lambda과 비슷한 형태의 gcp 서비스 찾자
- 주키퍼의 컨슈머 애플리케이션이나 웹서버
- Api를 통해 받는 자료 중 불변의 경우 DB에 구축
- Json 타입을 변환하고 mysql에 넣을 것
- 시각화(내부, 외부용)
- 웹이나 챗봇 서비스
- 주간 목표
- 수집 > 관리 > 정제 > 분석 구축완료
- 기술스택은 수정될 수 있으니 최종은 나중에 올릴 예정