프로젝트-troll-2


프로젝트 4차 중간 모임(18/08/12)

매주 토요일 전체 모임
매주 2,3회 씩 모임을 가지며 프로젝트 중
중간 모임은 정리하지 못함

  • 맨 처음 기술 스택과 비교해서 조금 바뀌었다.
  • 초기 버전에 맞추어서 중요한 부분을 구현중이고 크게 달라진 점은 아래와 같다

  • AWS 에서 GCP의 사용
    • AWS의 프리티어는 컴퓨팅 리소스가 너무 빈약하였고(아무리 테스트 목적이라도)
    • GCP의 300크레딧은 강력했다.
  • 현재 고민
    • AWS Lambda를 GCP 대체 할 부분이 있을까?
  • 현재까지 완성도
    • 우리가 주로 사용해야 할 Api 분석 완료
    • Scala를 활용한 데이터 가져오기 완료
    • 주키퍼 카프카 셋팅완료
    • 많은 데이터 중 필요한 데이터 추출 및 가공 완료
  • 앞으로 필요한 부분
    • 프로듀서가 될 기존의 lambda과 비슷한 형태의 gcp 서비스 찾자
    • 주키퍼의 컨슈머 애플리케이션이나 웹서버
    • Api를 통해 받는 자료 중 불변의 경우 DB에 구축
      • Json 타입을 변환하고 mysql에 넣을 것
    • 시각화(내부, 외부용)
    • 웹이나 챗봇 서비스
  • 주간 목표
    • 수집 > 관리 > 정제 > 분석 구축완료
  • 기술스택은 수정될 수 있으니 최종은 나중에 올릴 예정