직무 · 모든 회사 / 데이터분석가
Q. 게임업계 데이터 분석가 Spark사용 역량
게임업계에서 로그데이터 추출 가공 분석을 위해 Spark를 활용한다고 하는데 SQL말고는 다뤄본적이 없습니다.
spark에 대한 구축이나 배포 과정까지 알아야 하는지 아니면 pyspark를 활용한 쿼리정도만 알면 되는지 궁금합니다!
답변
2
채택
로그데이터 같이 대량의 데이터가 들어오는경우 sql만으로 처리가 불가능 한 상황이 대부분입니다.
해서 spark같은 배치성 프레임워크를 도입하고 분석 및 데이터 가공 모두 spark으로 처리할 확률이 높습니다.
구축 배포보다는 스팍처리 방식과 관련 개발능력을 기르시는게 좋을것 같습니다.
해서 spark같은 배치성 프레임워크를 도입하고 분석 및 데이터 가공 모두 spark으로 처리할 확률이 높습니다.
구축 배포보다는 스팍처리 방식과 관련 개발능력을 기르시는게 좋을것 같습니다.
답변이 안보이시나요? 직접 질문해보세요.
글자수:
0
/ 500
2022.05.28