해당 세션을 신청 한 이유 및 해당 세션을 통해 배우고 싶은 것
•
1. 온프레미스 빅데이터 시스템을 클라우드로 마이그레이션하는 과정.
•
2. 데이터레이크를 활용해 데이터 처리 속도와 유연성을 개선하는 기술.
•
3. 현대카드가 빅데이터 플랫폼으로 어떤 성과를 냈는지.
세션에 대한 개략적인 소개
현대카드는 데이터 사이언스 및 AI 분야에 집중하기 위해 AWS 클라우드를 통해 약 3페타바이트 (3천테라바이트)에 달하는 온프레미스 빅데이터 시스템의 마이그레이션을 수행하였습니다. 본 강연에서는 현대카드가 AWS 클라우드 기반의 데이터레이크를 활용해 데이터 처리 속도와 유연성을 개선하고, 나아가 AI 기반 모델 개발부터 서비스까지 이어지는 자동화를 통해 어떻게 비즈니스 혁신을 달성했는지에 대해 알아봅니다.
디지털 트랜스포메이션 과정에 있어서 선택의 기로에 있던 순간이나, 판단 근거들을 잘 설명해주셔서 좋았다.
•
데이터 처리의 한계를 극복하고자 클라우드 기반으로 전환
•
통합, 자동화, 성장을 중요 포인트로 설정
인프라 교체를 하면서 “인프라를 바꾸는 김에 무엇을 더 해볼 수 있을까”를 고민해 보았다는 부분이 인상깊음.
AWS 서비스들을 적극적으로 활용한 부분과, 어떤 서비스, 기술등을 사용했는지 전체적으로 공유.
가설을 세우고, 검증하는 과정도 이해하기 쉽게 설명을 해주셨다.
빅데이터 플랫폼 구축으로 얻은 성과를 수치로 제시.
온프레미스에서 데이터 시스템을 사용하고 있는 다른 회사들이 다음 단계를 고민할 때 참고할 좋은 사례라고 생각함.
빅데이터 플랫폼 2.0은 MLOps, DataOps등을 모두 통합했다.
AWS 서비스들을 적절하게 래핑해서 제공하면서 얻은 효과들이 있는데, 이는 플랫폼 엔지니어링과도 비슷한 맥락으로 보인다.