MENU

Fun & Interesting

Google Cloud Platform에서 시간과 비용과 성능 세 마리 토끼를 잡는 daily batch 구축기 / if(kakaoAI)2024

kakao tech 318 4 months ago
Video Not Working? Fix It Now

Google Cloud Platform에서 다양한 소스에서 매일 ETL하는 파이프라인에는 매일 실행되는 만큼 시간/비용/성능을 모두 고려해야 합니다. AlloyDB로 비싼 인메모리 디비와 근접한 성능 내기, 소스DB에 부하가 거의 없이 매일 ETL 했던 사례, 수천개의 테이블의 ETL을 효율적으로 스케줄링한 경험을 공유합니다. #Data #리소스최적화 카카오헬스케어에서 데이터 플랫폼을 개발하고 있는 Grey입니다. 발표자료 보기 👉 https://speakerdeck.com/kakao/ifkakao24-73 if(kakaoAI)2024에 대한 자세한 정보는 👉 https://if.kakao.com #카카오 #이프카카오 #개발자컨퍼런스 #AI #기술 #개발 #ifkakaoAI2024

Comment