오픈소스를 업무에 도입할 땐, 항상 참조하는 오픈소스의 문서화가 잘 되어 있는지를 확인하자. 이제 회사에서 내게 주는 업무가 본격적으로 중요도가 높아지면서, 하나씩 실제 AI와 밀접한 연관성을 갖는 것들이 주어지기 시작했다. 물론 여태까지도 간접적으로는 운영 서버에서 ML Pipeline components를 …

한 권으로 비전 시스템 기본기 다지기 이 도서는 “한빛미디어 <나는 리뷰어다> 활동”을 위해서 책을 제공받아 작성된 서평입니다. 2월에 시작했던 한빛 미디어 도서 리뷰가 벌써 추석을 앞두고 있다. 한 달에 한 권 읽기를 목표로 했던 나의 리뷰 도서단 활동은 이번으로 7회째이고, 꾸준히 책을 읽는 과정은 역시 업무적 …

도커의 기본 사용 방법부터 최적화 방법까지 알아보자. (기본편) 대략 2022년 5월부터 지금까지 도커를 무척이나 많이 사용하고 있다. 그것도 그럴 것이 회사에서 Ops 업무를 수행하기 위해 Jupyterhub, Flyte 모두 기본적으로 ML 작업을 수행하는 환경을 보장해 주는 도커 이미지를 기반으로 인스턴스를 생 …

사용하는 volume의 종류에 따라 ML training, inference 등을 수행할 때 성능 이슈가 크게 걸릴 수 있다. 하나씩 배우는 내용을 내 블로그에 꾸준히 정리하는 와중, 최근 나를 고무시키면서도 앞으로 블로그 글을 포스팅할 때, 조금 더 깊이 있게 작성해야겠다고 다짐하게 한 사건이 있었다. 내가 입사하 …

급작스럽게 발생한 쿠버네티스 에러 대응하기 에러라는 것이 코드를 잘못 작성하거나, 서비스 환경을 잘못 구성했을 때만 찾아오는 것은 아닌 것 같다. 2022년 7월 마지막 주 금요일, 오늘도 Flyte 전사 배포 준비를 위해 오전부터 활발하게 준비를 하던 중에 갑자기 회사의 Multi Asset Solution (쉽 …

쿠버네티스 메모리 관리에 의해 발생할 수 있는 Bus Error 정리 현재 회사가 소프트 뱅크에 투자를 유치한 이후로 소프트 뱅크에서 업무를 운영하는 방식이나 비즈니스 운영 등에 대해 많은 조언을 해주고 있고, 이에 따라 회사의 리서치 엔지니어들이 AI 투자 서비스 모델 등을 수익을 확장할 수 있는 방향으로 다양 …

수집한 데이터를 어떻게 비즈니스 관점에서 활용하는지에 대한 고찰을 제공하는 도서 리뷰 이 도서는 “한빛미디어 <나는 리뷰어다> 활동”을 위해서 책을 제공받아 작성된 서평입니다. 어느덧 7월이다. 한빛미디어 도서 서평단으로 2월달에 시작해서 7월까지, 벌써 6권의 책을 받아 읽어보게 되었다. 업무와 이런 저런 일들로 하루가 …

Flyte에서 유독 엄격하게 Version 관리를 하는 이유에 대해 정리해보자. 프로젝트에 참여하다보면 소스코드, 배포 인스턴스, 패키징 등 버전 관리를 해줘야하는 것들이 꽤 많이 발생한다. 이 과정에서 개발자들은 소스코드의 경우 Git으로, 배포 인스턴스의 경우 Tag로, 패키징 등은 배포 버전을 등록하여 관리하 …

프로젝트 성격에 맞는 버전 관리 전략 채택, 그리고 그에 맞는 git 사용 방법 정리하기 IT 프로젝트를 수행하는데 있어 선택할 수 있는 전략이나 스택은 다양하고, 매 순간 순간이 선택과 결정의 연속이다. 최근에는 그 동안 쿠버네티스에 배포해놓은 애플리케이션을 관리하기 위해 IaC로써 Pulumi를 사용했는데, ML …