지난주 패스트캠퍼스 데이터 분석 부트캠프에서 특별한 특강을 들었습니다. 바로 업스테이지(Upstage)의 데이터 매니저 김남혁 님을 모시고 진행된 '데이터 매니저는 어떤 일을 하나요?'라는 주제의 강의였습니다. 데이터 분석가를 목표로 하고 있는 저에게는 정말 뜻깊은 시간이었는데요, 그 이유를 여러분과 공유하고 싶어 이 글을 씁니다.
데이터 매니저란 무엇인가?
우선, 데이터 매니저(Data Manager)라는 직무에 대해 상세히 알게 되었습니다. 데이터 매니저는 인공지능 모델 개발에 필요한 데이터의 수집, 라벨링, 전처리, 클렌징 등 데이터 관련 모든 업무를 수행한다고 합니다. 특히 데이터 매니저는 데이터 엔지니어와는 달리 AI 모델 학습과 평가를 위한 데이터 구축과 시스템, 도구 개발 및 운영에 집중한다고 설명해 주셨습니다.
이 부분에서 가장 인상 깊었던 점은 "좋은 데이터가 좋은 모델을 만든다"는 말이었습니다. AI 모델의 성능을 좌우하는 핵심 요소가 데이터의 품질과 일관성이라는 것을 다시 한번 깨달았습니다.
다양한 도메인의 데이터 경험
데이터 매니저의 큰 장점 중 하나는 다양한 도메인의 데이터를 다룰 수 있다는 것이라고 합니다. 은행, 제조, 의료, 무역 등 여러 산업 분야의 데이터를 접하면서 폭넓은 지식을 습득할 수 있다는 점이 매력적으로 다가왔습니다. 이는 한 분야에만 국한되지 않고 여러 분야의 전문성을 쌓을 수 있는 좋은 기회라고 생각했습니다.
또한, CV(Computer Vision), NLP(Natural Language Processing), Tabular Data 등 다양한 형태의 데이터도 다루기 때문에 기술적인 성장에도 큰 도움이 될 것 같았습니다.
데이터 엔지니어와의 차이점
데이터 엔지니어와 데이터 매니저의 역할 차이에 대해서도 명확하게 이해하게 되었습니다. 데이터 엔지니어는 대용량 데이터를 효율적으로 처리하기 위한 시스템을 설계하고 구축하는 반면, 데이터 매니저는 AI 모델 학습에 직접 활용되는 데이터를 구축하고 관리한다고 합니다.
이렇게 두 직무가 데이터라는 공통점을 가지고 있지만, 초점이 다른 부분이 흥미로웠습니다. 특히 저는 데이터 분석을 하면서도 AI 모델에 필요한 데이터를 어떻게 준비해야 하는지에 대한 고민이 많았는데, 데이터 매니저의 역할이 그 해답이 될 수 있을 것 같았습니다.
실제 업무 사례와 최신 트렌드
강사님께서 실제 현업에서 겪은 다양한 사례를 공유해주셔서 더욱 현실감 있게 다가왔습니다. 예를 들어, 개인 정보 이슈로 마스킹된 주민등록증 데이터를 합성 데이터로 재구성하는 방법이나, LLM(대형 언어 모델)을 활용한 데이터 구축과 평가 방법 등은 정말 흥미로웠습니다.
특히 합성 데이터를 활용하여 개인 정보 문제를 해결하는 과정에서 Stable Diffusion이나 오픈 소스 라이브러리를 활용하는 방법은 기술적인 관점에서도 큰 인사이트를 얻을 수 있었습니다.
데이터 매니저로서의 성장과 전망
강의에서 강조된 부분 중 하나는 데이터 매니저는 자신의 노력에 따라 다양한 업무에 도전해 볼 수 있고, 자연스러운 커리어 전환도 가능하다는 것이었습니다. 개발 중심의 업무나 연구 중심의 업무 등으로 확장할 수 있는 기회가 많다고 합니다.
또한, AI 시대가 발전할수록 데이터 매니저의 역할이 더욱 중요해질 것이라는 전망도 인상적이었습니다. 바늘(AI) 가는 데 실(Data) 가기 때문에, AI의 발전은 데이터 매니저의 중요성을 더욱 부각시킬 것이라고 합니다.
개인적인 소감과 앞으로의 계획
이번 특강을 통해 데이터 매니저라는 직무에 대해 깊이 있게 이해하게 되었고, 제 커리어의 새로운 가능성을 발견한 느낌입니다. 데이터 분석가로서의 길도 매력적이지만, 데이터 매니저로서 AI 모델의 성능을 극대화하고 다양한 도메인의 데이터를 다루는 것도 큰 도전이 될 것 같습니다.
앞으로 남은 부트캠프 과정에서 데이터 매니저로서 필요한 역량인 AI에 대한 탄탄한 기본기, 데이터 중심의 사고, 프로그래밍 능력 등을 더욱 강화해야겠다고 다짐했습니다.
마치며
패스트캠퍼스에서 제공하는 이러한 특강은 단순히 지식 전달에 그치지 않고, 실제 현업의 생생한 이야기를 들을 수 있어 정말 유익한 시간이었다고 생각합니다. 데이터 분야에 관심 있는 분들이라면 데이터 매니저라는 직무도 한 번쯤 고민해 보시면 좋을 것 같습니다.
이번 특강을 계기로 저도 더 넓은 시야로 데이터 분야를 바라보고, 앞으로의 커리어를 더욱 폭넓게 설계해 볼 생각입니다.
#패스트캠퍼스 #데이터분석 #부트캠프 #데이터매니저 #AI특강 #커리어고민 #IT직무 #데이터교육
