데이터 엔지니어를 위한 97가지 조언

39 데이터 반란을 방지하는 방법

 

숀 냅(Sean Knapp)

어센드(Ascend) 창립자, CEO

데이터 팀은 충돌을 피할 수 없습니다. 데이터의 양이 증가하고 속도가 높아지며 다양해졌기 때문에 시스템이 더욱 복잡해졌지만, 기업 데이터를 복잡하게 만드는 가장 큰 요인은 단연코 새로운 데이터 제품을 만들거나 효율화할 수 있는 구성원인 설계자와 엔지니어, 분석가, 과학자 등의 인원수입니다.

기업이 새로운 데이터 제품을 구축하기 위해 공을 더 들이고 팀을 확장하게 되면 이들 사이의 상호 연결성과 그로 인한 복잡성으로 인해 관련 그룹의 업무가 마비될 수 있습니다. 설상가상으로 구성원끼리 우선순위가 상충되는 경우가 많아서, 이런 상황은 구성원 간의 갈등으로 이어지곤 합니다. 인프라 팀은 확장 가능성과 보안, 비용을 가장 중요하게 여기지만, 엔지니어링 팀은 유연성과 개발 속도, 관리 용이성을 우선시합니다. 한편 데이터 과학자와 분석가는 데이터의 가용성과 검색 용이성, 도구 연결성을 중요하게 여깁니다.

한 그룹의 요구 사항에만 초점을 맞추는 것은 ‘데이터 반란’을 조장하는 전략을 취한 것이나 다름없습니다. 데이터 반란이란 내부 사용자가 빠르게 움직이고 우선순위 충돌에서 벗어나기 위해 숨겨진 IT 조직을 만드는 것을 말합니다. 새로운 프로세스 및 기술은 ...