데이터 엔지니어를 위한 97가지 조언

96 엄청난 데이터에 따르는 엄청난 책임

 

로힛 비자야레누(Lohit VijayaRenu)

지난 10년간 데이터가 폭발적으로 증가했고, 이는 다양한 조직에서 데이터를 수집하고 처리하고 분석하고 이를 통해 고객 서비스를 개선하는 방식에까지 영향을 미쳤습니다. 많은 기업에서 변화를 받아들였고 데이터를 우선하게 되었습니다. 하드웨어와 소프트웨어 시스템 모두가 빅데이터 시스템을 지원할 수 있게 진화했고, 따라서 데이터 엔지니어가 이전에는 발견할 수 없었던 귀중한 통찰을 쉽게 끌어낼 수 있게 되었습니다. 데이터 중심 애플리케이션이 사용자 경험을 개선했지만, 동시에 사용자 정보가 애플리케이션과 사용자가 통제할 수 없는 곳에 노출될 수 있습니다. 이제 데이터 엔지니어는 더 큰 책임감을 가지고 정보를 다루어야 합니다.

 

 

¦ 사용자 입장에 서라

여러 시스템이 사용자에 대한 다양한 유형의 개인 정보를 수집합니다. 사용자 정보를 항상 본인의 정보처럼 다루세요. 때때로 데이터 엔지니어는 데이터 애플리케이션을 설계하는 동안 데이터를 보호하는 역할도 해야 합니다. 항상 보안 및 개인 정보 보호에 대한 사내 표준이나 업계 표준을 지켜야 합니다. 조직에는 보안 정책 시행을 도우면서 새로운 위협에 대해 최신 상태를 유지할 전담 인력이나 팀이 있어야 합니다.