Amazon SageMaker가 OpenLineage 커뮤니티에 맞춤형 전송 방식을 기여하고, 추가적인 리니지 기능을 제공합니다.

아마존 웹 서비스(AWS)는 아마존 사지메이커(Amazon SageMaker)가 오픈 라이너리지(OpenLineage) 커뮤니티에 사용자 지정 전송 '아마존 데이터 존 전송(AmazonDataZoneTransport)'을 기여했으며 자동화된 라이너리지 기능을 강화했다고 발표했습니다. 이러한 라이너리지 강화에는 AWS 글루(AWS Glue), 아마존 레드시프트(Amazon Redshift)와 같은 소스에서 자동화 개선 및 도구에서 자동화된 라이너리지 캡처가 포함되어 데이터 과학자와 엔지니어가 데이터 및 모델과 더 효율적으로 작업할 수 있습니다. 오픈 라이너리지 커뮤니티에 대한 새로운 '사용자 지정 전송' 기여는 빌더가 전송을 다운로드하고 오픈 라이너리지 플러그인을 사용하여 오픈 라이너리지 활성화된 시스템에서 캡처된 라이너리지 이벤트를 강화하고 자동화할 수 있습니다. 이를 통해 고객은 라이너리지 캡처를 자동화하고 이러한 라이너리지 이벤트를 사지메이커 유니파이드 스튜디오 도메인으로 보낼 수 있어 데이터 워크플로 내에서 데이터 거버넌스와 추적 가능성을 향상시킬 수 있습니다. 아마존 사지메이커는 또한 다양한 소스에서 강화된 자동화된 라이너리지 기능을 도입했습니다. 이러한 개선에는 AWS 글루, 아마존 레드시프트 및 vETL 프로세스 및 노트북과 같은 도구에서 자동화된 라이너리지 캡처를 위한 더 나은 지원이 포함됩니다. 또한 사지메이커는 저장 프로시저 및 물리화된 뷰를 포함하여 아마존 레드시프트에 대한 SQL 라이너리지 지원을 개선했습니다. 이러한 강화 기능은 복잡한 데이터 작업의 자동 라이너리지 캡처를 제공하여 데이터 변환 및 종속성에 대한 더 포괄적인 뷰를 제공합니다. 이 기능은 아마존 사지메이커가 사용 가능한 모든 AWS 지역에서 사용할 수 있습니다. 사용자 지정 전송 기여 및 강화된 라이너리지 기능에 대한 자세한 정보는 아마존 사지메이커 페이지를 방문하세요. 이러한 새로운 기능을 사용하여 라이너리지 시작에 대한 자세한 정보는 사용자 설명서를 참조하세요.