본문 바로가기

전체 글

 (25)
[MSSQL] Query로 XML 파싱하기 일반적으로 레거시에서 ETL할 때 XML값을 파싱 및 처리해서 가져오지만, 애드혹으로 들어온 데이터에서 SQL로 XML 파싱이 필요하여 정리합니다. XML 문서의 구조와 특징을 간단히 정리하고 SQL로 XML을 파싱해보겠습니다.  1. Element / AttributeXML은 Element와 Attribute 로 구성되어 있습니다.XML Element는 시작 태그부터 종료 태그까지의 모든 것을 의미합니다.XML Attribute는 Element에 대한 추가적인 정보를 제공합니다.# Element 예시 511111 Jay Kim 511112 David Kim 511113 Ted Park # Attribu..
[Databricks] 데이터브릭스 학습하기 1 배경데이터 브릭스 PoC를 위해 찾아본 자료를 정리합니다.해당 글의 자료는 데이터브릭스코리아 유튜브 영상에서 확인할 수 있습니다.  데이터브릭스의 주요 콘텐츠를 키워드로 정리합니다.기존 클라우드 플랫폼에서 제공하는 기능은 대부분 제공하는 것 같습니다.또한, 기존 클라우드 플랫폼을 당장 대체하는 것이 아닌 확장해서 사용해볼 수 있도록 잘 되어있습니다.Main KeywordUnity Catalog- 단일/통합된 보안 및 관리- 공유 → Delta Sharing - DBFS를 학습 → 더 나은 Magic Command 가능보안기존의 SSO 그대로 연동하여 사용 가능Ex. Azure AD 연동하여 추가 설정 필요하지 않음독립적인 작업 환경 및 클러스터- 각 용도에 맞는 노트북 및 클러스터 생성- 노트북에 따른 ..
[MSSQL] View와 SP에 참조되는 테이블 확인하기 배경RDB를 운영하며 점차 확장하고 이에 View와 SP(Stored Procedure)의 스크립트 수는 증가합니다.스크립트를 잘 관리하여 활용도를 높이고 스크립트 간의 lineage를 파악할 수 있도록 정리합니다.➞ 무작정 마트 만들지 말기, 활용성 높은 마트 만들기 위해 고민하기 sys.dm_sql_referencing_entities / sys.dm_sql_referenced_entities 위의 함수를 사용하여 스크립트에서 참조되는 테이블 목록을 확인할 수 있습니다.DB 전체의 스크립트를 파악하기 위하여 동적 쿼리와 커서문을 사용하여 데이터를 생성하였습니다. -- 1. DB의 View, SP 목록을 담을 테이블 생성 drop table if exists #tb_list create table #t..

티스토리툴바