Azure Data Factory(ADF) self-hosted setting + node 구성

0. 개요

1. VNET 설정

• 서브넷 분리(내부/외부)하여 생성

2. VM, DataFactory 생성

• Jump Server VM : 외부에서 접속할 윈도우 VM
• Self-hosted Server VM : IntegrationRuntime 이 설치될 내부 윈도우 VM
• DataFactory - Private Endpoint network 설정

3. DataFactory

• Azure Data Factory Studio → 관리 → 통합런타임 → 새로만들기 → Azure, 자체 호스팅 → 자체 호스팅 → 생성

4. private end point 설정

• selfhosted ↔ datafactory 간 연결을 위한 private end point 생성.

→ 가상 네트워크, 서브넷(private), dns 설정 주의

5. Microsoft Integration Runtime

• Microsoft Integration Runtime 설치 후 위의 Key 입력

6. DataFatory 노드 확인

7. node 추가

※ "인트라넷에서 원격 엑세스"가 가능해야 함.

※ vm 의 hostname이 노드의 이름이 되고, text limit가 있어서 주의 필요.

• 신규 VM에서 똑같은 프로세스를 진행

7. 통합 런타임을 통해 연결

• 데이터 세트 생성 시 "통합된 런타임을 통해 연결" 항목에서 생성한 IR을 선택하여야 함