Apache Spark 3.2용 Azure Synapse Runtime(사용되지 않음)
Azure Synapse Analytics는 Apache Spark에 다양한 런타임을 지원합니다. 이 문서에서는 Apache Spark 3.2용 Azure Synapse Runtime에 대한 런타임 구성 요소 및 버전을 다룹니다.
주의
Apache Spark 3.2용 Azure Synapse Runtime에 대한 사용 중단 및 사용 안 함 알림
- 2023년 7월 8일 Apache Spark 3.2용 Azure Synapse 런타임에 대한 지원 종료가 발표되었습니다. Apache Spark 수명 주기 정책에 대한 Synapse 런타임에 따라 Apache Spark 3.2용 Azure Synapse 런타임은 2024년 7월 8일부터 사용 중지됩니다. 기존 워크플로는 계속 실행되지만 보안 업데이트 및 버그 수정은 더 이상 사용할 수 없습니다. 메타데이터는 일시적으로 Synapse 작업 영역에 유지됩니다.
- 2024년 7월 8일부터 Azure Synapse는 Spark 3.2 런타임에 대한 공식 지원을 중단했습니다. 그러나 여러 고객으로부터 받은 요청에 따라 이 런타임의 사용량을 2024년 10월 31일까지 연장했으며, 그 후 곧 작업 비활성화가 시작됩니다.
- Apache Spark 3.2 워크로드를 Apache Spark 3.4용 Azure Synapse Runtime으로 업그레이드하는 것이 좋습니다.
- 최신 정보, 자세한 변경 내용 목록 및 Spark 런타임에 대한 특정 릴리스 정보는 Spark 런타임 릴리스 및 업데이트를 확인하고 구독 합니다.
구성 요소 버전
| 구성 요소 | 버전 |
|---|---|
| Apache Spark | 3.2.1 |
| 운영 체제 | Ubuntu 18.04 |
| Java | 1.8.0_282 |
| Scala | 2.12.15 |
| Hadoop | 3.3.1 |
| .NET Core | 3.1 |
| .NET | 2.0.0 |
| Delta Lake | 1.2 |
| Python | 3.8 |
| R(미리 보기) | 4.2 |
Synapse-Python38-CPU.yml에는 Azure Synapse Spark의 기본 Python 3.8 환경에서 제공되는 라이브러리 목록이 포함되어 있습니다.
라이브러리
Java/Scala용 Apache Spark 3.2용 Azure Synapse Runtime에 포함된 라이브러리를 확인하려면 Python 및 R에서 Apache Spark 3.2 릴리스 정보용 Azure Synapse Runtime으로 이동합니다 .
다음 단계
Apache Spark 버전 간 마이그레이션 - 지원
이전 런타임 버전에서 Apache Spark 3.3 또는 3.4용 Azure Synapse 런타임으로 마이그레이션하는 방법에 대한 지침은 Apache Spark용 런타임 개요를 참조하세요.