Tag: Spark
All the articles with the tag "Spark".
-
Kafka S3 Sink Connector Small Files 문제 (1/2): schema.compatibility 설정이 원인
10 min readKafka S3 Sink Connector의 schema.compatibility=NONE 기본값이 수십만 개의 Small Files를 만든 원인과 BACKWARD 설정으로 해결하는 방법을 공유합니다.