티스토리 뷰

공부

[glue] crawler (load s3)

승가비 2023. 2. 16. 00:59
728x90

https://inpa.tistory.com/entry/AWS-%F0%9F%93%9A-Glue-Crawler%EB%A1%9C-%ED%85%8C%EC%9D%B4%EB%B8%94-%EB%A7%8C%EB%93%A4%EA%B3%A0-Athena%EB%A1%9C-%EC%A1%B0%ED%9A%8C%ED%95%98%EA%B8%B0

 

[AWS] 📚 Glue Crawler로 테이블 만들고 Athena로 조회하기

Glue Crawler로 S3 스키마 생성 지난 포스팅에서는 csv파일을 S3에 업로드하고 Athena에서 직접 테이블 쿼리문을 실행하여 수동으로 만들어 조회하는 시간을 가져보았다. 이번에는 AWS Glue 서비스가 제

inpa.tistory.com

https://docs.aws.amazon.com/ko_kr/glue/latest/dg/table-properties-crawler.html

 

크롤러가 데이터 카탈로그 테이블에 설정한 파라미터 - AWS Glue

크롤러가 데이터 카탈로그 테이블에 설정한 파라미터 이러한 테이블 속성은 AWS Glue 크롤러가 설정합니다. 사용자가classification 및 compressionType 속성을 소비할 것으로 기대합니다. 테이블 크기 추

docs.aws.amazon.com

 

728x90
저작자표시 비영리

'공부' 카테고리의 다른 글

[zeppelin] add interpreter  (0) 2023.02.17
[yarn] cost tool `migration-hadoop-to-emr-tco-simulator`  (0) 2023.02.16
[yarn] yarn.resourcemanager.am.max-attempts=1  (0) 2023.02.16
[sh] while loop (sub shell) not assign global variables -> for in loop  (0) 2023.02.16
[kotlin] instanceOf list (is List<*>)  (0) 2023.02.14
댓글