Lab | 구분 | URL |
---|---|---|
Lab0 | 사전작업 | http://awsdemo.kr/bigdata/hol/Lab0.pdf |
Lab1 | Kinesis | http://awsdemo.kr/bigdata/hol/Lab1.pdf |
Lab2 | Glue, Athena, QuickSight | http://awsdemo.kr/bigdata/hol/Lab2.pdf |
Lab3 | EMR | http://awsdem.kr/bigdata/hol/Lab3.pdf |
Lab4 | Redshift | http://awsdemo.kr/bigdata/hol/Lab4.pdf |
ImportError: cannot import name AliasedEventEmitter |
해결 방법
sudo yum downgrade aws-cli.noarch python27-botocore |
Page7. 5번에서 Security Group은 Default로 설정합니다. AWS 관리콘솔의 Redshift에서 제공하는 Query Editor를 사용하기 때문에 별도의 지정을 할 필요가 없습니다. (이해를 돕는 용도) Page9. PDF에서 코드 가져올 때, 에러 발생 할 수 있어서 제공
Page12. PDF에소 코드 가져올 때, 에러 발생할 수 있어서 제공
Page15. 오타 두 번째 쿼리가 더 빠르게 실행되는 것을 확인합니다. 이는 Amazon S3에서 읽는 데이터가 더 적기 때문 입니다. 데이터 볼륨이 클수록 실행 속도의 차이가 더 분명해 집니다. (다만 본 예제와 같이 데이터량이 작은 경우 그 차이는 미비합니다.) 또한, Amazon S3에서 읽는 데이터 양에 따라 Redshift Spectrum에 대 한 요금이 부과되므로, 쿼리 실행 비용도 줄어듭니다 |
AWS CLI command
|
Kinesis Agent를 이용해서 Data firehose로 데이터 전송
https://docs.aws.amazon.com/ko_kr/firehose/latest/dev/writing-with-agents.html
|