[CLOUD] AWS S3 에서 특정 기간이 이전 파일 자동 삭제하기 (S3 파일 삭제 스크립트)

1. 오늘은 지난 시간의 '시스템에 있는 특정 파일(디렉토리)를 S3로 자동으로 백업 하는 방법' 에 이어서, S3 에 저장되어 있는 파일인데, 특정 시간이 지난 파일을 찾아서 자동으로 삭제하는 스크립트를 만들어 볼게. 시스템에 있는 특정 파일(디렉토리)를 S3로 자동으로 백업 하는 방법은 이전의 게시물을 확인 해줘. https://uncools.tistory.com/12 [CLOUD] 시스템의 특정 디렉토리를 S3로 자동 백업하기 (s3 백업 스크립트) 1. Amazon S3 Amazon S3(Amazon Simple Storage Service)는 업계 최고의 확장성과 데이터 가용성 및 보안과 성능을 제공하는 객체 스토리지 서비스이다. 즉, 어떤 규모 어떤 사업의 고객이든 이 서비스를 사용하 unco..

• format_list_bulleted 클라우드
• · 2023. 6. 27.
• textsms

[CLOUD] aws cli s3 외부 아웃바운드 통신 허용 목록

S3 로 뭔가를 하는 작업을 만들었고, 그에 따른 유지 관리를 해야 하는데, 서버가 보안 정책들에 의하여 외부로의 통신이 차단 되어 있어 외부와 통신이 잘 되지 않을 수 있어. 이 경우 원할한 작업을 이루어 지기 위해 서버 to 외부 인터넷으로 아웃 바운드 연결을 허용 해 주어야 해 방화벽들에 의해 아웃 바운드가 차단되어 있다면, 아래와 같이 추가 해주면 돼. 다음과 같은 작업의 상황을 가정하였을때, 방화벽에 허용을 해주어야 하는 목록을 참고해줘. python 으로 작업을 하는 스크립트를 작성 했어. 유지보수를 위해 파이썬 패키지를 설치 해야 해. pip ) 스크립트의 작업의 결과는 S3 로 저장도 해야 해. ( S3 로 복사등 ) 최종 결과는 슬랙의 Webhook 으로 구현 하여 메시지를 수신하고 싶어..

• format_list_bulleted 클라우드
• · 2023. 6. 21.
• textsms

[CLOUD] aws cli s3 명령어 모음

1. 파일 목록 조회 전체 조회 - 하위 디렉토리 포함 조회 하는 방법 --human-readable 을 추가하면 각 파일의 용량을 읽기 편하게 표시 해줌 # /usr/local/bin/aws s3 ls s3://your-bucket --recursive --human-readable 2023-06-19 09:02:34 191.8 MiB 20230619/backup.tar.gz 2023-06-18 09:02:03 746.9 MiB 20230618/backup.tar.gz 2023-06-17 09:02:16 333.9 MiB 20230617/backup.tar.gz 특정 확장자만 조회 - .tar.gz # /usr/local/bin/aws s3 ls s3://your-bucket --recursive | ..

• format_list_bulleted 클라우드
• · 2023. 6. 19.
• textsms

[CLOUD] 시스템의 특정 디렉토리를 S3로 자동 백업하기 (s3 백업 스크립트)

1. Amazon S3 Amazon S3(Amazon Simple Storage Service)는 업계 최고의 확장성과 데이터 가용성 및 보안과 성능을 제공하는 객체 스토리지 서비스야 즉, 어떤 규모 어떤 사업의 고객이든 이 서비스를 사용하여 웹 사이트, 모바일 애플리케이션, 백업 및 복원, 아카이브, 엔터프라이즈 애플리케이션, IoT 디바이스, 빅데이터 분석 등과 같은 다양한 사용 사례에서 원하는 만큼의 데이터를 저장하고 보호할 수 있어 2. 동기 부여 python 을 사용하여 시스템의 특정 디렉토리를 S3로 자동 백업 하는 스크립트를 만들어 볼게. 특별한 이유는 없고. aws cli 명령어로만 줄곧 사용하다가, 느닷 없이 boto3 를 사용해서 python 으로 만들어 보는 것도 좋을 것 같아. 깃 ..

• format_list_bulleted 클라우드
• · 2023. 6. 16.
• textsms

[CLOUD] aws cli 설치와 테스트

1. AWS CLI 패키지 다운로드 최신 버전의 aws cli 패키지를 다운로드 하고 설치 합니다. 타 OS에 대한 설치 방법은 (최신 버전의 AWS CLI 설치 또는 업데이트) 를 참고 합니다. [root@localhost:/home/aws]# curl "" -o "awscliv2.zip" 2.다운로드 받은 패키지 파일 압축 해제 unzip 패키지를 이용하여 압축을 해제 합니다. [root@localhost:/home/aws]# unzip awscliv2.zip 3.Install 커맨드를 이용하여 패키지 설치 aws cli install [root@localhost:/home/aws]# ./aws/install 설치 후 /usr/local/bin 에 aws 커맨드의 바로가기 가 생성됩니다. [root@..

• format_list_bulleted 클라우드
• · 2023. 6. 10.
• textsms