기본 콘텐츠로 건너뛰기

python에서 AWS - SQS service 사용하기

aws - sqs

SQS

SQS(Simple Queue Service)란? 확장 가능한 완전관리형 메시지 대기열 서비스입니다.
특정 서버가 이벤트 발생에 따라 다른서버에게 특정 작업을 요청할 때 사용하기 좋은 서비스이다.

setting 방법

  • aws-cli install
    1. windows(32bit, 64bit에 맞추어 설치를 필요합니다.)
      https://aws.amazon.com/ko/cli/
    2. linux, mac (python 2.6.5이상의 버전이 필요합니다.)
      pip install aws-cli
  • configure
    1. windows
      aws가 설치된 경로로 이동하여 aws configure 명령어를 실행 시켜준다.
      (필자의 컴퓨터에서는 C:\Program Files\Amazon\AWSCLI 해당경로로 이동하여 실행을 시켜주었다.)
    2. linux, max
      어느 경로에서나 aws configure 명령어를 실행시켜 준다.
    aws configure명령어를 실행을 시켜주면 accessKeyId, secretAccessKey, region를 입력하라고 순차적으로 뜬다.

python SQS 사용하기

  1. 모듈설치
    python에서는 boto3를 통해 aws 서비스를 이용할 수 있다.
    pip install boto3
  2. 모듈추가
    boto3 모듈을 불러와서 sqs 서비스를 널어주자
    import boto3
     
    sqs = boto3.resource('sqs')
  3. aws sqs접속
    Create New Queue를 눌러서 큐르 추가를 해준다.
  1. python 큐 추가
    import boto3
     
    sqs = boto3.resource('sqs')
    queue = sqs.get_queue_by_name(QueueName="ExampleQueue")
    while 1:
        for message in queue.receive_messages():
            print "success"message
    while loop를 돌면서 queue에서 메시지를 가져온다.
    이때 큐에 메세지가 등록되었으면 for loop를 실행을 하게된다.
    실행이 완료되면
    queue.delete()
    를 실행을 시켜서 queue를 비워준다.

댓글

이 블로그의 인기 게시물

[git] pull을 하여 최신코드를 내려받자

보면 먼가 로고가 다르게 뜨는것을 확인을 할 수가있다. C:\Users\mung\Desktop\etc\study\python-gene>git checkout remotes/origin/master Note: checking out 'remotes/origin/master'. You are in 'detached HEAD' state. You can look around, make experimental changes and commit them, and you can discard any commits you make in this state without impacting any branches by performing another checkout. If you want to create a new branch to retain commits you create, you may do so (now or later) by using -b with the checkout command again. Example:   git checkout -b HEAD is now at 29e282a... fetch test C:\Users\mung\Desktop\etc\study\python-gene>git branch * (HEAD detached at origin/master)   master   test1   test2 깃이 잘 쓰면 참 좋은놈인데 어지간히 쓰기가 까다롭다. 처음에 깃을 푸시 성공하는데만 한달정도 걸렸던걸로 기억이 난다.. ㅋㅋㅋ 여담으로  깃 프로필을 가면 아래사진 처럼 보인다. 기여도에 따라서 초록색으로 작은 박스가 채워지는데 저걸 잔디라고 표현을 한다고 합니다 ㅎ 저 사진은 제 깃 기여도 사진입니당 ㅋㅋㅋㅋ 다시 본론으로 돌아와서 ㅋㅋ pull을 하면...

[kali linux] sqlmap - post요청 injection 시도

아래 내용은 직접 테스트 서버를 구축하여 테스트 함을 알립니다.  실 서버에 사용하여 얻는 불이익에는 책임을 지지 않음을 알립니다. sqlmap을 이용하여 get요청이 아닌 post요청에 대해서 injection공격을 시도하자. 뚀한 다양한 플래그를 이용하여 DB 취약점 테스트를 진행을 해보려고 한다. 서버  OS : windows 7 64bit Web server : X Server engine : node.js Framework : expresss Use modules : mysql Address : 172.30.1.30 Open port : 6000번 공격자 OS : kali linux 64bit use tools : sqlmap Address : 172.30.1.57 우선 서버측 부터  1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 var  express  =  require( 'express' ); var  app  =  express(); var  mysql  =  require( 'mysql' ); var  ccc  =  mysql.createConnection({     host: '127.0.0.1' ,     user: 'root' ,     pos...

[node.js] 파일 리더기 만들기 - 사용 모듈 정리, pdf 구조, hwp 구조

pdf -> html 변환 가장 무난하다. 기본적으로 pdf는 htm와 비슷한 형태의 구조를 가지고 있다. 크게 header , body , xref table , trailer 의 구조로 되어있다. pdf는 환경에 상관없이 표현을 하기 위한 목적을 가지고 있는 파일이다. 이런 이유 때문에 무난히 진행이 된 것 같다. pdf2htmlex와 pdftohtmljs라는 모듈을 이용을 했다. var pdftohtml = require ( 'pdftohtmljs' ) ; var converter = new pdftohtml ( 'test.pdf' , "sample.html" ) ; converter . convert ( 'ipad' ) . then ( function ( ) { console . log ( "Success" ) ; } ) . catch ( function ( err ) { console . error ( "Conversion error: " + err ) ; } ) ; 이미지나, text같은 것들이 거의 100%로 변환이 된다. docx -> html 변환 docx파일을 html파일로 변환을 할 때는 style 적용과 한글이 깨지는 문제가 있다. 텍스트들을 전부 잘 읽기는 하는데 스타일 정보를 제대로 가져오지 못하기 때문에 좀 애매하다 - Headings. - Lists. - Customisable mapping from your own docx styles to HTML. For instance, you could convert WarningHeading to h1.warning by providing an appropriate style ...