JHB의 삽질 이야기

CDK에서 원하는 배포 환경으로 배포하기 위해 나는 ID를 바꾸는 Practice를 가장 많이 쓴다. https://jhb.kr/419 [CDK] 배포 환경에 따라 다른 스택으로 배포하기 CDK로 스택을 배포 할 때 Dev / Test / Prod 등의 환경으로 배포 하기 위해 여러가지 방법이 있다. 여러 가지 방법 중 핵심이 되는 것은 결국 '스택의 아이디를 배포 환경에 맞추어 바꾸어 준다'는 것이 jhb.kr 그러면 Service와 CI/CD에 대한 스택은 어떻게 구성하는게 좋을까? 처음에 나는 서비스 생성 자체는 ecs_patterns.ApplicationLoadBalancedFargateService 를 사용하였고, 이를 ServiceStack${env}이라 두고, 이를 관리하는 CI/CD를 Se..

Private Subnet에 배포된 EC2 인스턴스가 S3에 Gateway Endpoint를 통해 연결해야 하는 요구 사항을 처리해야 했다. 당연히 인터넷 망을 타면 안되는 상황이었다. 그리고 당연히 S3의 기본 정책은 Block Public Access On 인 상태. AWS SDK에서 제공하는 s3의 GetObject API를 사용하는건 전혀 문제가 되지 않았다. AWS SDK에서 접근 하는 것은 EC2의 InstanceRole Credential 정보를 담고 나가기 때문이다. 문제는, AWS SDK 없이 curl, wget, ffmpeg 등이 standalone application을 통해 S3의 주소로 접근 하려 할 때 문제가 발생했다. 일단, S3 주소는 크게 아래의 두가지가 존재한다. s3.a..

우선 태깅 돼있지 않은 14000개의 리소스에 TAG를 다는 과정을 소개한 VROONG의 기술 블로그 mesh.dev/20210217-dev-notes-003-aws-tag-01/ AWS Tag 적용 가이드와 활용 - 1부 :: Mesh Korea Makers Blog 안녕하세요! 메쉬코리아 플랫폼실에서 DevOps를 담당하고 있는 백수현입니다. 이번에 AWS Tag 적용 가이드와 활용 방안에 대해 공유해 드리고자 글을 작성하게 되었습니다. 여러분은 Tagging… mesh.dev 매우 유용하다. 특히 비용을 절감하는데 유용했다고 한다. Config와 Lambda를 통해 TAG Resource를 분석하고 Tagging 하는 부분이 인상적. 이제 어떻게 TAG를 다는 것이 좋을까? www.cloudfore..

IoT에서 사용하는 MQTT의 QoS 0이건 1이건 2이건.. Kafka의 No guarantee건 At most once건 At least once 건.. 누락과 중복 문제는 어쩔 수 없이 발생한다. Kafka에서는 Exactly Once를 사용해서 처리 할 수 있다. medium.com/techwasti/idempotent-kafka-consumer-442f9aec991e Idempotent Kafka Consumer In the last couple of articles, we have seen how Kafka guarantees message processing, as part of this we saw idempotent Kafka producers… medium.com 외에는, 잃는 것 보단..

medium.com/harrythegreat/aws-%EC%84%9C%EB%B2%84%EB%A6%AC%EC%8A%A4%EB%A5%BC-%EC%9C%84%ED%95%9C-rds-proxy%EC%84%9C%EB%B9%84%EC%8A%A4-fb5815b83cce [AWS] 서버리스를 위한 RDS Proxy서비스 RDS Proxy 2019년 12월 3일에 발표된 신규 AWS 서비스입니다. RDS Proxy란 관계형 데이터베이스에서 커넥션(Connection) 연결을 효율적으로 관리해주는 서비스입니다. 일반적으로 AWS Lambda 서비스를 사용한 medium.com Serverless 서비스인 Lambda에서 RDS를 사용하려 하면 connection이 문제가 된다. 매번 connection을 맺고 끊기에는 속..