JHB의 삽질 이야기

프로젝트를 진행하는데, @Entity를 만들고 빌드해서 실행하는데아무리 해도 계속해서 org.springframework.beans.factory.BeanCreationException: Error creating bean with name 'AppleRepository': Invocation of init method failed: nested exception is java.lang.illegalArgumentException: Not an managed type: class foo.bar라면서 진행이 안되었다.도대체 뭐가 문제일까 하고 수 없이 수정과 빌드를 반복했는데,,,,,persistence.xml 에 Entity를 등록하지 않은 것이 문제 였다.회사에 Spring Legacy (Spring ..

https://www.youtube.com/watch?v=CDHddqLVAlI 주사기로 석션하면 된다.

https://medium.com/@kurtlee/serverless%EB%A1%9C-e-commerce-%EB%A7%8C%EB%93%A4%EA%B8%B0-%EB%B8%94%EB%9E%99%ED%94%84%EB%9D%BC%EC%9D%B4%EB%8D%B0%EC%9D%B4-%ED%8A%B8%EB%9E%98%ED%94%BD-%EC%8D%B0-%EC%8A%A4%ED%83%80%ED%8A%B8%EC%97%85%EC%97%90%EC%84%9C-cto%EB%8A%94-%EB%AD%98-%ED%95%98%EB%8A%94-%EC%9E%90%EB%A6%AC%EC%9D%B8%EA%B0%80-a6f9d9beb930 Serverless로 E-Commerce 만들기 / 블랙프라이데이 트래픽 썰 / 스타트업에서 CTO는 뭘 하는 ..

도대체 뭐가 문제인지 갈팡질팡 하다가 AWS RDS 성능개선 도우미를 확인해보니 상위SQL(AAS별 상황)에 나오는 쿼리가 있는데 INSERT 쿼리와 SET NAMES 쿼리가 있었다. 이걸 어떻게 개선을 해야하나 싶었는데 이게 답이 아니었다. (나는 여기에 slowquery가 나올 거라고 착각했다.) slowquery 기능 켜고나서 로그를 보니 특정 쿼리가 30초씩 점유하고 있는 것이 아닌가.. 당장 select에 사용하는 field에 인덱스를 걸었다. 그랬더니 한방에 해결.. 느려지면 무조건 slowquery 먼저 보자.

https://www.slideshare.net/awskorea/learn-how-to-model-and-operate-a-serverlessbased-database 서버리스 기반 데이터베이스 모델링 및 운영 노하우 알아보기 - 변규현 SW 엔지니어, 당근마켓 / 서버리스 기반 서비스를 위한 다양한 데이터베이스 선택 옵션이 있습니다. 본 세션에서는 RDB 및 NoSQL 측면에서 서버리스 DB 활용 전략을 살펴봅니다. RDB에서 서버리스를 위한 데이터 모델링 및 www.slideshare.net 이 ppt 맘에 든다.

shell script를 짜면서 aws cli 명령을 사용 할 때가 있는데 aws cli v2의 경우 명령 실행 결과에 대한 출력이 새 창 (Page)로 나오는 덕에 가끔씩 프롬프트 출력 결과들이 꼬일 때가 있다. 이를 해결 하는 방법은, 명령어 입력시 뒤에 --no-cli-pager 를 붙이는 것이다. 예를 들어 aws iam list-users 명령의 경우 aws iam list-users --no-cli-pager 로 할 경우 새 창이 뜨지 않고 명령어 결과가 동일한 터미널에 출력된다.

현재 M1 실리콘 (ARM) 사용 중이고, 여기에 ubuntu docker를 돌려서 remote container로 node를 개발 중에 있다. 근데 얼마전 까지 잘 되던게, 특히 npm install -g 하면 계속 해서 permission denied 에러가 난다. EACCESS: permission denied npm ERR! spawn ENOENT npm ERR! code ELIFECYCLE sh: 1: node: Permission denied 등등 package-lock.json과 node_modules 디렉토리를 지우고 아무리 다시 시도해도 계속해서 이런류의 에러가 발생한다. 아니 나는 docker로 돌리고 있고 user는 당연히 sudo (root) 인데 왜 자꾸 permission den..

한 5년전까지만 해도 빅데이터와 머신러닝(AI)는 크게 비지니스에 영향을 끼치지 못했다. 빅데이터 플랫폼을 구성하기 위한 기술적 난이도(직접 온프렘에 하둡 클러스터 구성)가 너무 어려웠고 인프라 비용도 어마어마했다. 결국 비지니스적으로 ROI가 나오지 않았었다. 머신러닝 역시 마찬가지였다. 정확도가 90%가 넘는다 하더라도 99%가 되지 않으면 산업에서 사용 할 수 없지 않을까? 하고 생각했었으며 머신러닝에 드는 수 많은 인프라를 어떻게 구성해야하는지 (그래픽카드가 너무나 비싸고, 병렬 학습은 어렵다) 여간 쉬운게 아니었다. 의도한건지 의도하지 않은건지, 4차 산업 혁명에서 부르는 기술들의 인프라에 대한 문제는 클라우드가 뜨면서 해결되게 되었고 빅데이터와 머신 러닝 모두 이제 학계가 아니라 업계에서 날라..