굿바이 엘라스틱

Today I Learned 날짜 2024년 9월 30일 월요일 내용 굿바이 엘라스틱 알파플러스는 에러 추적을 위해 그동안 Elastic apm을 사용하고 있었다. 이 서비스가 상당히 고가라는 제보를 받고 확인했더니 무려 매달 89달러였다! 로그가 많이 쌓여 비싼줄 알았는데, 1년 전부터 계속 이정도의 가격이었다. 새로 개발한 서비스들에 도입한 sentry는 달에 29달러기 떄문에 후딱 바꿔주었다. 바꾼 후 단점이라면, 현재로선 에러가 발생했을 때, 변수값들을 확인할 수 가없다. 찾아보니 stack trace에서 local varialbe을 추적할 수 있다곤 하는데… 설정법이 마냥 쉽지는 않다. 저번 데이터독 세션때부터 느꼈는데 이런 서비스들은 알면 알수록 유용하게 쓸 수 있는 반면, 모르면 돈 낭비가 따로 없다. ...

2024년 9월 30일 · 1 분 · 배준수

N+1 Query 문제

Today I Learned 날짜 2024년 9월 27일 금요일 내용 joinedload 는 earger loading이다. 최근 새 서비스를 개발하면서, 써보고 싶은 코드를 써보고 있다. 그 중 자주 쓰는게 현재 hybrid property다. 연관된 테이블이 있는지를 나타내기 위해 쓰고 있다. 예를 들어, 각 스토어가 연결한 인스타그램 계정을 나타내기 위해 다음과 같이 해놨다. 1 코드 비공개 이런 식으로 데이터베이스 구조가 짜여 있다. 스토어를 가져와서 그 스토어가 연결된 인스타그램 계정이 있는지 확인해보려면 다음과 같이 써야한다. ...

2024년 9월 27일 · 2 분 · 배준수

요청의 성능 높이기

Today I Learned 날짜 2024년 9월 26일 목요일 내용 불필요한 요청 없애기 인스타그램 피드 QA를 진행중이다. 위젯 관련된 세팅 요청이 시간이 꽤나 걸린다. 구체적으로는, 인스타그램에서 가져온 게시글과 상품의 연결을 끊는 부분에서 오래걸린다(그외 다른 것들도 꽤 걸린다). 원인은 앱 메타필드에 있다. 기존 알파플러스에서는 스토어에 접속한 클라이언트가 위젯 렌더링을 서버에 요청하는 방식을 사용했다. 이젠 Shopify의 앱 메타필드를 이용해서, 데이터 까지 모두 렌더링된 HTML, CSS, JAVASCRIPT 파일을 집어넣어놨다. 따라서, 위젯과 관련된 모든 값이 앱 메타필드에 업로드되야 하는데 이게 시간을 꽤나 잡아먹는다. 그래서 유저가 상품 연결을 해제하면 응답하여 반영되는 것까지 시간이 2.5초 정도 소요된다.. ...

2024년 9월 26일 · 1 분 · 배준수

무의미한 Import 에러 해결하기

Today I Learned 날짜 2024년 9월 25일 수요일 내용 Import 에러 박멸 대작전 예전부터 상당히 맘에 안드는 게 있었다. 바로 import 문 에러(pylint E0401 에러) 동작에 전혀 이상이 없다… 하지만 단점이 있는데, 실제로 import 에러가 나더라도 난 확인할 수 없다.. 서버를 돌려봐야만 알 수있다.. 보기에 상당히 불편하기 때문에 이를 바로잡고자 했다. 찾아보니 파이썬 interpreter 의 문제라고 한다. 파이썬이 여러가지 버전이 깔려있는데 (3.10, 3.12) 적절한걸로 못골라줘서 생기는 문제란다. 내가 다루는 3가지 서비스는 파이썬 버전이 다르다.. 가상환경 venv를 설정해주고 liib 폴더의 패키지 내의 파이썬을 interpreter로 지정해주니 깔끔하게 해결됐다. ...

2024년 9월 25일 · 1 분 · 배준수

부정확한 데이터의 원인

Today I Learned 날짜 2024년 9월 24일 화요일 내용 데이터가 부정확한 이유 아임리포트의 결과물에서 데이터가 부정확하다. 어떤 규칙성이 존재하지 않은채, 중구 난방으로 틀려서 어딘지 감조차 안온다. 어떤 달은 데이터가 정확하기도 하다.. 우선 특정 광고그룹의 데이터가 누락되는 문제부터 손봤다. 계정 내의 캠페인, 그 캠페인에 포함되는 광고그룹들, 그 광고그룹 내에 포함되는 키워드들은 데이터베이스에 저장된다. 특정 유형의 광고그룹이 스프레드시트에 누락되었고, 데이터베이스를 확인해보니 데이터베이스 상에서도 없었다. 그 광고그룹들의 상위 캠페인은 포함되어 있었다. 비교적 최근 생성된 광고그룹이라서 누락된 문제인가? 싶어 다시 데이터를 날리고 추가해봤다. 그래도 여전히 같은 상황이다. 이 광고그룹들은 네이버에는 존재하지만 내 데이터베이스에는 저장되지 않는다. ...

2024년 9월 24일 · 1 분 · 배준수

datetime 형식 오류

Today I Laerned 날짜 2024년 9월 23일 월요일 내용 나는 메타를 많이 혐오하는 개발자다. 메타의 앱 인증은 정말 인간미가 넘친다. 벌써 20번째가 훌쩍 넘어가버렸다. 그 중 절반은 의미 없는 요청이었다. 왜냐하면, 2번에 1번꼴로 “너 그 권한이 필요 없어보여” 라고 대답해 주기 때문이다. 어제의 너는 나에게 그 권한의 필요성이 타당하다고 했단다… 요즘은 자꾸 내가 제공해준 테스트용 계정 비밀번호가 틀렸다고 한다. 내가 이상한가 싶어 다른사람에게 부탁해도 잘 되는 로그인을 왜 너는 못하니… test123! 를 치는게 그렇게 어려운거니? ...

2024년 9월 23일 · 1 분 · 배준수

Shopify 딥 링크

Today I Learned 날짜 2024년 9월 20일 금요일 내용 딥링크 생성 인스타그램 피드 설정을 완료한 유저가 버튼을 누르면 자동으로 위젯이 추가되는 기능을 만들어야 한다. 그래서 난 테마에서 index.json을 가져와 필요한 걸 추가해주면 되지 않나? 생각했다. 실제로 관련된 shopify docs도 있고.. 아무리 해봐도 업데이트하는 put 요청이 Not Found를 반환한다. 관련된 문제를 찾아보니 나만 겪은 문제가 아닌 듯한데, 모든 질문이 작년 2분기 쯤에 몰려있다. 알아본 결과, 테마는 스토어 주인이 권한을 가져야 하기 때문에 앱이 직접 접근해서 수정하지는 못하도록 막혔다고 한다. 특히 json 파일들은.. 그럼 안되는 건데 다른 앱들은 어떻게 한거지? 싶어 이 기능이 있는 다른 앱을 실행해봤다. 자동으로 추가하는게 아니라, 테마 편집기에 추가된 상태로 이동시켜주는 기능이었다. 저장버튼만 누르면 자동으로 반영되도록… ...

2024년 9월 20일 · 1 분 · 배준수

EC2 무한 스크립트 초기화 문제

Today I Learned 날짜 2024년 9월 19일 목요일 내용 건방지지만 좋은 친구 인스타그램 관련된 쇼피파이 앱을 새로 생성했다. 임베디드 앱으로 만들었기 떄문에, 샵이 앱을 다운로드 받은 직후 세션토큰을 검증해주어야 한다. 기존에 다 구현해봤던 로직이라, 과거에 썼던 걸 그대로 가져와 썼다. 근데 토큰이 자꾸 잘못되었다고 뜬다. 분명 Shopify Docs에서 설명한 그대로 했는데… 마지막 원본 서명과 비교할 때 자꾸 다른 값이 뜬다.. GPT한테 물어봐도 제대로 된 해결책을 내놓지 않는 와중에, GPT가 내게 물어왔다. ...

2024년 9월 19일 · 3 분 · 배준수

ECS 컨테이너가 아무 이유없이 종료될 때

Today I Learned 날짜 2024년 9월 13일 금요일 내용 ECS 컨테이너가 종료되는 이유 ECS 테스크가 자꾸 종료된다. 내부 로직에선 전혀 이상하지 않은데… 몇일 전에 해결된줄 알았더니 작동하고 안하고가 반복된다. 물론 안하는 경우가 훨씬 많지만.. 내부 코드에는 문제가 없다고 판단해서 AWS를 열심히 찾아봤다. ECS에서 컨테이너가 작동해 태스크가 추가되면, 그 태스크의 IP가 로드밸런서가 향하는 대상그룹에 등록된다. 그리고 그 컨테이너가 제대로 통신할 수 있는지 확인하게 된다. 여기서 방금 실행된 컨테이너 IP가 Target is in an Availability Zone that is not enabled for the load balancer ...

2024년 9월 13일 · 1 분 · 배준수

테이블명을 잘 지어야 하는 이유

Today I Learned 날짜 2024년 9월 12일 목요일 내용 이름을 처음부터 잘 짓기 기존 인스타그램 코멘트의 기능을 떼오고, 새로 개발한 기능을 합쳐 새로운 서비스를 만들고 있다. 만들면서 계속 느끼는건, 처음 지을때 이름을 잘짓는 거다. 예를 들어 인스타그램에서 가져온 게시글을 저장하는 테이블은 최초에 InstagramCommentMedia 라고 지었다. 근데 두 서비스를 Instagram Comment와 Instagram Feed라는 이름을 가지긴 했지만, 변수명으로 사용하기엔 부적절하지 않나 생각이 들었다. 결국 인스타그램 코멘트는 인스타그램 비즈니스 계정과 연관된 서비스고, 인스타그램 피드는 인스타그램 일반 계정과 연관된 서비스니까. 서버쪽에선 이 뉘앙스를 풍기는게 유지보수에 유리할거라 생각했다. 그래서 InstagramBusinessAccountMedia라고 지었다. 인스타그램 비즈니스 계정에 속한 미디어라는 의미다. ...

2024년 9월 12일 · 2 분 · 배준수