$ ls -lt posts/backend/
backend_
49 posts in backend.
-
CodeBuild에서 사설 인증서 레지스트리(insecure registry)로 이미지 push하기
x509: certificate signed by unknown authority 에러가 나는 Harbor 같은 사설 레지스트리에, CodeBuild 권한 모드와 daemon.json insecure-registries 설정으로 이미지를 push한 과정을 정리했다.
[backend] -
docker compose volume
컨테이너가 종료되어도 유지할 데이터 위치를 설정할 수 있다.
[backend] -
Docker --env-file 따옴표 문제 해결하기 (.env dotenv 차이)
env 파일 처리 중 로컬과 도커 이미지 컨테이너의 env 파일 처리 방식이 달라 오류가 발생했다.
[backend] -
k6를 이용한 라이브 스트리밍 플레이어 테스트 기록
k6로 실제 브라우저 시청자를 여러 명 띄워 라이브 스트리밍 플레이어를 장시간 재생 테스트한 기록. 설치부터 browser 시나리오 작성, k6 cloud 실행까지 정리했다.
[backend] -
Node.js libuv 알아보기
libuv는 Node.js에 포함되어 있는 C로 작성된 크로스 플랫폼 저수준 라이브러리이다. 개발자가 이를 직접 쓸 일은 없고 Node의 내부 엔진이 사용한다. libuv를 한 문장으로 표현하면, 'OS마다 다른 비동기 I/O 방식을 하나의 공통 인터페이스로 감싸 제공하는 라이브러리'이다.
[backend] -
NestJS - Serialization
Serialization 즉 직렬화다. 한국어로 놓고 보면 의미가 잘 와닿지 않는다. 직렬화란 네트워크 응답을 보내기 전에 발생하는 과정이다. 클라이언트에게 데이터를 전송하기 전에 정해진 규칙에 맞게 데이터를 변환하고 정제화 하는 작업을 말한다.
[backend] -
Nest.js 에러 처리 깔끔하게 하기
Nest.js는 Java Spring 프레임워크의 영향을 많이 받은 객체 지향형 프레임워크이다. 모듈간 의존성 주입 방식으로 프로젝트가 구성되는데 이때 컨트롤러와 서비스를 만들게 된다.
[backend] -
NodeJS 구조 및 성능 향상 시키기
Node.js 서버 튜닝을 진행해야 해서 동작 원리부터 정리해 두기로 했다. 분명히 많이 공부한 내용인데 왜 다시보면 새로운 건지 모르겠다. Node.js는 비동기 이벤트 드리븐 Javascript 런타임이다. 프로그램: 컴퓨터가 실행 가능한 코드 모음 프로세스: CPU로부터 자원을 할당받은 독립적인 개체 컴퓨터의 메모…
[backend] -
AWS AppSync & AWS Amplify
AWS AppSync AWS AppSync는 AWS의 Managed GraphQL 및 Pub/Sub API 서비스이다. 서버리스 WebSocket을 통해 이벤트 소스의 데이터를 구독해 실시간 환경을 만들 수 있다. 단일 엔드포인트를 통해 애플리케이션 개발을 간소화하는 서버리스 GraphQL 및 게시/구독 API를 생성하…
[backend] -
Nest.js dependency injection constructor & property based
NestJS에는 dependency injection을 하는 다양한 방법이 존재한다. base service를 상속받는 구조로 작성하던 중 construction의 코드가 계속해서 반복되는 현상(bolerplate code)이 나타나 대안을 찾아보니 property based injection을 사용하면 코드 반복을 없…
[backend] -
NestJS Service 상속을 해도 될까?
현재 만들고있는 app의 구조를 개선하던중 service 상속과 dependency injection에 대해 고민하게 되었다. 내가 맡은 프로세스는, A 요청시 A 컴포넌트를 실행하고 B 요청시 B 컴포넌트를 실행한다. A와 B는 각각의 설정 방법이 다르지만 공통적으로 사전에 수행되어야하는 작업들이 있다. 코드를 넘겨받…
[backend] -
Ubuntu14.04 CI/CD 구축
Codedeploy agent 설치 agent 파일을 설치한다. ruby 설치 후 agent를 설치한다. 이 때 ruby 버전 2 이상이 필요하므로 레포지토리를 따로 추가 후에 설치해야 정상 진행이 가능하다.
[backend] -
TypeORM Query builder로 Join
TypeORM에서 서로 다른 테이블을 조인하여 값을 가져오는 작업은 Query Builder를 사용해야 한다. SQL query TypeORM
[backend] -
NodeJS pm2 ProcessContainer.js 오류
NodeJS pm2 ProcessContainer.js 오류 Node 앱을 따로 시작하는 것은 문제가 없는데 PM2로 실행하는데서 자꾸 문제가 발생했다. 문제 및 에러로그 요런 오류가 뜨면서 실행이 되지않았다. pm2 env가 변경되어 발생하는 에러라고 한다. 해결 pm2 env 디렉토리를 삭제하고 pm2를 다시 설정하…
[backend] -
Actor model framework
액터 모델은 상태를 공유하지 않고 메시지만 주고받는 액터 단위로 동시성을 다루는 모델이다. 락 없이 동시성 문제를 피할 수 있는 원리와 Akka, Orleans 같은 대표 프레임워크를 정리했다.
[backend] -
Express.js Typescript 보일러플레이트 만들기 (for WEB)
Express는 Nest와 달리 정해진 구조가 없기때문에 구글링을 해도 개발자에 따라 코드 작성 방식이 크게 차이가난다. Nest로 프로젝트를 구성하면 알아서 구조가 잡히고 여러 면에서 편리하지만, 현재 맡은 프로젝트에서는 API 개발도 아니고 간단한 페이지만 만들면 되는데 Nest를 쓰기에 필요이상으로 프로젝트 크기가…
[backend] -
[Node.js] Handlebar Missing helper 에러
express에서 핸들바로 개발하는 중.. ’partial’ 기능을 사용하려는데 에러가 잡히지가 않았다. 스택오버플로우에서 알려준대로 해도 설정이 안먹히는 것 같았다. helper를 정의했는데도 에러가 뜨고 partial folder 경로를 정해줬는데도 자꾸 못 찾아왔다. 드디어 알아낸 문제의 원인은 과 이 두개의 vi…
[backend] -
TypeORM
TypeORM TypeORM 은 다양한 플랫폼에서 TypeScript와 JS로 실행되는 ORM이다. ORM이란 ’Object Relational Mapping’의 줄임말이다. 최신 JS를 지원하고 DB로의 작업을 효율적으로 수행할 수 있도록 도와준다. Entity Entity는 DB에 저장되는 데이터의 형태를 보여주는…
[backend] -
NestJS란
NestJS NestJS? NestJs는 Node.js용 프레임워크이다. Typescript를 전격 지원하고 OOP(Object Oriented Programming), FP(Functional Programming), FRP(Functional Reactive Programming)으로 이루어져있다. NestJS는 N…
[backend] -
Context
GraphQL에서 란 특정 실행에서 모든 resolver에 의해 공유되어지는 object를 말한다. 사용자 인증 정보나 현재 사용자 또는 데이터베이스 연결과 같은 데이터를 유지하는데 유용하다. 각 resolver에서 세번째 파라미터로 존재한다. context는 모든 모듈에서 공유되어지므로 GraphQL에 별다른 cont…
[backend] -
Middleware
Middleware 미들웨어는 route handler 이전에 실행되도록 하는 함수이다. , 객체에 접근할 수 있고 라는 미들웨어 함수가 사용된다. 에서 흔히 사용되는 미들웨어와 같은 개념이다. 구현 Nest에서 미들웨어는 함수 또는 클래스로 구현이 가능하다. 클래스로 만들경우 인터페이스를 구현해야한다. 함수로 구현하는…
[backend] -
ConfigService로 환경변수 사용하기
ConfigService 사용하기 프로젝트 환경에 관련된 변수들이 있다. 예를들면 DB에 관한 정보라던가 AWS 접근 정보라던가. 이런 정보들을 .env에서 관리하도록 프로젝트를 구성했다면 으로 변수에 접근할 수 있다. 하지만 이렇게 하는 것은 NestJS에서 선호하는 방식은 아니다. NestJS에서는 을 사용하기를 권…
[backend] -
InputType vs ArgsType
InputType vs ArgsType InputType GraphQL의 Mutaion 인자로 object를 받아야 하는 경우 input type 을 사용한다. 아래와 같이 사용한다. Mutation을 구현하는 resolver 에서 Input type을 사용하기 위해서는 의 인자로 이름 을 넘겨줘야한다. 이렇게 작성한…
[backend] -
NestJS Entity 파일과 dto의 동기화
Nest.js Entity 파일과 dto의 동기화 typeorm방식으로 Entity.ts 파일을 사용해 graphql 스키마와 DB Table 스키마를 동시에 만들어낼 수 있었다. 문제는 이에 접근하는 방식인 dto의 정의였는데, entity에 개체와 dto의 내용에 차이가 있다고해도 dto 스키마에 맞게 쿼리를 작성하…
[backend] -
NestJS, Graphql 연동
NestJS + Graphql 함께 사용해보기 \ \ Mutations\ \ Mutation은 GraphQL에서 서버 사이드 데이터를 modify 하는 방식이다. REST에서 GET 메서드의 요청은 데이터 수정을 하지 못하도록 하는게 원칙인 것 처럼 Query로 들어온 요청은 데이터를 수정하지 못한다. Nest에서는 데…
[backend] -
graphql-yoga로 GraphQL 시작하기
기본 사용법을 익히기 위해 를 사용했다. 서버 열기 서버를 열면서 스키마 파일을 지정하고, resolver 또한 설정해준다. 포트를 따로 지정하지 않으면 4000번 포트로 서버가 열리고 브라우저로 접속시 깔끔한 ui를 가진 플레이그라운드로 간편하게 api를 테스트 해볼 수 있다. 오른쪽에 보이는 , 를 누르면 API 설…
[backend] -
GraphQL 이란
<style img + em { display: block; text align: center; } </style GraphQL은 페이스북에서 만든 쿼리언어이다. 등장한지 얼마 안됐음에도 불구하고 인기가 매우 가파르게 올라가고 있지만 아직 GraphQL을 이용한 open API를 제공하는 곳은 국내 및 해외를 포함해도…
[backend] -
Gulp 사용 오류 정리
Gulp 이슈 정리 Gulp 사용 실습을 따라하다 발생한 오류들을 해결했던 방법들을 정리 해놓으려한다. gulp image 설치 이슈 (ENONET) 위 에러가 발생해 이틀동안 원인을 찾았다. 는 이미지 파일을 압축하여 서버에 올려주는 작업을 해주는 라이브러리이다. gulp image npm 설치 페이지에서 다양한 옵션…
[backend] -
[Node.js] operation not permitted 오류
Operation not permitted 실행 중 위와 같은 오류가 발생했다. 이 작업을 하기 전 다른 프로젝트의 security issue들을 해결하기 위해 몇가지 스크립트를 실행하다가 오류가 났었는데 그 작업중에 npm에 문제가 생긴것 같다. 여기서 해결법을 찾아냈다. 1. cache clean 2. 최신 버젼 n…
[backend] -
[Node.js] EventLoop
Node.js 동작 방식 Node.js를 창시한 라이언 달이 노드를 만든 이유로 꼽은 것은, 기존에 많이 사용되고 있는 WAS라고 불리는 Apache, Tomcat 같은 서버들은 오래걸리는 blocking 작업에서 원활한 사용에 문제가 생겨 동시성 프로그래밍을 위해 Node.js를 만들었다고 한다. Node를 사용하는…
[backend] -
AWS ubuntu18.04 FTP 설치하기
파일관리를 좀 더 편하게 하기위해 FTP를 설정했다. 인스턴스를 만들 때 마다 필요하기 때문에 설정방법을 알아두면 편하다. vsftpd 설치 vsftpd는 ubuntu의 기본 ftp 설치 패키지다. 패키지 관리자 을 업데이트 해주고 를 설치한다. 설치된 vsftpd를 재실행시키고 ubuntu가 실행될 때마다 함께 실행되…
[backend] -
Flask앱 AWS로 배포하기
도커를 사용해 간편하게 배포한다. 서버 세팅을 직접 하는 방법은 [’[FLASK] FLASK와 NGINX 클라우드 서비스 구동하기’](https://studyeong.blogspot.com/2020/02/flask flask nginx.html) 예전에 블로그에 정리해놓았다. 준비 사항 프로젝트 코드가 AWS 인스턴스…
[backend] -
AWS 시작하기
AWS 계정 만들기 AWS 계정을 만드는 것은 간단하다. AWS Console로 이동하여 회원가입하고, 클라우드 서비스는 비용이 나가는 서비스이기 때문에 billing info또한 작성해야 한다. 클라우드 서버를 통해 작업하는 것은 보안이 철저해야 한다. AWS 에도 다양한 상품이 존재하고, 상품에 따라서 눈깜빡할 사이…
[backend] -
클라우드 컴퓨팅
클라우드 컴퓨팅이라는 단어는 사실 굉장히 넓은 범위를 포함하고 있다. 2000년대 초 부터 많이 사용되기 시작한 단어로, 구름 위에 있는 보이지 않는 컴퓨터 자원을 사용해 작업한다는 뜻이다. 대부분의 작업을 온라인에 분산되어 존재하는 데이터 센터(=클라우드)에 맡겨 수행하고, 사용자의 컴퓨터는 클라우드에 접속하여 상호작…
[backend] -
인터넷 기초
IP 인터넷에 연결되어있는 장치들을 식별할 수 있는 주소 IP : Internet Porocol 예) 192.168.0.1 도메인(domain) IP는 사람이 이해하고 기억하기 어렵기 때문에 이를 위해 각 IP에 이름(=도메인)을 부여하여 알아보기 쉽게 함 naver.com 220.95.233.172 daum.net 1…
[backend] -
[Node.js] 에러페이지 핸들링
에러페이지 핸들링 Node.js의 Express 에서 에러 처리를 하려면 어떡헤 해야 할까? 아래의 방식이 내가 주로 사용하던 에러 핸들링 방식이다. , 를 사용해 에러처리를 하고 있다. 하지만 만약 엔드포인트가 계속해서 많아진다면? 에러 처리를 위해 반복 작성되는 코드가 매우 많아질 것이다. Express는 이를 방지…
[backend] -
[Node.js] Global Variable
전역 변수 설정하기 서비스의 전체 페이지에서 접근해야 하는 변수들이 있다. 예를 들면, 사용자가 로그인한 상태를 나타내는 bool type의 같은 변수가 그렇다. 이런 값들을 전역 변수로 설정하지 않는다면, 다음 요청을 진행할 때 마다 계속해서 값을 전달해야하고 (내 예전 프로젝트 처럼..) 이는 정말정말 비효율적이고…
[backend] -
[Node.js] POST 처리하기
body parser http 연결에서 클라이언트는 get과 post 방식으로 서버에 요청을 보낼 수 있다. get 방식은 정보를 조회할때 사용되는데, 이미 으로 앞에서도 많이 사용한 적이 있다. post 요청을 처리하는 메서드는 가 있다. get과 비슷한 방식으로 처리한다. post는 html DOM의 form을 통해…
[backend] -
[Node.js] Nunjucks
View Engine Nunjucks Node.js로 응답 페이지를 구성하는 방법은 여러가지가 있다. 그 중 하나는 아래 코드처럼 로 html을 하나씩 써주는것이다. 이렇게 한줄씩 쓸 수는 있지만 모든 작업을 이렇게 한다고 생각하면 정말 막막할 것이다. 이를 대신해서 쓸 수 있는 방법이, 데이터 처리 로직 부분 과 화면…
[backend] -
[Node.js] Routing과 Middleware
Routing Node.js의 는 전역 변수이다. 이 변수를 사용해 Express 프로젝트 또한 모듈화로 깔끔하게 관리할 수 있다. ( 라는 전역 변수도 존재하는데 와는 다른 개념이니 혼동해서는 안된다) Routing 이라는 용어 자체의 넓은 의미는 ’어떤 네트워크 안에서 통신 데이터를 보낼 때 최적의 경로를 선택하는…
[backend] -
[Node.js] Express.js
Express.js Express란? Node.js로 개발을 할 때 가장 많이 사용되는 웹 프레임워크이다. 2020 Node.js popular web framework statistics 웹 프레임워크 란 웹 서비스를 개발하기 위해 사용되는, 그 이름 그대로 틀 이다. 프레임워크 없이도 개발을 할 수는 있지만 프레임워…
[backend] -
Python web scrapping (Beautiful Soup)
Web Scrappping 이란 웹페이지에서 데이터를 수집하는 모든 과정을 말한다. 크롤링과 혼용되어 사용되는 일이 많은데, 크롤링은 웹 페이지들을 수집, 분류하여 나중에 쉽게 찾아 볼 수 있도록 인덱싱 하는 작업이다. 따라서 스크래핑이 더 큰 범주에 속한다고 보면 된다. 파이썬에는 웹 스크래핑을 도와주는 다양한 모듈들…
[backend] -
[Node.js] Module Pattern
Module Pattern 모든 코드를 App.js 에 몰아넣기 보다는 기능에 맞게 모듈화 하여 분리해 관리하는 것이 전체 프로젝트를 관리하기에 훨 씬 좋다. 모듈화 작업은 나중에 리팩토링 하려 하지 말고 처음부터 잡아놓는 것이 좋은 것 같다. 이후에 하려고 하면 복잡하다. Node.js의 standard 모듈화 방법은…
[backend] -
[Node.js] API 구현하기
API API : Application Programming Interface 프로그램은 여러가지 모듈을 이용해 만들어진다. 이러한 라이브러리를 만든 개발자와 이를 사용해 프로그램을 개발하는 개발자 간의 약속 을 바로 Interface 라고 부른다. 또한 애플리케이션 프로그램을 만들기 위해 만들어진 약속들을 API 라고…
[backend] -
[Node.js] 패키지 매니저와 PM2
패키지 매니저와 PM2 Node.js를 사용하다보면 다양한 모듈을 설치해 외부 기능을 사용해야 할 때가 많다. 다양한 패키지 매니저가 있는데 나는 을 주로 사용한다. npm npm을 사용하기 위해서는 패키지 정보를 기록하는 파일이 필요하다. 명령어를 입력하면 자동으로 이 만들어진다. npm으로 다른 사람이 만든 모듈을…
[backend] -
[Node.js] 동기 & 비동기
Synchronous & Asynchronous 동기 vs 비동기 ’동기’와 ’비동기’는 그 이름 그대로 동작한다. 동기적 작업 방식은 작업이 순차적으로 진행된다. A B C 가 호출이 되면, 각각의 작업이 하나씩 끝날 때 마다 다음 작업이 시작되는 것이다. 반면에 비동기적 작업 방식은 비동기적으로 동시에 작업이 진행된…
[backend] -
[Node.js] Node.js의 CRUD
fs module File System 파일을 읽고 쓰는데 필요한 많은 메서드가 포함되어있는 모듈이다. CRUD 프로그래밍에서 CRUD란 정보를 처리하는 4가지의 기본 기능을 말한다. CRUD를 할 수 있다는 것은 그 언어의 75%는 섭렵했다고 봐도 무방하다. C Create R Read U Update D Delete…
[backend] -
[Node.js] Node.js의 기본 기능
노드는 주로 서버 쪽 기능을 담당하는 자바스크립트 기반의 프로그래밍 언어이다. 이벤트 기반으로 동작하는 언어이므로 이벤트를 어떻게 처리하는지 잘 알아둬야 한다. 다른 서버 언어들과의 차이점 세상이 Node.js에 열광한 이유를 찾아보려면 Node.js가 나온 이유에 대해 알아야 한다. 간단히 말하면 HTML을 일일이 고…
[backend] -
Flask + Nginx로 클라우드에 서비스 배포하기
ubuntu 18.04 환경에서 Flask앱 Nginx로 서비스하기 먼저 NHN TOAST 서버에서 인스턴스를 생성하고 플로팅 아이피를 설정해놓은 상태에서 진행하였다. 수많은 구글링을 해봤지만 버전에따라 명령어나 패키지 이름이 달라지는 경우가 있어 설정이 쉽지 않았다. 드디어 설정을 완료하여 글을 쓴다. 프로젝트 개발시…
[backend]