컴퓨터로 할 수 있는 것

웹과 멀티미디어: VOD 트랜스코딩과 다운로드

imcxsu@gmail.com (임창수) — Mon, 30 Jun 2025 21:00:00 +0900

VOD(Video on Demand)는 원하는 동영상을 보고 싶은 시간에 바로 시청할 수 있는 주문형 비디오 서비스를 말합니다. 넷플릭스나 유튜브처럼 사용자 요청 시 콘텐츠를 제공하는 플랫폼들이 모두 VOD 시스템입니다. VOD의 반대 개념은 정해진 방송 시간에 맞춰보는 TV 방송으로, VOD를 통해 이용자는 ‘보고 싶을 때 바로 재생’하는 편리함을 얻습니다.

보고 싶을 때 바로 재생하기 위해서는 우선 서비스가 제공하는 VOD를 다운로드해야 합니다. 여기서 다운로드는 사용자가 동영상을 스트리밍(실시간 전송)하거나 파일로 저장하여 시청하는 것을 모두 포함합니다. 초창기 인터넷 동영상은 재생과 동시에 파일을 처음부터 끝까지 순차적으로 프로그레시브 다운로드하는 형태였기 때문에 중간 건너뛰기가 어렵고 버퍼링이 잦았습니다. 반면 오늘날 VOD는 HLS 등의 스트리밍 기술을 통해 네트워크 상황에 맞춰 동영상을 조각 전송하여 버퍼링 없이 시청이 가능합니다. 필요에 따라 사용자가 동영상을 오프라인 환경에서도 재생할 수 있도록 저장할 수 있는데, 이 경우 적절한 포맷과 품질로 파일을 내려받아 기기에 보관하게 됩니다.

웹과 멀티미디어: VOD 업로드

imcxsu@gmail.com (임창수) — Sat, 31 May 2025 11:45:00 +0900

개요

VOD(Video on Demand) 업로드란 사용자가 사전에 녹화된 비디오 콘텐츠를 VOD 플랫폼이나 미디어 서버에 파일 형태로 전송하는 과정을 말합니다. 라이브 스트리밍이 실시간으로 영상을 전송하는 것과 달리, VOD는 영상을 서버에 먼저 저장하고 처리한 후에 사용자들이 원하는 시간에 재생할 수 있도록 제공합니다. 이 글에서는 라이브 스트리밍이 아닌 VOD 업로드에 초점을 맞추어, 웹에서의 VOD 업로드 프로세스와 관련 기술을 살펴보겠습니다.

VOD 업로드 워크플로우

클라이언트는 HTTP를 통해 서버로 파일을 전송할 수 있습니다. 파일 업로드 API를 통해 업로드하거나 서버로부터 업로드에 필요한 URL(presigned URL)을 요청합니다. 그럼 서버는 업로드를 식별할 수 있는 고유 ID 혹은 업로드 전용 URL을 반환합니다.

웹과 멀티미디어: 오디오

imcxsu@gmail.com (임창수) — Thu, 17 Apr 2025 23:30:00 +0900

개요

물리적으로 매질을 통해 전달된 모든 음파를 사운드(sound) 라고 합니다. 한편 전기적인 신호(아날로그 또는 디지털)로 처리하는 기술 및 그 신호 자체를 기술적으로 오디오(audio) 라고 합니다.

웹과 멀티미디어: 이미지

imcxsu@gmail.com (임창수) — Sun, 13 Apr 2025 22:38:00 +0900

개요

이미지는 인터넷에서 매우 큰 비중을 차지합니다. 웹페이지 기준으로 이미지가 차지하는 데이터 용량은 전체의 51%에 달하므로¹, 이미지의 속도나 크기를 개선하면 웹 성능에 상당한 영향을 미칩니다.

웹 페이지 성능 측정과 최적화

imcxsu@gmail.com (임창수) — Thu, 27 Mar 2025 00:45:00 +0900

성능 지표

먼저 웹 페이지의 성능을 개선하려면 어떤 지표를 기준으로 삼을 것인지 정해야 합니다.

Google이 제공하는 Web Vitals는 사용자 경험을 측정하는 지표입니다. 이 중 가장 중요한 측정 항목 3개를 모아서 Core Web Vitals이라고 합니다.

LCP (Largest Contentful Paint) : 가장 큰 콘텐츠가 화면에 표시되는 시간으로 로드 성능을 측정.
INP (Interaction to Next Paint) : 사용자 입력에 대한 응답 시간으로 상호작용을 측정. (FID, First Input Delay 에서 대체)
CLS (Cumulative Layout Shift) : 시각적 안정성을 측정.

이 외에도 웹 접근성(Web Accessibility)¹, SEO, PWA 등을 고려하여 웹 페이지의 품질을 측정할 수 있습니다.

HTTP 응답 패킷을 압축해서 Outbound 네트워크 비용 절약하기

imcxsu@gmail.com (임창수) — Sun, 23 Mar 2025 00:10:00 +0900

클라이언트 로딩 시간을 줄이기 위해 API 하나에 많은 걸 담기 시작했습니다. 브라우저에서는 HTTP/1.1 연결 시 최대 6개의 커넥션만 허용해주기 때문입니다.¹ 그래서 서버 응답 데이터의 사이즈가 점점 커지기 시작했고, 덩달아 CDN과 IDC 네트워크 트래픽(outbound) 비용이 늘기 시작했습니다. 그 중에는 변하지 않는 데이터도 포함되어 있고, 변하는 데이터도 포함되어 있습니다. 변하지 않는 데이터는 중간 레이어에서 캐시를 통해 해결할 수도 있지만, 이 글에서는 서버에서 응답 데이터를 압축해서 보내는 방법을 소개합니다.

Spring Boot 애플리케이션 설정

서버에서 클라이언트에 응답 시 응답 데이터를 압축해서 보낼 수 있습니다. Spring Boot 애플리케이션이라면 간단하게 application.yaml 파일에 아래 설정만 추가하면 됩니다.

네트워크 레이어 - OSI 모델

imcxsu@gmail.com (임창수) — Thu, 20 Mar 2025 23:03:00 +0900

TCP/IP 모델은 1970년대 미국 국방부 연구기관 DARPA에서 인터넷 초기 설계(ARPANet)에 사용한 모델로 4계층으로 구성되어 있습니다. 실제 인터넷을 구현하기 위해 실용적 목적으로 개발되었습니다.

반면 OSI 모델은 다양한 컴퓨터 시스템이 서로 통신할 수 있도록 1984년 국제표준화기구(ISO)에서 만든 개념 모델입니다.¹

실제 네트워크에서는 TCP/IP 모델이 사용됩니다. 하지만 개념을 이해하고 설명하기에는 OSI 모델이 더 적합하기 때문에 OSI 모델이 통용됩니다.

이 글에서는 각 계층의 주요 기능과 특징을 살펴보기 위해 일반적으로 사용되는 OSI 모델을 따르지만 5~7계층은 TCP/IP 모델처럼 합쳐진 5계층 모델을 설명합니다.

비파괴 스캐너로 스캔한 책 PDF outline 만들기

imcxsu@gmail.com (임창수) — Mon, 27 Jan 2025 23:15:00 +0900

절판된 책이나 집에서 보관하던 두꺼운 책을 스캔해서 소장하고 싶은 경우가 있습니다. 그래서 저는 비파괴 스캐너를 구입해서 거의 10년 동안 책을 스캔해서 보관하고 있습니다.¹ 하지만 펼칠 때마다 목차²가 없으면 발췌독하기 불편한데요. 오픈 소스 OCR 도구인 Tesseract를 이용해 PDF 목차를 만들어보겠습니다.

사적이용을 위한 저작권법

먼저 저작권에 대해 확인해야 할 부분이 있습니다. 과연 책을 스캔해서 PDF로 만드는 것이 합법일까요? 인터넷에 검색해보면 도서관에서 빌린 책을 스캔하는 건 불법이라고 하는 경우가 많은 것 같습니다. 저작권법 제30조 를 보면 다음과 같이 명시되어 있습니다.

네트워크 대역폭과 NFS 지연

imcxsu@gmail.com (임창수) — Mon, 13 Jan 2025 19:13:00 +0900

IDC마다 다르겠지만 일반적으로 Outbound 네트워크 트래픽 양에 따라 비용을 부과합니다. 제가 속한 팀은 트래픽 비용을 줄이기 위해 기존에 사설망(private network) 없이 내부 서버 간 통신하던 시스템에 사설망을 추가했습니다.

DB 백업을 위해 Veeam을 사용하다가 expdp와 RMAN을 사용하기 시작했고, NFS 마운트 된 스토리지에 백업본을 저장했습니다.

문제

NFS 마운트 된 정적 파일들(이미지, 스크립트 파일)을 조회하는 서버에서만 부하가 발생하기 시작했습니다.

확인해보니 DB 서버 회선에서 허용되는 네트워크 대역폭(1Gbps)의 100%를 사용하는 경우가 계속 발생했고, 덩달아 NFS 접근도 느려진 것입니다. 백업 기능을 변경한 후 발생했습니다.

일상에서의 Wireshark

imcxsu@gmail.com (임창수) — Mon, 30 Dec 2024 18:38:00 +0900

Wireshark란 오픈 소스 네트워크 프로토콜 분석기입니다. GUI와 CLI 환경 모두에서 사용할 수 있으며, 네트워크 문제를 분석할 때 많이 사용됩니다. 플랫폼 또한 Windows, macOS, Linux 등 다양한 운영체제에서 사용할 수 있습니다. GUI가 꽤 편하기 때문에 Windows나 macOS에서는 Wireshark 를 사용하는 경우가 많습니다. 여기서는 CLI 환경에서도 사용할 수 있는 TShark 를 소개합니다.

설치

Ubuntu 22.04에서 설치하는 방법을 소개합니다.

# CLI
sudo apt install tshark
# GUI
sudo apt install wireshark

wireshark 그룹 추가 후 컴퓨터를 재부팅해야 합니다.

한국어를 지원하지 않는 게임의 비공식 한국어 패치 만들기

imcxsu@gmail.com (임창수) — Mon, 16 Dec 2024 21:26:00 +0900

스팀(Steam) 게임들은 PC에 파일이 설치되기 때문에 다른 플랫폼보다 게임 모드(Mod)나 패치 도구가 꽤 많습니다. 그래서 콘솔이나 고전게임보다 한국어 패치 제작 난이도가 쉽습니다. 한국어 패치 제작에 입문하기 좋은 플랫폼이라고 생각합니다.

게임 저작권과 한국어 패치

먼저 저작권부터 이야기해야 할 것 같습니다. 엄연히 게임 파일을 수정하고 배포하는 것은 저작권법 위반입니다. 당연히 배포가 목적이라면 게임 개발사에 허락을 받아야 합니다.¹

파일 시그니처와 파일 카빙: 바이너리 데이터가 이상한 문자열로 표현되는 이유

imcxsu@gmail.com (임창수) — Tue, 10 Dec 2024 22:46:00 +0900

개요

이미지를 다운로드하면 응답 데이터로 이상한 문자열이 출력됩니다.

# Youtube의 빈 썸네일 이미지를 다운로드 받습니다.
curl -L -o - https://i.ytimg.com/

����JFIF���

�      !�
!"12ARaBqr��U�����������Qbd�������
                                  ?�@��t��2�4�2�4��&`�f�b��*)��6�j�pVZ7՚�ތC:#uf��§���<�Z�W
�oMku�@��<\�O����H����M?^_��n
                             Z��W�:>vW���ҟ˃lr�h�8e�z*ڷ�zw�ie4�
e�C�#:=(���R�'F��0���e�
                       �
                        ���T���9�p�z�n/1
                                        �mSV��t�V�"��U �MI�;w��{O%��q
                                                                     �[$x�7UV��⫫�t����=6�l�`Si)u7	u�^z*UW��[���L�˭��a?
                                                                                                                            yn��mN���K��:��Z��&_
                                                                                                                                                ���{
  ����j�sj�j-T���U�^m�2\�O7��M�{�V�v��Vݝz�ԞRe|8��?�4qL5�i��Z��V�2e�ʝ��'����%zV����v�8
.A.@��F���>�8]�JU��ҕj�z�Vb~��o)*�Ҍ������/�n���{m�Ա��vI��U�qoZ�+U��Z{�&Z��;��B�������k�XЏR�;*t��	|J�-���ku�Kk5_s�[8�te��d�kĮl��%�{]�i���ɩ{5}%Y���in��sYa��*�ɭ��߯ko>��� f��,[��ٷ�h��?X|Yg�j?��1���s��t��� HJ�
                                             �^�f�4��Vނu-m�շ�����`l���^���U{
                                                                            &H��%

�는 유니코드 replacement character(U+FFFD)로, 해석할 수 없는 문자를 표시하기 위해 사용됩니다.

이번엔 hexdump로 만들어주는 xxd 명령어를 파이프로 이어보겠습니다.

웹 페이지 응답 방법과 프레임워크

imcxsu@gmail.com (임창수) — Sun, 24 Nov 2024 23:32:00 +0900

CGI (Common Gateway Interface)

웹 서버와 외부 프로그램(애플리케이션) 간에 데이터를 주고받기 위한 인터페이스입니다. 웹 서버가 클라이언트(브라우저)로부터 요청을 받으면, CGI 프로그램을 호출하여 동적으로 콘텐츠를 생성한 뒤, 그 결과를 클라이언트에 반환합니다.

Facebook은 경쟁사의 암호화된 모바일 앱 트래픽을 어떻게 가로챘을까?

imcxsu@gmail.com (임창수) — Thu, 12 Sep 2024 00:17:00 +0900

How did Facebook intercept their competitor’s encrypted mobile app traffic? | HaxRob , 2024년 4월 14일
저자의 허락을 받고 번역했습니다.
각주는 역주입니다.

이 글은 페이스북(Facebook) 집단 소송에서 밝혀진 정보를 바탕으로 한 기술 조사입니다. 페이스북은 경쟁사의 정보를 얻기 위해 Onavo Protect 앱이 실행 중인 사용자 기기에서 암호화된 트래픽을 도청했었다는 이유로 재판이 진행 중입니다.

2024년 7월 28일 - 👋Hello Hackernews !

일상에서의 스왑 메모리 (Swap Memory)

imcxsu@gmail.com (임창수) — Thu, 05 Sep 2024 21:13:00 +0900

스왑 메모리는 물리 메모리 용량이 부족할 때 사용되는 가상 메모리 영역입니다. 고사양 작업 중 메모리가 부족해서 컴퓨터가 자주 멈춘다면 스왑 메모리를 늘려보는 것도 하나의 방법입니다. 이 글은 Ubuntu에서 스왑 메모리를 file로 설정하고, 나의 환경에 맞게 조정하기 위해 모니터링 하는 방법을 설명합니다.

먼저 스왑 메모리 설정을 확인합니다.

sudo swapon --show

설정되어 있지 않다면 아무것도 출력되지 않습니다. Ubuntu 24.04 기준으로는 기본적으로 다음과 같이 /swap.img가 설정되어 있습니다. 하지만 이 글은 설정되어 있지 않다는 전제로 진행합니다.

IP로 지리적 위치(Geolocation) 찾기

imcxsu@gmail.com (임창수) — Thu, 29 Aug 2024 22:38:00 +0900

현상

약 10ms 응답속도가 예상되는 API에 500~700ms의 응답속도가 발생했습니다.

원인

해당 API에서는 국가별로 다른 정책을 적용하기 위해 IP로 국가 정보¹를 조회하는 기능이 가장 먼저 수행됩니다. 국가 정보의 출처는 ipapi라는 유료 API 서비스와 IPInfoDB라는 무료 서비스입니다. 대략적인 코드는 다음과 같습니다.

@Cacheable(value = CacheName.IPAPI_COUNTRY_CODE, key = "#ipAddress")
public Geolocation findIsoCountryCode(final String ipAddress) {
    if (isPrivate(ipAddress)) {
        return Geolocation.korea();
    }
    var ipapi = ipapiFeignClient.findGeolocationByIpAddress(ipAddress, IPAPI_ACCESS_KEY);
    if (ipapi != null) {
        return Geolocation.from(ipapi);
    }
    var ipInfoDB = ipInfoDBFeignClient.findGeolocationByIpAddress(ipAddress, IPINFODB_ACCESS_KEY);
    if (ipInfoDB != null) {
        return Geolocation.from(ipInfoDB);
    }
    return Geolocation.korea();
}

문제는 API가 아무리 빨라도 해당 IP Geolocation 서비스에서 응답받는 데에 평균 약 500ms 정도 소요되었다는 것입니다.

Traceparent 헤더로 클라이언트부터 서버까지 추적하기

imcxsu@gmail.com (임창수) — Thu, 22 Aug 2024 18:00:00 +0900

개요

모니터링 도구를 확인해보니 며칠동안 특정 기능에 에러가 발생하고 있었습니다. 해당 에러는 알람 임계점(threshold)보다 낮아서 알람이 발생하지 않았고, 이용자는 버그 리포팅을 하지 않았습니다. 에러 로그를 확인해보니 서버에서는 유효성 검사를 하지 않았고, 클라이언트 앱에서는 유효하지 않은 파라미터를 전달했습니다. 서버에서 유효성 검사를 추가할 수 있겠지만, 클라이언트 앱에서의 잘못된 요청(bug)은 원인을 알 수 없었습니다. 클라이언트 이벤트는 연결되어 있지 않았기 때문입니다.

또 다른 문제가 있었습니다. 서버에서는 정상적인 상태 코드와 함께 100ms 정도의 속도로 응답했지만 클라이언트에서는 4초 이상의 지연이 발생하거나 아래와 같은 Akamai 에러 페이지가 응답되었습니다. 그리고 모든 요청이 아닌 전체 요청의 5% 정도에서만 발생하고 있었습니다. 하지만 국가, Edge IP, User Agent, 요청 URL 등을 확인해봐도 특정 패턴을 보이는 것이 없어서 원인을 알 수 없었습니다.

Docker Compose로 간단하게 Ollama 시작하기

imcxsu@gmail.com (임창수) — Wed, 31 Jul 2024 23:48:00 +0900

대형 언어 모델 (LLM, Large Language Model)

LLM은 방대한 양의 데이터로 사전 학습된 초대형 딥 러닝 모델¹입니다. 이를 활용해 텍스트를 생성하거나 분류, 요약, 번역 등 다양한 자연어 처리 작업(NLP, Natural Language Processing)을 수행할 수 있습니다.

일반적으로 700억 개(70 Billion) 이상의 파라미터를 갖는 모델을 LLM이라고 합니다. 70억 개(7 Billion) 수준의 파라미터를 갖는 모델은 SLM(Small Language Model)이라고 합니다. 이 사이에 중간 규모의 모델은 sLLM(smaller Large Language Model)이라고 합니다.

Ollama는 오픈소스 LLM을 쉽게 실행할 수 있게 도와주는 도구입니다. Open WebUI는 ChatGPT 화면처럼 LLM과 대화 시 웹 UI를 제공하는 오픈소스입니다. 이 2가지 도구를 간단하게 사용해보겠습니다.

유용한 구글 크롬(Google Chrome)의 기능

imcxsu@gmail.com (임창수) — Mon, 29 Jul 2024 00:51:00 +0900

Chrome URLs

크롬 URL은 Google Chrome 브라우저에서 설정 페이지나 특정 기능으로 빠르게 접근할 수 있게 해주는 내부 주소입니다.

chrome://about/
- 크롬 URL 목록
chrome://net-internals/#hsts
- HSTS 조회 및 비활성화
chrome://inspect#devices
- USB로 모바일 디바이스를 연결해서 개발자 도구(DevTools)로 모바일 크롬 앱을 확인할 수 있습니다.

북마클릿 Bookmarklet

북마클릿은 자바스크립트 코드를 포함하고 있는 북마크로, 사용자가 클릭하면 해당 코드가 실행되어 특정 작업을 수행합니다. 북마클릿(Bookmarklet)이라는 단어는 북마크(Bookmark)와 애플릿(Applet)의 합성어입니다. 북마크의 편리함과 애플릿의 실행 기능을 결합한 형태를 잘 나타냅니다.

APM만큼 중요한 네트워크 모니터링

imcxsu@gmail.com (임창수) — Thu, 25 Jul 2024 01:22:00 +0900

APM은 애플리케이션 성능 모니터링(Application Performance Monitoring)입니다. 저희 팀이 사용하는 모니터링 서비스 데이터독(Datadog)은 APM에서 많은 것을 확인할 수 있습니다. (인프라, 로그, 호스트의 프로세스, JVM 런타임 메트릭, 각 리소스별 레이턴시 등등)

문제

어느날 체감이 될 정도로 서비스의 레이턴시가 높아지고, 정각마다 스파이크 발생했습니다. 또한 서비스 전체에 영향이 있었습니다.

분석: 쉽게 간과했던 문제

Oracle Session 히스토리 를 남겨서 확인했을 때 DB에 부하를 일으키면서 반복적으로 보이는 느린 쿼리가 없었습니다. DB 문제는 아니었습니다.

네트워크 장비 모니터링을 위한 SNMP

imcxsu@gmail.com (임창수) — Tue, 23 Jul 2024 19:08:00 +0900

주로 네트워크 장비의 Metric을 확인하는 모니터링 용도로 사용하지만, SNMP를 지원하는 컴퓨팅 머신이라면 모두 활용할 수 있습니다.

전제 조건

IP 네트워크 환경이 있다.
관리용 서버(SNMP 서버)가 있다.
SNMP 프로토콜을 지원하는 기기다.

구성 요소

매니저 (SNMP 서버)
- 네트워크 감시 장치(서버)에 설치해서 사용하는 소프트웨어
에이전트 (네트워크 기기/서버)
- 네트워크 기기나 서버가 가진 기기의 상태 정보를 통보하는 기능
SNMP 프로토콜 (TCP/IP)
- UDP 패킷에 실어서 주고받으며, 포트 번호는 161(SNMP), 162(TRAP)를 사용합니다.
MIB (Management Information Base)
- SNMP로 관리되는 네트워크 기기나 서버가 자신의 상태를 외부에 알리기 위해서 공개하는 관리 정보.
- RFC 1156 으로 규정된 MIB1, RFC 1213 으로 규정된 MIB2
- MIB를 지원하는 기기에 일반적으로 포함된 표준 MIB와 기기 제조사마다 사양이 다른 사설(Private) MIB가 있습니다.
- MIB의 구조는 트리 구조이며, 트리 구조의 마디(노드)는 번호를 붙여서 나타냅니다. 이 번호열을 OID(Object ID)라고 합니다.

매니저-에이전트 역할

정보의 요청과 응답
- 매니저가 에이전트에게 대상 기기의 정보를 요청 → 에이전트는 정보를 매니저에게 응답
설정의 요청과 응답
- 매니저가 에이전트에게 대상 기기의 설정 변경을 요청 → 에이전트는 설정을 변경하며 그 결과를 매니저에게 응답
상태 변화의 통보
- 에이전트가 매니저에게 대상 기기의 상태 변화를 통보

매니저-에이전트 통신 방식

폴링 (Polling)
- 매니저가 정기적으로 에이전트로부터 관리 정보를 추출합니다.
트랩 (Trap)
- 에이전트인 라우터나 스위치가 자신의 상태에 어떤 변화가 발생했을 때(장애 발생 등) 자발적으로 매니저인 SNMP 서버에게 정보를 통보합니다.

커뮤니티 이름

매니저와 에이전트는 커뮤니티 이름으로 그룹화합니다.
매니저와 에이전트는 커뮤니티 이름이 같을 때만 통신합니다.

버전별 차이

v1

커뮤니티 이름이 포함된 패킷을 평문으로 전달합니다.
기본적인 관리 정보 베이스(MIB)와 트랩 메시지를 사용합니다.

v2

커뮤니티 이름이 포함된 패킷을 암호화해서 전달합니다.
추가된 PDU 타입(예: GetBulkRequest )을 통해 대량의 데이터를 한 번에 전송할 수 있습니다.

v2c

커뮤니티 값을 암호화하여 전달하는 것이 복잡해서 v1처럼 평문으로 전달할 수 있도록 원복되었습니다.

v3

(username, password) 인증 기능이 추가되었습니다.
이 외 다양한 보안 기능 추가되었습니다.

일상에서의 SSH

imcxsu@gmail.com (임창수) — Wed, 17 Jul 2024 22:40:00 +0900

원격지의 셸에 접속하기 위해 사용되는 네트워크 프로토콜로 이 글에서는 업무에서 자주 사용하는 SSH 설정을 정리합니다.

SSH key 생성

# RSA
ssh-keygen -t rsa -b 4096 -f ~/.ssh/cs.im.rsa -C "Changsu Im" -N "password"

# ED25519
ssh-keygen -t ed25519 -f ~/.ssh/cs.im.ed25519 -C "Changsu Im" -N "password"

SSH Server

SSH 데몬 설정 파일은 /etc/ssh/sshd_config이다.

서버 to 서버 요청 시 발생한 DNS 레이턴시

imcxsu@gmail.com (임창수) — Thu, 13 Jun 2024 17:40:00 +0900

배경

약 200ms 응답 속도가 예상되는 API가 불규칙적으로 2s까지 스파이크가 발생했습니다.
- 해당 API에는 서버 to 서버로 요청하는 기능이 여러 개 포함되어 있습니다.
환경: On-Premise(IDC) 환경에 애플리케이션 서버는 컨테이너가 아닌 스탠드얼론 호스트로 실행됩니다.

분석: dig 으로 테스트

nameserver 8.8.8.8 로 지정

dig @8.8.8.8 api.example.com

첫번째 요청 292 msec

;; Query time: 292 msec
;; SERVER: 8.8.8.8#53(8.8.8.8) (UDP)
;; WHEN: Tue Jun 11 11:00:54 KST 2024
;; MSG SIZE  rcvd: 154

2번째 요청 36 msec

Playwright를 사용해서 HTML 페이지를 PDF로 만들기

imcxsu@gmail.com (임창수) — Tue, 12 Dec 2023 22:02:00 +0900

데모 서버는 markruler/htmltopdf 저장소를 사용해주세요.

개요

팀내에서 문서 생성 도구로 PDFmyURL 과 OZ e-Form 을 사용하고 있습니다. 보통 이런 외부 솔루션은 테스트 할 때 매우 불편합니다.

PDFmyURL은 PDF를 생성하는 2가지 인터페이스가 있습니다. 하나는 URL을 통해 페이지를 읽어서 PDF를 생성하는 인터페이스고, 하나는 raw HTML, CSS를 직접 전달해서 PDF를 생성하는 인터페이스입니다. URL 방식은 PDFmyURL 측 서버(서비스 외부)에서 페이지를 조회할 수 있어야 합니다. 그래서 private 환경에서는 테스트 할 수가 없습니다. 해당 기능들은 운영 환경에서 QA 테스트를 해야 하는 불상사가 생기는 겁니다. 더 큰 문제는 데이터를 Public 환경에 노출해야 하기 때문에 데이터에 따라 개인 정보 유출 문제가 될 수 있습니다.

오라클 DBMS SE2 세션 사후 진단

imcxsu@gmail.com (임창수) — Sun, 30 Apr 2023 23:58:00 +0900

개요

저희 팀에서 구독 중인 Oracle DBMS의 라이센스는 Standard Edition 2의 Processor 라이센스(이하 SE2)입니다. 이 라이센스는 프로세서 최대 2개, CPU Threads 최대 16개 까지 사용할 수 있습니다. 만약 트래픽이 많지 않다면 이 정도 사양으로도 충분하겠지만, 트래픽이 많아지거나 DB를 비효율적으로 사용하게 되면 성능 저하가 발생할 수 있습니다. 하지만 우리는 성능 저하가 발생했을 때 이를 진단할 방법이 없었습니다. SE2의 경우 AWR(Automatic Workload Repository), ASH(Active Session History)와 같은 Oracle Diagnostics Pack 을 사용할 수 없습니다.

Too many open files 에러 트러블슈팅

imcxsu@gmail.com (임창수) — Mon, 20 Mar 2023 21:58:00 +0900

커버 이미지 출처: Stable diffusion “swimming pool lane pattern”

증상

스프링 프레임워크(Spring framework)로 만든 웹 애플리케이션에서 비동기로 HTTP 요청하는 기능을 개발하고 있었습니다. 요구 사항을 위해 동시에 1,000개 이상의 요청을 보낼 때가 있는데, Too many open files 에러가 발생했습니다. 작업 PC(Ubuntu 22.04)에서 문제 없이 동작하던 프로그램이 IDC에 위치한 서버(CentOS 7)에서는 OutOfMemoryError가 발생하면서 동작하지 않았습니다.

java.lang.OutOfMemoryError: unable to create new native thread
...
java.util.concurrent.ExecutionException: com.markruler.RuntimeException: request error
...
Caused by: java.net.SocketException: Too many open files

SocketException인데 Too many open files? 이게 OOM? 이해되지 않았습니다.

엘라스틱서치(Elasticsearch)와 데이터 인덱싱 전략

imcxsu@gmail.com (임창수) — Wed, 21 Dec 2022 22:20:00 +0900

엘라스틱서치(Elasticsearch)는 문서 기반 검색 엔진으로 빠른 키워드 검색 속도를 제공합니다. 엘라스틱서치가 빠른 이유는 문서의 단어(term)들을 역색인(inverted index)하기 때문입니다. 책에서 특정 단어를 찾는 걸 상상해 보죠. 관계형 데이터베이스(RDB, Relational Database)는 LIKE 검색을 통해 검색 키워드가 포함된 모든 페이지를 찾아야 합니다. 엘라스틱서치는 책 뒷부분에 있는 색인(index)을 보고 필요한 페이지만 찾으면 됩니다. 이 글에서는 e커머스 서비스에서 검색 성능을 개선하기 위해 도입한 엘라스틱서치와 인덱싱 전략에 대해 소개합니다.

엘라스틱서치 도입 배경

매일 새벽에 장애가 발생하기 시작했습니다. 유저 트래픽이 주로 새벽에 몰리는데, 이때 DB 레이턴시가 높아져서 모든 서버에 장애가 발생했습니다. 왜 DB 레이턴시가 높았을까요? 현재 서비스에서 트래픽이 가장 많이 발생하는 페이지가 메인, 상품 검색, 상품 상세 페이지입니다. 이 중 검색 페이지에서 쿼리 대기 시간이 길어지고 있었습니다. 원인은 크게 다음과 같습니다.

Jenkins Workspace 동시성 문제

imcxsu@gmail.com (임창수) — Mon, 14 Nov 2022 00:38:00 +0900

개요

Jenkins Pipeline을 사용해서 잡 스케줄러를 실행하기 위해 triggers directive를 사용했습니다.

pipeline {
    agent any

    triggers {
        cron("* * * * *") // HERE
    }

    stages {...}

    post {
        always {
            cleanWs(cleanWhenNotBuilt: false,
                    deleteDirs: true,
                    disableDeferredWipeout: true,
                    notFailBuild: true,
                    patterns: [
                        [pattern: '.git/**', type: 'EXCLUDE'],
                        [pattern: '.gitignore', type: 'EXCLUDE'],
                        [pattern: '.meta/**', type: 'EXCLUDE'],
                    ]
            )
        }
    }
}

해당 Job은 빌드 간 메타데이터(.meta/)를 공유해야 했기 때문에 cleanWs 플러그인에서도 .git 디렉토리와 함께 삭제되지 않도록 설정했습니다.

Tomcat 이해하기

imcxsu@gmail.com (임창수) — Tue, 23 Aug 2022 02:45:00 +0900

Java Servlet, JavaServer Pages(JSP), 그리고 WebSocket과 같은 Java 웹 애플리케이션을 실행할 수 있도록 지원하는 오픈 소스 웹 애플리케이션 서버(서블릿 컨테이너)입니다.

일반적인 웹 서버(Apache HTTP Server, Nginx 등)는 정적 파일(HTML, CSS, JavaScript 등)을 클라이언트에게 제공하지만, Tomcat은 동적인 Java 웹 애플리케이션을 실행할 수 있는 환경을 제공합니다.

역할

Servlet 컨테이너
- Java Servlet을 실행하고 클라이언트의 요청을 처리하여 응답을 반환합니다.
JSP 엔진
- JSP(JavaServer Pages)를 컴파일하고 실행합니다.
웹 애플리케이션 실행
- web.xml 설정 파일을 기반으로 웹 애플리케이션을 관리합니다.
HTTP 요청 처리
- HTTP/HTTPS 프로토콜을 사용하여 클라이언트와 서버 간의 요청-응답을 처리합니다.

구조

X Desktop Group

imcxsu@gmail.com (임창수) — Sun, 21 Aug 2022 23:04:00 +0900

freedesktop.org

XDG는 X Desktop Group의 약자로, freedesktop.org 의 옛 이름입니다.

freedesktop.org hosts the development of free and open source software, focused on interoperability and shared technology for open-source graphical and desktop systems.

freedesktop.org는 오픈 소스 그래픽 및 데스크탑 시스템을 위한 상호 운용성과 공유 기술에 중점을 둔 무료 및 오픈 소스 소프트웨어의 개발을 주도합니다.

Load Balancer를 활용해서 배포 프로세스를 개선해보자

imcxsu@gmail.com (임창수) — Wed, 17 Aug 2022 03:44:00 +0900

개요

현재 팀에서 빌드-배포 도구로 Bamboo를 사용하고 있다. 놀랍게도 개발자가 커밋한 소스 코드를 운영 환경에 반영하기까지 14단계의 수동 작업이 필요했다. 그래서 개발팀 모두가 배포 작업에 많은 부담을 갖고 있었다. 한번 빌드하고 배포하는데 최소 30분에서 길면 1시간까지 걸리는 이 불필요한 시간을 줄이고 싶었다.

JVM 모니터링

imcxsu@gmail.com (임창수) — Mon, 23 May 2022 00:09:00 +0900

개요

모니터링과 타임아웃의 중요성 은 아무리 강조해도 지나치지 않습니다. 회사에서 아주 느린 API(약 15초)를 발견했는데 분명 매일 요청이 있는 데도 2년 동안 방치되고 있었습니다. 이런 API는 사용자가 말해주길 기대하는 것보다 모니터링 도구를 통해 파악하는 것이 좋습니다. 만약 모니터링 설정을 하지 않았다면 API를 수정할 일이 생긴다거나 에러가 발생하지 않는다면 계속 방치되고 있었을 겁니다. 심지어 굉장히 간단한 문제여서 파악하고 수정하는 데에 1시간도 걸리지 않았습니다. 결국 15초 걸리던 API를 100ms까지 줄였죠.

이 글에서는 JVM 모니터링을 위한 도구와 방법에 대해 알아보겠습니다. 가장 먼저 JVM 모니터링을 위한 표준 사양인 JMX부터 알아보겠습니다.

모니터링과 타임아웃의 중요성

imcxsu@gmail.com (임창수) — Wed, 11 May 2022 02:19:00 +0900

상황

현재팀에서 만들고 있는 애플리케이션은 Spring Framework로 작성하고 있다.
계속 특정 애플리케이션과 함께 여러 애플리케이션에서 후속 장애가 발생했다.
장애가 발생할 때마다 특정 API의 커넥션이 끊기지 않고 오랜 시간 유지되고 있었다.

RedisSystemException은 해당 서버를 죽이면서 Redis와 커넥션이 끊어졌기 때문에 발생한 예외다. 만약 서버를 죽이지 않았다면 끝까지 물고 있었을 것이다.

분석

시간만 보고도 Timeout이 설정되어 있지 않다는 것을 확인할 수 있다. 설정하지 않으면 default 값은 -1 로 타임아웃이 발생하지 않는다.

// org.springframework.transaction.support.AbstractPlatformTransactionManager
TransactionDefinition.TIMEOUT_DEFAULT = -1;

하지만 트랜잭션이 왜 저렇게 오래 유지되는지 알 수 없었다. 그래도 서버 장애가 발생하는 이유는 알 수 있었다. TImeout이 발생하지 않다보니 해당 트랜잭션들 사이에 데드락(Deadlock)이 발생했고 하나의 서비스 뿐만 아니라 해당 테이블을 사용하는 모든 서비스에 장애가 발생했다.

깃(Git) CLI 환경에서 소스 코드 관리하기

imcxsu@gmail.com (임창수) — Wed, 01 Dec 2021 23:28:00 +0900

Git의 모든 기능을 지원하는 것은 CLI 뿐이다. GUI 프로그램의 대부분은 Git 기능 중 일부만 구현하기 때문에 비교적 단순하다. CLI를 사용할 줄 알면 GUI도 사용할 수 있지만 반대는 성립하지 않는다. - <Pro Git > Scott Chacon, Ben Straub

Git Internal

차이가 아니라 스냅샷

Commits are snapshots, not diffs

CVS, Subversion, Perforce, Bazaar 등의 시스템은 각 파일의 변화를 시간순으로 관리하면서 파일들의 집합을 관리합니다.

Go 언어로 컨테이너 이미지 빌드하기

imcxsu@gmail.com (임창수) — Sun, 28 Feb 2021 12:49:00 +0900

Ahmet Alp Balkan의 Building container images in Go 를 번역한 글입니다.

저자의 허락을 받고 번역했습니다.

이 글에서는 도커(Docker)를 사용하지 않고 어떻게 OCI 컨테이너 이미지를 만드는지 설명합니다. 이를 위해 go-containerregistry 모듈을 이용해 프로그래밍해서 레이어 및 이미지 매니페스트를 빌드합니다. 예를 들어 nginx 이미지 위에 정적 웹 사이트 콘텐츠를 추가하여 컨테이너 이미지를 빌드하고 Go 프로그램을 사용하는 gcr.io 같은 레지스트리에 푸시하겠습니다.

순서는 다음과 같습니다.

도커 허브에서 nginx 이미지를 가져 옵니다(pull).
기존 /usr/share/nginx/html 디렉터리를 삭제하는 새 레이어를 만듭니다.
정적 HTML 콘텐츠과 애셋으로 새 레이어를 만듭니다.
이미지와 태그에 새 레이어를 추가합니다.
새 이미지를 레지스트리로 푸시합니다.

이 gist 에서 예제 코드를 찾을 수 있습니다. 그럼 자세히 살펴보겠습니다.

책 "컨테이너 보안"

imcxsu@gmail.com (임창수) — Sun, 21 Feb 2021 11:47:00 +0900

한빛미디어의 지원을 받아 작성되었습니다.

거두절미

컨테이너에 관심 있으신 분이라면 필수 소장 도서입니다. 저도 컨테이너, 쿠버네티스, 도커, 클라우드 관련 도서를 많이 읽어봤지만 컨테이너를 이렇게 간명하고 깊게 다루는 책은 없었습니다. 컨테이너 ‘보안’을 설명하기 위해 컨테이너가 어떻게 동작하는지 설명하는 데에 책의 대부분을 차지합니다. 다만 200 페이지에 많은 내용을 압축한 만큼 도해는 많지 않습니다.

먼저 저자의 katacoda(An Introduction to Containers for Go programmers) 로 실습해보시거나 발표(What is a container, really? Let’s write one in Go from scratch) 를 보시길 추천드립니다.

컨테이너 톺아보기

imcxsu@gmail.com (임창수) — Wed, 17 Feb 2021 23:47:00 +0900

거두절미

생각보다 컨테이너는 간단한 게 아닙니다. 컨테이너를 쉽게 생성하고 삭제할 수 있었던 이유는 도커와 같은 컨테이너 관리 도구가 복잡한 것들을 꽁꽁 감췄기 때문입니다. 컨테이너를 공부하면 할수록 알아야 할 게 더 늘어나고 있지만 이쯤에서 유익했던 자료들을 모아 보려 합니다.

참고 자료

👍 필수
- 책 - 컨테이너 보안 , Liz Rice
- katacoda - An Introduction to Containers for Go programmers , Liz Rice
컨테이너
- A Practical Introduction to Container Terminology , Scott McCarty
- Build Your Own Container Using Less than 100 Lines of Go , Julian Friedman
- Implementing Container Runtime Shim: runc , Ivan Velichko
컨테이너 런타임
- 리눅스 컨테이너란? , Daegwon Nacyot Kim
- 흔들리는 도커(Docker)의 위상: OCI와 CRI 중심으로 재편되는 컨테이너 생태계 , 김준석
- Podman and Buildah for Docker users , Red Hat
- Selecting a container runtime for use with Kubernetes , Joe Julian
컨테이너 오케스트레이션
- 컨테이너 오케스트레이션이란? , Red Hat
네임스페이스
- 리눅스 네임스페이스란? , Daegwon Nacyot Kim
- 네임스페이스 , 문영일
- Using Linux Namespaces to Isolate Processes , Scott McCarty
- What’s Next for Containers? User Namespaces , Scott McCarty
- Evolving Container Security With Linux User Namespaces , Netflix
- Improving Kubernetes and container security with user namespaces , Alban Crequy
컨트롤 그룹
- Cgroup Documentation
- Red Hat Resource Management Guide
- Cgroup Driver 선택하기 , ssup
- 사라진 800MB를 찾아서 , Luavis
루트 파일세스템
- Linux Kernel Documentation - ramfs, rootfs and initramfs
- chroot를 사용한 프로세스의 루트 디렉터리 격리 , Daegwon Nacyot Kim
유니온 마운트
- Building container images in Go , Ahmet Alp Balkan (번역중)
- 도커 이미지 빌드 원리와 OverlayFS , Daegwon Nacyot Kim
- A Practical Introduction to Docker Container Terminology , Scott McCarty / Joe Brockmeier
- 투명 셀로판지 이론을 통한 Overlay FS 사용 방법과 유니온 마운트 이해하기 , 최용호
- Union Mount, AUFS, Docker Image Layer , ssup2
- Use the AUFS storage driver , Docker
- Unifying filesystems with union mounts
캐퍼빌리티
- capabilities(7) , Linux manual page
- What is a Capability, Anyway? , Jonathan Shapiro
- 권한을 최소화시키는 리눅스 커널 자격 , 이혜원
- Linux Capabilities: Why They Exist and How They Work , Adrian Mouat
- Linux Capabilities In Practice , Adrian Mouat
컨테이너 네트워크
- UTS 네임스페이스를 사용한 호스트네임 격리 - 컨테이너 네트워크 기초 1편 , Daegwon Nacyot Kim
- ip로 직접 만들어보는 네트워크 네임스페이스와 브리지 네트워크 - 컨테이너 네트워크 기초 2편 , Daegwon Nacyot Kim

리눅스 컨테이너

“A Linux container is a set of 1 or more processes that are isolated from the rest of the system.” Red Hat

최소한의 안전한 Bash 스크립트 템플릿

imcxsu@gmail.com (임창수) — Sun, 14 Feb 2021 15:22:00 +0900

Maciej Radzikowski 가 작성한 Minimal safe Bash script template (2020-12-14) 를 번역한 글입니다.

저자의 허락을 받고 번역했습니다.

Bash 스크립트. 거의 모든 사람들이 언젠가 작성해야 하는 것입니다. 하지만 그 중 누구도 “맞아요, 저는 Bash 스크립트 작성하는 것을 사랑합니다"라고 말하지 않습니다. 거의 모든 사람들이 Bash 스크립트를 작성할 때 주의를 기울이지 않는 이유죠.

저는 여러분을 Bash 전문가로 만들려는 것이 아닙니다 (저도 전문가는 아닙니다). 다만 스크립트를 더 안전하게 만들어 줄 최소한의 템플릿을 보여 드리겠습니다. 저에게 감사해하실 필요는 없어요. 여러분의 미래가 여러분에게 감사해할 것입니다.

쿠버네티스 레벨 트리거링 및 조정

imcxsu@gmail.com (임창수) — Wed, 13 Jan 2021 23:05:00 +0900

James Bowes(@jrbowes )의 Level Triggering and Reconciliation in Kubernetes 를 번역한 글입니다.
저자의 허락을 받고 번역했습니다.

시스템 프로그래밍 개념으로 보는 쿠버네티스가 클러스터를 관리하는 방법

쿠버네티스 는 현재 가장 있기 있는 컨테이너 오케스트레이터입니다. 이런 성공의 밑받침은 신뢰성입니다. 모든 소프트웨어에는 버그가 있죠. 그러나 컨테이너를 실행하는 데 있어서 쿠버네티스는 다른 소프트웨어보다 버그가 적습니다.

CS Visualized: 유용한 깃(Git) 명령어

imcxsu@gmail.com (임창수) — Sat, 09 Jan 2021 08:35:00 +0900

리디아 할리(Lydia Hallie, @lydiahallie )가 쓴 CS Visualized: Useful Git Commands 를 번역한 글입니다.

저자의 허락을 받고 번역했습니다.

Git이 정말 강력한 도구이긴 하지만, 대다수의 사람들은 끔찍한 악몽 😐 같다는 말도 공감할 거에요. 저는 항상 Git으로 작업할 때 어떤 일이 일어날지 머릿속으로 그려보는 것이 꽤 유용하다는 것을 알았습니다. 특정 명령을 실행할 때 브랜치는 어떻게 상호작용하고, 그것이 히스토리에 어떤 영향을 미칠까요? master에서 reset --hard 하고 origin 리포지터리로 force push한 후, .git 폴더를 rimraf하면 왜 저의 팀원은 소리를 지를까요?

CS Visualized: CORS

imcxsu@gmail.com (임창수) — Sat, 02 Jan 2021 08:50:00 +0900

리디아 할리(Lydia Hallie, @lydiahallie )가 쓴 CS Visualized: CORS 를 번역한 글입니다.

저자의 허락을 받고 번역했습니다.

어쩌다 콘솔에서 “fetch 접근이 CORS 정책에 의해 차단되었습니다"라는 커다란 빨간색 오류를 보면 모든 개발자가 짜증을 느낍니다! 😬 임시방편이 몇 가지 있긴 하지만 오늘은 그 어떤 것도 사용하지 않겠습니다! 대신 CORS가 실제로 무엇을 하고 있는지 왜 우리에게 도움이 되는지 알아보도록 하겠습니다. 👏🏼

❗️ 이 글에서는 HTTP 기본에 대해 설명하지 않겠습니다. HTTP 요청과 응답에 대해 더 자세히 알고 싶으시다면 제가 얼마 전에 작성한 짧은 글 이 있습니다. 🙂 제가 사용한 예시에서 HTTP/2 대신 HTTP/1.1을 사용하지만 CORS에 영향을 미치지는 않습니다.

Go로 밑바닥부터 만드는 BitTorrent 클라이언트

imcxsu@gmail.com (임창수) — Mon, 28 Dec 2020 14:46:00 +0900

Jesse Li의 Building a BitTorrent client from the ground up in Go (2020-01-04) 를 번역한 글입니다.

저자의 허락을 받고 번역했습니다.

거두절미(tl;dr): The Pirate Bay를 방문하고 mp3 파일이 나타나기까지 무슨 일이 일어나는 것일까요? 이 글에서는 데비안(Debian)을 다운로드할 수 있을 정도의 비트토렌트 프로토콜을 구현할 것입니다. 바로 소스 코드 를 보거나 마지막 부분 으로 넘어갈 수 있습니다.

비트토렌트(BitTorrent)는 인터넷을 통해 파일을 다운로드하고 배포하기 위한 프로토콜입니다. 다운로더가 중앙 서버와 연결하는 기존의 클라이언트/서버 관계 (예: 넷플릭스에서 영화를 보거나 지금 읽고 있는 웹 페이지를 불러 오는 것)와 달리, 피어(peer) 라고 불리는 비트토렌트 네트워크 참여자들은 서로에게서 파일 조각을 다운로드합니다. 이것이 P2P(peer-to-peer) 프로토콜입니다.

Vim 에디터 명령어 정리

imcxsu@gmail.com (임창수) — Mon, 07 Dec 2020 00:44:00 +0900

서버에서 파일을 편집하기 위해 Vim 에디터를 사용할 일이 많은데, 제가 사용하는 설정과 자주 쓰는 명령어를 정리합니다.

입력 모드 (Insert Mode)

i 현재 커서에서 편집
- Shift + i 현재 줄의 처음으로 커서를 옮긴 후 편집
s 현재 커서 한 글자 삭제 후 바로 입력 모드
- Shift + s 현재 줄 삭제 후 바로 입력 모드
a 다음 칸으로 커서를 옮긴 후 편집
- Shift + a 현재 줄의 끝으로 커서를 옮긴 후 편집
o 다음 줄로 커서를 옮긴 후 편집
- Shift + o 이전 줄로 커서를 옮긴 후 편집

마지막 행 모드 (Last Line Mode)

Last Line Command (:)

:q 종료
:q! 강제 종료
:w 저장
:%s/old/new/gi 문자열 교체 (old -> new)
- g 옵션을 빼면 해당 줄의 첫 번째 문자열만 교체
:! 명령어 실행
- :!ls 현재 디렉토리 파일 목록 출력
- :!pwd 현재 디렉토리 경로 출력
- :!date 현재 시간 출력
:tabnew [file] 새로운 탭 열기 (file이 없으면 빈 탭)
- 실제로는 에디터 밖에서도 사용할 수 있는 tmux나 terminal 자체 기능을 활용하는 편입니다.
- gt 다음 탭으로 이동하기
- gT 이전 탭으로 이동하기

Search mode (/, ?)

/regex-pattern (?regex-pattern) 검색
- n 다음 단어 (?는 반대)
- N 이전 단어 (?는 반대)

명령 모드 (Command Mode)

u - undo
control + r - redo
. - 이전 명령 다시 실행

이동

hjkl 좌하상우 이동
Control + b 이전 페이지로 이동
Control + f 다음 페이지로 이동
Control + u 이전 half page로 이동
Control + d 다음 half page로 이동
gg 문서 맨 앞으로 이동
G 문서 맨 뒤로 이동
^ 현재 줄 앞으로 이동
$ 현재 줄 끝으로 이동

간단한 편집

y 복사 (yank)
p 붙여넣기
> 들여쓰기
< 내어쓰기
Shift + j 현재 줄의 끝과 다음 줄의 앞부분을 합칩니다.

삭제

r 현재 커서 한 글자 교체(replace)
x 현재 커서 한 글자 삭제 (delete)
Shift + x 현재 커서 앞에 한 글자 삭제 (backspace)
:1,.d 첫 번째 줄부터 현재 커서까지 삭제 (LLM)
:5,10d 5번 줄부터 10번 줄까지 삭제 (LLM)
dd 현재 줄 삭제 (이후 p를 통해 삭제한 줄을 붙여넣을 수 있습니다)
- 이동키와 조합해 삭제할 수도 있다.
- 5dd 현재 줄 포함 아래로 5줄 삭제
- dgg 현재 커서에서 첫 줄까지 삭제
- dG 현재 커서에서 마지막 줄까지 삭제
- d$ 현재 커서에서 현재 줄 마지막 단어까지 삭제
- d^ 현재 커서에서 현재 줄 첫 단어까지 삭제
- dw 현재 커서에서 현재 단어까지 삭제

비주얼 모드(visual mode)

v 비주얼 모드
shift + v 비주얼 라인
Ctrl + v 비주얼 블록
- 비주얼 블록 모드에서 Shift + i를 누르면 블록의 첫 줄에 커서가 위치하고, 입력 모드로 전환됩니다.
- 입력을 마치고 ESC를 누르면 블록의 모든 줄에 입력한 내용이 삽입됩니다. (여러 줄을 주석 처리할 때 유용)

화면 분할

탭 기능과 동일하게 터미널 자체 기능을 선호하는 편입니다.
Control + w + s horizontal split
- new horizontal split한 후 새로운 창 생성
Control + w + v vertical split
- vs vertical split한 후 현재 창 복제
Control + w + 방향키 분할된 창 간 이동
Control + w + > 창 폭 늘리기
Control + w + < 창 폭 줄이기
Control + w + + 창 높이 늘리기
Control + w + - 창 높이 줄이기
Control + w + = 창 폭, 높이 원래 상태로
Control + w + o only one window

설정 (.vimrc)

제가 사용하는 설정 파일(~/.vimrc)입니다.

NFV 도커 컨테이너 초심자 가이드

imcxsu@gmail.com (임창수) — Mon, 16 Nov 2020 22:40:00 +0900

Faisal Khan의 A Beginner’s Guide to Docker Container in NFV 를 번역한 글입니다.

저자의 허락을 받고 번역했습니다.

2016년 3월 3일에 쓰여진 글입니다.

떠오르는 도커(Docker) 컨테이너는 NFV를 혁신할 잠재력을 가지고 있습니다. 무엇보다 도커 컨테이너는 가상 머신에 비해 가볍고, 적은 오버헤드와 리소스만을 요구하며, 동일한 운영체제에서 실행되는 애플리케이션을 격리시킬 수 있습니다. 즉, NFV에서 VNF(가상 네트워크 기능)이 도커 컨테이너에서 완전히 격리된 상태로 실행될 수 있다면, 가상 머신이 필요 없을 지도 모릅니다. 하지만 그게 그렇게 쉬울까요?

쿠버네티스 컴포넌트를 로컬에서 직접 빌드 및 디버깅하기

imcxsu@gmail.com (임창수) — Sun, 11 Oct 2020 14:48:00 +0900

직접 빌드해서 사용한다면 쿠버네티스 기능을 확장해서 사용할 수 있다.

Reference

kubernetes/build/README.md

사용할 명령어

# master 브랜치
git clone --depth 1 https://github.com/kubernetes/kubernetes.git
# 특정 브랜치
git clone --depth 1 --single-branch --branch release-1.19 https://github.com/kubernetes/kubernetes.git

# cmd 디렉터리에 있는 다른 컴포넌트도 같은 방식으로 빌드할 수 있다.
# cmd/kubeadm, kubectl, kubelet, kube-apiserver, kube-proxy, kube-controller-manager, kube-scheduler, ...
make all WHAT=cmd/kubectl GOFLAGS=-v

# 그냥 간단히 go build 명령도 가능하다.
go build -o k cmd/kubectl

빌드 실행 따라가기

Makefile

make 명령을 내릴 루트 디렉터리 Makefile을 보면 아래와 같이 다른 Makefile을 가리킨다.

build/root/Makefile

실제로 빌드되는 Makefile

build/root/Makefile

관측 가능성(Observability)

imcxsu@gmail.com (임창수) — Fri, 02 Oct 2020 16:24:00 +0900

관측 가능성 (Observability)

제어 이론에서 시스템의 내부 상태 변수와 그에 따른 행동을 시스템에 대한 입력과 출력만 보고 결정할 수 있다면 그 시스템이 관측 가능하다는 것을 나타냅니다.¹

그렇다면 관측 가능성²이란 시스템의 내부 상태를 외부에서 수집 가능한 데이터(메트릭, 로그, 트레이스 등)를 통해 얼마나 잘 추론하고 이해할 수 있는지를 나타내는 시스템의 속성입니다. 즉, 시스템이 자신의 상태를 얼마나 잘 “드러내는가"를 의미합니다.

NFV의 컴퓨팅 도메인에 대한 오해!

imcxsu@gmail.com (임창수) — Thu, 01 Oct 2020 22:23:00 +0900

Faisal Khan의 The Misunderstood Facts about Compute Domain in NFV! 를 번역한 글입니다.

저자의 허락을 받고 번역했습니다.

NFV에 대해 생각해 보세요! 그리고 x86 프로세서를 생각해 보세요… 둘은 뗄 수 없는 사이입니다. 그렇죠?

프로세서(컴퓨팅 파트)가 아무리 단순하게 들리더라도 NFV의 컴퓨팅 도메인(compute domain)이 노드의 컴퓨팅 프로세서(compute processor)가 같지 않다는 사실을 모르는 사람이 많을 것입니다. 사실… 훨씬 더 많습니다.

NFV의 “Compute Domain"과 “Compute Node"는 ETSI 정의에 따르면 동일한 것을 의미하지 않습니다. 이를 잘 알고 있으면 NFV 기본 아키텍처를 이해하는 데 많은 혼란을 피할 수 있으며, 벤더 및 고객과 이 주제에 대해 소통하는 과정에서 오해를 피할 수 있습니다.

NFV MANO 초심자 가이드

imcxsu@gmail.com (임창수) — Wed, 23 Sep 2020 00:58:08 +0900

Faisal Khan의 A Beginner’s Guide to NFV Management & Orchestration (MANO) 을 번역한 글입니다.

저자의 허락을 받고 번역했습니다.

NFV가 처음이라면 NFV Management & Orchestration (NFV MANO)를 이해하려고 할 때 두 가지 어려운 점이 있습니다.

"NFV 아키텍처" 이해를 위한 치트 시트

imcxsu@gmail.com (임창수) — Tue, 22 Sep 2020 21:58:08 +0900

Faisal Khan의 A Cheat Sheet for Understanding “NFV Architecture” 를 번역한 글입니다.

저자의 허락을 받고 번역했습니다.

시간이 없으신가요?

쉽게 이해할 수 있는 NFV 용어/아키텍처에 대한 빠른 업데이트가 필요하신가요?

그렇다면 NFV 아키텍처를 시작하는 데 필요한 모든 정보를 얻을 수 있는 아래 7가지 주요 블록을 보세요. 블록 번호 및 정의를 따라가세요.

1. VNF (Virtual Network Function)

VNF는 가상화된 네트워크 요소로 NFV 아키텍처의 기본 블록입니다. 예를 들어 라우터를 가상화하면 라우터 VNF라고 부르고, 다른 예는 기지국(base station) VNF도 있습니다. 네트워크 요소의 한 가지 하위 기능(sub-function)만 가상화해도 VNF라고 합니다. 예를 들어 라우터의 다양한 하위 기능은 가상 라우터로서 함께 작동하는 별도의 VNF가 될 수 있다.

쿠버네티스 API 접근 제어

imcxsu@gmail.com (임창수) — Thu, 17 Sep 2020 06:58:08 +0900

쿠버네티스 공식 문서 를 번역했습니다.

이 페이지는 쿠버네티스 API에 대한 접근 제어의 개요를 제공한다.

사용자는kubectl, 클라이언트 라이브러리 또는 REST 요청을 통해 API에 접근한다 . 사용자와 쿠버네티스 서비스 어카운트 모두 API에 접근할 수 있다. 요청이 API에 도달하면, 다음 다이어그램에 설명된 몇 가지 단계를 거친다.

전송 보안

일반적인 쿠버네티스 클러스터에서 API는 443번 포트에서 서비스한다. API 서버는 인증서를 제시한다. 이 인증서는 종종 자체 서명되기 때문에 일반적으로 사용자 머신의 $USER/.kube/config은 API 서버의 인증서에 대한 루트 인증서를 포함하며, 시스템 기본 루트 인증서 대신 사용된다. kube-up.sh을 사용하여 클러스터를 직접 생성할 때 이 인증서는 일반적으로 $USER/.kube/config에 자동으로 기록된다. 클러스터에 여러 명의 사용자가 있는 경우, 작성자는 인증서를 다른 사용자와 공유해야 한다.

MEC 아키텍처 초심자 가이드

imcxsu@gmail.com (임창수) — Sun, 13 Sep 2020 20:58:08 +0900

Faisal Khan의 Beginners Guide to MEC Architecture (Multi-access Edge Computing) 을 번역한 글입니다. 저자의 허락을 받아 번역했습니다.

MEC¹ 아키텍처 가이드에 오신 것을 환영합니다!

MEC는 5G의 저지연(low-latency) 서비스를 활용하려는 이동통신사들의 새로운 투자 물결을 가져올 것입니다. 이는 소비자와 더 가까운 곳, 즉 무선 기지국(radio site)과 가까운 곳에서 서비스를 운영하겠다는 것을 의미합니다.

MEC는 서비스 사업자들에게 새로운 서비스 분야와 수익 창출의 수단입니다. 예를 들어 더 빠른 게임 경험, 증강/가상 현실, 커넥티드 카 등이 있습니다.

About

imcxsu@gmail.com (임창수) — Thu, 10 Sep 2020 00:00:00 +0900

저에 대해

소프트웨어 엔지니어입니다.
컴퓨터로 할 수 있는 것을 좋아합니다.
- 기술 자체에도 관심이 많지만, 그 기술을 통해 무엇을 해결할 수 있는지에 더 큰 관심이 있습니다.
- 이 기술(what)이 어떤 문제를 해결하기 위해 만들어졌는지(why), 어떻게 해결하는지(how)에 관심이 많습니다.
문제를 정의하고 원인을 찾아 컴퓨터로 해결하는 것을 좋아합니다.
- 불편한 것을 당연하게 생각하지 않습니다.
- 해결할 수 있는 소프트웨어를 찾거나 만듭니다.
- (물론 컴퓨터 없이 해결되는 문제도 많습니다.)

블로그에 대해

제가 공부한 내용을 정리한 기술 블로그입니다. 그래서 블로그와 위키가 섞여 있습니다.
- Blog : 개인적인 생각과 경험을 바탕으로 작성했습니다.
- Wiki : 번역물이거나 기술 문서입니다.
완벽한 글을 지향하지는 않습니다.

링크

Email: imcxsu@gmail.com
GitHub: markruler