티스토리

토고미의 잡동사니

검색하기

블로그 홈

토고미의 잡동사니

togomi.tistory.com/m

토고미 님의 블로그입니다.

구독자: 2

방명록 방문하기

주요 글 목록

Go 테스트 코드 깔끔하게 작성하기 go에서 테스트 코드를 작성하는 방법은 여러가지가 있다.개인적인 취향으로는 이런 테스트 코드가 가독성도 높고, 결과를 보기도 쉬웠다. 먼저 main 코드다// main.gopackage mainimport "fmt"func main() { fmt.Println("Hello World!")}// 테스트할 함수의 결과 값 유형을 정의type BodyType int const ( normal BodyType = 1 small BodyType = 2 tall BodyType = 3 none BodyType = 4)// 테스트할 함수의 input 구조체type Person struct { Name string Age int Body *Body}type Body struct { height int weigh.. 공감수 0 댓글수 1 2024. 8. 28.
go gRPC 서버 테스트 코드 도움되는 글 https://medium.com/@3n0ugh/how-to-test-grpc-servers-in-go-ba90fe365a18 How to Test gRPC Servers in GoIn this article, I will show how to create a gRPC server and then write the tests for it.medium.com bidirectional stream 서버 테스트 코드도 정리되어있음 공감수 0 댓글수 0 2024. 7. 25.
나에게 큰 영향을 준 책들 최근 데일 카네기의 『인간관계론』을 읽다 보니, 내가 지금까지 읽었던 책들의 주제와 이어져 있는 느낌이 들었다.『미움받을 용기』와 『번뇌 리셋』이다.마치, [인간 행동의 원리] - [원리를 이용한 타인 컨트롤] - [원리에 휘둘리지 않도록 자신 컨트롤] 시리즈 같다.1. 『미움받을 용기』『미움받을 용기』부터 얘기하자면, 이 책은 3대 심리학자로 유명한 알프레드 아들러의 심리학 이론을 대화형으로 쉽게 풀어낸 책이다.이 책에서는 사람이 행복을 느끼는 근원이 무엇인지 한 문장으로 알려준다."행복은 공헌감" 이다. 사람은 누군가에게 자신이 도움이 된다는 것에 행복을 느끼고, 그 행복을 채우려는 욕구를 느낀다.그리고 그 욕구에 따라 행동하게 된다.여기서 공헌감은 그 사람의 가치관에 따라 천차만별이다. 물론 다른.. 공감수 0 댓글수 0 2024. 5. 20.
IDE로 코드 리뷰할때 개인적인 팁 일단 git 웹 뷰로는 솔직히 코드 리뷰 하기가 힘들다. 딱 바뀐 부분만 나오기 때문이다. 그래서 git clone 하여 개인 IDE로 열어서 해당 브랜치로 checkout 하여 보는데 막상 그렇게하면 어디가 바뀌었는지 알기가 쉽지 않다. vscode에서는 unstage 상태의 변경사항(add가 되지 않은 변경사항)은 표시해준다. 그러면 commit된 것들을 unstage로 되돌리면 된다. 먼저 git log 명령어로 어디까지 되롤릴지 확인한다 > git log commit a9d21cb2bebc66cdb811693ae61f8dd0b45703cf (HEAD -> https) Author: Seungwon Lee Date: Tue Jul 26 16:41:51 2022 +0900 Add TLS option .. 공감수 0 댓글수 4 2024. 4. 18.
Go에서 배열 구조체를 포함한 구조체의 값 변경할 때 주의사항 Go에서 이미 값이 할당된 다중 구조체(nested structure)의 내부 배열 구조체에 어떤 값을 변경할 때는 for 문에서 인덱스를 사용해서 직접 접근해야한다. 가끔 습관적으로 for k, v := range S 를 하며 v를 통해 값을 할당하는 실수를 저지르게 된다. type Outer struct { name string inner []Inner } type Inner struct { A int B int } func changeInner() { outer := Outer{ name: "togomi", inner: []Inner{ { A: 5, B: 6, }, }, } for k, v := range outer.inner { // 잘못된 방법 v.A = 1 v.B = 2 // 옳은 방법 out.. 공감수 0 댓글수 0 2023. 12. 14.
golang http connection(socket) 재사용하기 회사에서 부하테스트를 하던 도중 겪은 일이다. 부하를 주는 클라이언트가 할당된 리소스도 다 사용하지 못하고, 기대하던 RPS도 나오지 않는 현상이 있었다. netstat 명령어로 확인 결과 상당 수의 소켓의 status가 TIME_WAIT 인 것을 발견했다. TIME_WAIT은 연결은 종료된 상태지만, 바로 소켓을 반납하지 않고 혹시나 송신측에서 데이터를 보낼 수 있는 것을 기다리는 상태이다. 내가 기대했던 바는 소켓을 종료하지도, 반납하지도 않고 다음 통신에 재사용하는 것이다. 사실 해결법은 정말 간단하다. go http 패키지는 기본적으로 소켓 재사용 정책이 적용되어있기 때문에, 아래 사항만 모두 지켜주면 된다. response body를 전부 읽는다. body를 close한다. 중요해서 볼드체로 했.. 공감수 0 댓글수 0 2023. 6. 22.
Kubernetes 사용을 편리하게 해주는 툴 k9s 원래는 일일히 kubectl 명령어 치는 것을, 한 번의 키입력으로 가능하게끔 해주는 툴 정말 편하다 설치 방법 K9S_VERSION=v0.26.7 curl -sL https://github.com/derailed/k9s/releases/download/${K9S_VERSION}/k9s_Linux_x86_64.tar.gz | sudo tar xfz - -C /usr/local/bin k9s 사용법 k9s kubectx 다루는 k8s 클러스터가 많을 때 컨텍스트 변경을 쉽게 해주는 툴 ~/.kube/config에 여러 클러스터를 기술하고, kubectx로 변경한다. 설치 방법 wget https://github.com/ahmetb/kubectx/releases/download/v0.9.4/kubec.. 공감수 0 댓글수 0 2023. 2. 20.
leetcode 260. Single Number III C++ 문제 : Given an integer array nums, in which exactly two elements appear only once and all the other elements appear exactly twice. Find the two elements that appear only once. You can return the answer in any order. You must write an algorithm that runs in linear runtime complexity and uses only constant extra space. class Solution { public: vector singleNumber(vector& A) { int x = 0; for (int n .. 공감수 0 댓글수 0 2023. 1. 16.
카카오 2023 Blind Recruitment 택배 배달과 수거하기 c++ #include #include using namespace std; long long solution(int cap, int n, vector deliveries, vector pickups) { long long deli_sum = 0; long long pick_sum = 0; for(auto d : deliveries) deli_sum += d; for(auto p : pickups) pick_sum += p; long long answer = 0; int longest = n-1; while(deli_sum > 0 || pick_sum > 0){ int c1 = cap; int dist1 = 0; int c2 = cap; int dist2 = 0; for(int i=longest; i>=0; i.. 공감수 0 댓글수 0 2023. 1. 10.
k8s client-go leader election 코드 메커니즘 분석 개념 leader election이란 말 그대로 리더를 선출하는 것으로, CS에서 자주 쓰이는 개념이다. kubernetes go client에서는 이러한 leader election 기능을 제공한다. 아래는 k8s go client가 사용하는 leader election 방식에 대한 간단한 그림이다. 특정 리소스(그림 상에서 Lock)에 대해서 소유권이 자신에게 있다고 작성하는 사람이 leader이다. 일단 leader가 되면 leader는 주기적으로(그림 상에서 leaseDuration) 자신이 아직도 리더임을 갱신한다.(그림 상에서 lastObservedTime) leader가 되지 못한 나머지는 주기적으로 그 리소스를 확인하다가, 한 주기가 지났는데도 리더가 갱신을 못했을 시 소유권이 자신에게 있.. 공감수 1 댓글수 0 2022. 11. 9.
kubectl에서 user token 사용하기 (keycloak oidc) kubectl에서 --token 옵션은 service account 토큰만 가능하다. 하지만 만약 k8s가 oidc 연동 중이라면 kubectl로 user token도 사용할 수 있다. 방법은 service account 토큰 사용법과는 조금 다르다. 1. kube-apiserver.yaml 확인 apiVersion: v1 kind: Pod metadata: ... spec: containers: - command: ... - --oidc-issuer-url=https://{KEYCLOAK 주소}/auth/realms/{REALM 이름} - --oidc-client-id=my-client - --oidc-username-claim=preferred_username - --oidc-username-pref.. 공감수 2 댓글수 0 2022. 10. 10.
k8s client-go custom resource 생성(post 사용 시 주의점) k8s client go에서 custom resource를 생성하기 위해서는 abspath()와 post()를 사용해야 한다. k8s client go도 내부적으로는 kube-apiserver에게 REST api 콜을 보내는 것이므로, kube-apiserver의 규칙에 따라야 한다. kongPlugin이라는 custom resource 생성 시 아래와 같이 하면 된다. kongPlugin := &KongPlugin{ TypeMeta: metav1.TypeMeta{// 1 APIVersion: "/", Kind: "KongPlugin", }, ObjectMeta: metav1.ObjectMeta{ Name: "kongplugin-sample", Namespace: "", }, ...}} body, err.. 공감수 0 댓글수 0 2022. 9. 15.
kubernetes 환경에서 Postgres streaming replication 설정 이전 글에서 이어진다. https://togomi.tistory.com/76 kubernetes 환경에서 Postgres migration 백업 & 복원 들어가기에 앞서.. 이 글은 k8s 환경에서 postgres의 데이터를 migration 하는 방법입니다. 이하의 글은 수동으로 하는 방법이며, 쉘 스크립트를 이용해 자동으로 하고 싶다면 아래 github을 참고해주세 togomi.tistory.com 이전에는 파일을 통해 스냅샷 백업/복원이었다면, 이번에는 postgres의 streaming replication 기능을 이용한 실시간 sync이다. 1. 원본 postgres에서 replication 유저 생성 원본 postgres 내부로 접속 kubectl -n {네임스페이스} exec -it {POD.. 공감수 0 댓글수 0 2022. 8. 18.
kubernetes 환경에서 Postgres migration 백업 & 복원 들어가기에 앞서.. 이 글은 k8s 환경에서 postgres의 데이터를 migration 하는 방법입니다. 이하의 글은 수동으로 하는 방법이며, 쉘 스크립트를 이용해 자동으로 하고 싶다면 아래 github을 참고해주세요. https://github.com/aldlfkahs/postgres-migration GitHub - aldlfkahs/postgres-migration: Automate postgres(timescaledb) backup & restore Automate postgres(timescaledb) backup & restore. Contribute to aldlfkahs/postgres-migration development by creating an account on GitHub. g.. 공감수 0 댓글수 0 2022. 8. 17.
Linux cpu, memory, storage 정보 확인 CPU 모델 cat /proc/cpuinfo | grep 'model name' | uniq CPU 갯수 grep 'physical id' /proc/cpuinfo | uniq | wc -l CPU 코어 갯수 grep 'cpu cores' /proc/cpuinfo | uniq 메모리 free -h 디스크 종류 확인 lsblk -d -o name,rota 0 : SSD, 1 : HDD 디스크 용량 확인 fdisk -l 출처 https://goldsony.tistory.com/44 https://m.blog.naver.com/PostView.naver?isHttpsRedirect=true&blogId=varkiry05&logNo=221417153960 공감수 0 댓글수 0 2022. 8. 12.
k8s kubelet forbidden sysctl: not whitelisted 에러 해결 kafkaconnect의 커널 파라미터 설정을 하는데 kubelet에 의해 다음과 같은 에러가 발생했다. forbidden sysctl: "net.ipv4.tcp_retries2" not whitelisted kubelet은 default로 몇몇 sysctl은 허용하지만, 위험한 sysctl은 막는다. 따라서 kubelet 설정에 해당 sysctl을 허용해주어야 한다. 1. Kubelet 설정 파일 위치 찾기 systemctl status kubelet 위 명령어를 치면 아래와같이 나온다 /var/lib/kubelet/config.yaml에 위치하는 것을 알 수 있다. 2. allowedUnsafeSysctls 추가 해당 파일을 연 후 아래와 같이 수정한다. apiVersion: kubelet.confi.. 공감수 0 댓글수 0 2022. 7. 18.
Bash를 이용해 여러 파일의 내용을 치환하기 변수 명이 변경되거나 URL 주소가 바뀌는 등, 여러 파일에서 참조하는 값의 이름이 변경되는 경우가 있다. 보통 sed를 이용하면 바꿀 수 있지만 하위 디렉토리까지 재귀적으로는 할 수없다. 하지만 grep과 sed를 같이용하면 recursive하게 하위 디렉토리의 파일까지 내용을 바꿀 수 있다. grep -rl 기존문자열 . | xargs sed -i 's/기존문자열/수정후문자열/g' 이렇게 하면 해당 디렉토리부터 하위 디렉토리까지 모든 파일을 탐색하며 {기존문자열} → {수정후문자열}로 바꾼다. 만약 특정 확장자인 파일의 내용만 치환하고 싶으면 아래와 같이 --include 옵션을 쓰면된다. grep -rl 기존문자열 --include \*.go | xargs sed -i 's/기존문자열/수정후문자열/.. 공감수 0 댓글수 0 2022. 7. 15.
Go API server template + Dockerfile & yaml 예전에 만들어둔 Golang API 서버 템플릿을 공유한다. https://github.com/aldlfkahs/go-api-server-template GitHub - aldlfkahs/go-api-server-template Contribute to aldlfkahs/go-api-server-template development by creating an account on GitHub. github.com 간략한 코드 설명은 아래와 같다. func main() { mux := http.NewServeMux() mux.HandleFunc("/test", serveTest) mux.HandleFunc("/hello", serveHello) klog.Info("Starting Go test api ser.. 공감수 0 댓글수 0 2022. 7. 9.
golang convert []byte(byte array) to map[string]interface{} 모르는 json 형식이 들어왔을 때는 이전에 내가 쓴 글처럼 하면된다. https://togomi.tistory.com/48 golang convert json to interface go에서 json을 파싱할때 struct 구조를 모르거나, 키값 하나만 필요한데 struct는 너무 커서 곤란할 때가 있다. 그럴 땐 interface를 통해 파싱하면 간편하다. exampleJson이라는 변수에 json string이 담겨있다 togomi.tistory.com 하지만 위의 글에서는 인풋이 string이라는 전제가 깔려있다. 이런 전제가 만족되지 않는 경우가 있다. http post의 request body를 처리하다가 이 이슈를 겪었다. request를 처리하는 서버 쪽에서는 []byte 형식으로 들어올 .. 공감수 0 댓글수 0 2022. 6. 22.
코딩테스트 준비하기 좋은 사이트 프로그래머스 고득점 kit https://programmers.co.kr/learn/challenges?tab=algorithm_practice_kit 코딩테스트 연습 기초부터 차근차근, 직접 코드를 작성해 보세요. programmers.co.kr leetcode top interview question (easy, medium, hard) https://leetcode.com/explore/featured/card/top-interview-questions-easy/ Explore - LeetCode LeetCode Explore is the best place for everyone to start practicing and learning on LeetCode. No matter if you are.. 공감수 0 댓글수 0 2022. 6. 21.
카프카 개념 잘 정리된 블로그 https://always-kimkim.tistory.com/category/%EA%B0%9C%EB%B0%9C%EC%9E%90%20%EB%9D%BC%EC%9D%B4%ED%94%84/%EC%B9%B4%ED%94%84%EC%B9%B4 '개발자 라이프/카프카' 카테고리의 글 목록 카프카에 관심이 많은 개발자와 엔지니어 그 어딘가..? always-kimkim.tistory.com 공감수 0 댓글수 0 2022. 6. 7.
kubectl copy multiple files pod to local pod 안의 여러개의 파일을 local 노드로 한 번에 옮기려했는데 kubectl cp는 wildcard(*)를 지원하지 않는다. kubectl cp 는 내부적으로 tar 명령어를 쓴다. kubectl exec를 통해 tar를 직접쓰면 wildcard 사용이 가능하다. kubectl exec -n -- bash -c "tar cf - /*" | tar xf - -C 예시) kubectl exec -n swlee my-pod -- bash -c "tar cf - /path/to/files/*" | tar xf - -C . 공감수 0 댓글수 0 2022. 5. 24.
프로그래머스 완전탐색 소수찾기 c++ 문제 링크 : https://programmers.co.kr/learn/courses/30/lessons/42839# 코딩테스트 연습 - 소수 찾기 한자리 숫자가 적힌 종이 조각이 흩어져있습니다. 흩어진 종이 조각을 붙여 소수를 몇 개 만들 수 있는지 알아내려 합니다. 각 종이 조각에 적힌 숫자가 적힌 문자열 numbers가 주어졌을 때, 종이 programmers.co.kr 코드 #include #include #include #include using namespace std; map M; bool isPrime(string num){ int n = stoi(num); if(M[n]) return false; // 이미 확인한 수라면 중복이기 때문에 false 리턴 M[n] = true; if(n =.. 공감수 0 댓글수 0 2022. 3. 31.
Strimzi Kafka Operator의 kafka connect로 Mysql to Postgres migration kafka connect란 일종의 api 서버로서, 카프카의 클라이언트를 대신하여 데이터를 브로커에게 pub/sub 한다. connect와 connector, schema registry에 관한 것은 스킵하겠다. 모르겠으면 구글링! 아니면 조만간 내가 글을 쓰고 여기에 링크를 걸든가.. 쉽게 생각하면 여러 개의 클라이언트가 난잡하게 카프카 브로커에 접근하는 것을 카프카 커넥트라는 api 서버가 통합 관리하는 것이라 생각하면 된다. 그리고 그 api 서버에 뚫려있는 api가 connector이다! ======= 이 글의 목적은 k8s 환경에서 strimzi kafka operator를 이용하여 kafka 및 kafka connect를 프로비저닝 한 뒤, 같은 k8s 환경에 존재하는 mysql로부터 post.. 공감수 0 댓글수 6 2022. 3. 18.
Kubernetes Local PV 개념 rook-ceph 같은 모듈을 사용하지 않고, k8s 클러스터를 구성하는 노드들의 로컬 스토리지를 볼륨으로서 이용하는 방법이 있다. 바로 LocalPV이다. HostPath와 LocalPV를 헷갈릴 수 있는데, 둘의 가장 큰 차이점은 쿠버네티스 스케줄러가 PV가 어느 노드에 속한지를 알고있다는 것이다. HostPath의 경우에는 pod가 재기동 될 때, 다른 노드에 스케줄링이 될수 있기 때문에 정상 동작을 보장할 수 없다. 하지만 LocalPV는 쿠버네티스 스케줄러가 PV의 위치를 고려해서 pod의 스케줄링을 해준다. 역으로 생각하면 pod가 특정 노드에 뜨도록 강제할 수도 있다는 것이다. 물론 NodeSelector를 사용하는 방법도 있지만, statefulset 같이 pod를 개별적으로 설정하기.. 공감수 0 댓글수 0 2022. 3. 7.
ingress nginx controller port(tcp) based routing Ingress는 기본적으로 L7 레이어 즉, http기반의 라우팅을 해준다. 아래 yaml 예시 처럼 path 하나가 이미 특정 서비스의 "포트"까지 바인딩 되어있다. ... spec: rules: - http: paths: - path: /togomi/ backend: serviceName: my-service servicePort: 11037 ... 하지만 port를 직접 명시하길 원하는 경우가 있을 수도 있다. 나의 경우에는 redis-cli를 이용해 클러스터링을 하는데에 필요했다. 깊게 따져보면 redis-cli의 잘못이긴 하지만, 옵션으로 넘겨주는 호스트 형식이 반드시 {IP}:{PORT}여서 L7 라우팅으로는 할 수 없었다. 아무튼 port based routing을 해보자. TCP routi.. 공감수 1 댓글수 0 2022. 2. 24.
k8s dockerhub imagePullSecrets 만들기 및 적용 아래와 같은 에러로 dockerhub에서 이미지를 받아오는데 실패하는 때가 있다. toomanyrequests: You have reached your pull rate limit. You may increase the limit by authenticating and upgrading: https://www.docker.com/increase-rate-limit dockerhub는 IP기반으로(정확하진 않음) pull limit을 제한 한다. 정책은 아래와 같다. 로그인하지 않거나 따로 결제를 하지 않은 계정은 6시간에 200회 제한이 있다. 어쨌든 지불한 계정이 있다고 가정하고, 로그인을 해보자. 단순하게 docker 자체만 이용하는거면 docker login 명령어를 통해서 하면 되지만, k8s의 .. 공감수 0 댓글수 0 2022. 2. 8.
ubuntu에 특정 k8s, crio 버전 설치하기 회사에서는 centOS를 사용하는데, 개인 서버에서는 우분투를 깔아놔서 설치법이 조금 달라서 애먹었다. 게다가 docker가 아닌 crio라서 조금 더 힘들었음 설치 버전 ubuntu 18.04 kubernetes 1.19.4 crio 1.19.2 아래 명령어를 통해 자신의 OS 버전 확인 가능 cat /etc/os-release 설치 순서(공통) swap 파티션 비활성화 sudo swapoff -a vi /etc/fstab /etc/fstab 파일의 swap 관련 부분을 주석처리 한다. /swapfile ~ 부분 # /etc/fstab: static file system information. # # Use 'blkid' to print the universally unique identifier fo.. 공감수 0 댓글수 0 2022. 1. 3.
k8s QoS Class 개념 k8s에서 pod에는 QoS Class라는 것이 있다. Qos는 Quality of Service의 약자로서 서비스 품질이라는 뜻이며, k8s에서 pod의 스케줄링과 제거 우선순위를 판단하는데 사용되는 값이다. 종류는 세 가지뿐이다. - Guaranteed - Burstable - Best-Effort 동작 방식 노드에 가용 리소스가 부족해지면 누군가는 희생되어야 한다. 이 때, k8s 스케줄러는 QoS Class를 보고 어떤 pod를 희생시킬지 판단한다. kubelet은 Best-Effort를 가장 먼저 종료 시키고, Best-Effort가 없다면 Burstable을 강제 종료 시킨다. 간단히 설명하면 위와 같지만 정확히 설명하자면, QoS Class를 보고 판단하다기 보다는 QoS Class에 .. 공감수 0 댓글수 0 2022. 1. 3.
secret 생성 시 주의사항 redis 관련 업무를 하다가 환경변수를 secretKeyRef을 이용할 상황이 생겼다. env: - name: REDIS_PASSWORD valueFrom: secretKeyRef: name: redis-secret key: redis-password 그런데 아무리 제대로 해봐도 에러가 나는 것이다. 열심히 구글링 한 결과, 원인은 개행문자였다. 아래 두 시크릿을 만들어보자. apiVersion: v1 kind: Secret metadata: name: sample-secret type: Opaque stringData: sample-key: | sample-value --- apiVersion: v1 kind: Secret metadata: name: sample-secret2 type: Opaque.. 공감수 0 댓글수 0 2021. 11. 17.

문의안내

티스토리
로그인
고객센터

티스토리는 카카오에서 사랑을 담아 만듭니다.