argocd의 3-way diff 로 인한 이슈
최근 Kubernetes 환경에서 ArgoCD와 HPA(Horizontal Pod Autoscaler)를 함께 사용하던 중 프로덕션 환경에서 배포 도중 순간적인 Latency 증가와 요청 실패가 발생했다 non-production…
모든 글
29 posts
netty epoll_wait(..) failed: Function not implemented 에러 발생
TL; DR epoll_wait(..) failed: Function not implemented가 발생하면 netty 4.1.77.Final…
nf_conntrack_max 값이 kube-proxy에 의해 /etc/sysctl.conf 값이 아닌 의도하지 않은 값으로 업데이트
TL; DR kube-proxy 가 기동될 때 kernel의 nf_conntrack_max 파라미터 값이 업데이트될 수 있다 이슈 원인 전 회사에서 근무 도중 다른 팀에서 간헐적으로 극소수의 요청이 실패하는 경우가 있었으나 APM…
k8s와 /etc/resolv.conf
요약 k8s는 클러스터 내부에 등록된 도메인 리졸빙을 위해 pod의 /etc/resolve.conf에 search domain 및 ndots…
강제로 레플리카 레디스를 마스터로 승격시키기
요약 센티널이 failover-abort-no-good-slave 경고와 함께 페일 오버를 수행하지 못하는 경우 직접 관련된 레플리카 레디스에 들어가 replicaof no one…
hbase sharded client 1.2 dns 과다 질의 이슈
요약 hbase sharded client 1.2에는 hbase.resolve.hostnames.on.failure 옵션이 있다 동일 호스트명에 ip가 바뀌어 리전 서버가 투입되는 경우가 없다면 false로 하여 불필요한 dns…
redis lettuce client extended keepalive 옵션
요약 redis는 client - server간 어플리케이션 단에서 별도로 heartbeat packet을 통해 커넥션 유효 여부를 판단하지 않는다 커넥션이 유효하지 않은지를 판단하려면 lettuce의 keepalive…
dbcp2 pool idle configuration이 있는데도 communicationsException 발생 원인 파악
db…
2021년 CKA 자격증 취득 후기
후기 이번 주 금요일(2021.04.16)에 신청만 해두고 미뤘던 CKA…
AvailablityProbesAutoConfiguration에 대해 알아보자(spring boot readiness, liveness 관련)
서두 spring boot에서는 2.3부터 컨테이너 헬스 체크를 위한 probe 관련 엔드포인트를 노출합니다. (링크) 별도 프로퍼티 설정 없이 해당 기능을 잘 사용하고 있었는데요. 배포 직후 첫 번째 probe…