약 한달 전부터 진행한 라즈베리파이 + 쿠버네티스 환경 설치 초기에,
쿠버네티스가 라즈비안 64bit 환경에서 설치가 잘 되지 않아 32bit 로 재설치를 진행한 적이 있습니다.
2022.08.02 - [Raspberry pi] - 라즈베리파이4 라즈비안 64bit 쿠버네티스 설치 실패
다행히 32bit 환경에서는 정상적으로 모든 설치가 되고 클러스터링도 완료를 하였는데요.
2022.08.17 - [Raspberry pi] - 라즈베리파이 2대 쿠버네티스 클러스터링 구성 완료
그리고 나서 내친김에 Prometheus 와 Grafana를 설치하여 모니터링도 고도화 하였구요.
2022.08.25 - [Raspberry pi] - 라즈베리파이 쿠버네티스에 Prometheus + Grafana 올리기
그런데, 마지막으로 Grafana Loki 를 설치하는 중에, 문제가 발생했습니다.
설치는 Helm을 통해 아주 편하게 했죠. 그런데....
바로 아래와 같은 에러가 찍히면서 Loki Pod가 종료됩니다.
panic: unaligned 64-bit atomic operation
구글링을 좀 해보니, 32bit 는 더이상 지원안한다는 얘기가 있네요.
https://github.com/grafana/loki/issues/5388
결국 컴파일 설치를 해야하는건가 여러가지 방법을 찾으면서, github를 들락거리고 있는데,
문득 눈에 들어옵니다. no longer runs....
그럼 이전 버전에서는 되었다는 이야기....
그래서 설치된 loki와 promtail의 yaml을 추출해서 image 버전을 낮춰 보기로 했습니다.
kubectl -n logging get statefulsets.apps loki -o yaml > statefullset.yaml
kubectl -n logging get daemonsets.apps loki -o yaml > daemonset.yaml
statefullset.yaml
.
.
.
spec:
containers:
- args:
- -config.file=/etc/loki/loki.yaml
image: grafana/loki:2.6.1
imagePullPolicy: IfNotPresent
.
.
.
daemonset.yaml
.
.
.
spec:
containers:
- args:
- -config.file=/etc/promtail/promtail.yaml
env:
- name: HOSTNAME
valueFrom:
fieldRef:
apiVersion: v1
fieldPath: spec.nodeName
image: docker.io/grafana/promtail:2.6.1
imagePullPolicy: IfNotPresent
.
.
.
릴리즈 노트를 보면서...
https://github.com/grafana/loki/releases
현재는 2.6.1이고, 2.6.0으로 변경해서 다시 배포해보구요.
.
.
.
마찬가지로 에러가 발생합니다.
그럼 2.5.0....
에러 발생..
2.4.2...
.
.
.
엇..
안 죽습니다.
NAME READY STATUS RESTARTS AGE
loki-0 1/1 Running 0 15m
loki-promtail-br68d 1/1 Running 0 15m
loki-promtail-qllgk 1/1 Running 0 15m
잘 동작하네요.
결국 버전을 2.6.1에서 2.4.2로 낮춰서 에러를 해결했습니다.
메이저 버전이 2.0이 넘어가는데 무슨 큰문제야 있겠습니꽈?
'Miscellaneous' 카테고리의 다른 글
Grafana 멀티 데이터소스, 멀티 필드 그래프 스타일 다르게 만들기 (0) | 2022.09.26 |
---|---|
Grafana 멀티 데이터소스 하나의 차트에 같이 표시하기 (0) | 2022.09.07 |
[삽질의 추억] 쿠버네티스나 도커 안에서 WOL(Wake On Lan) 안될 때 (0) | 2022.08.23 |
[삽질의 추억] 쿠버네티스 추가 볼륨, 추가 콘피그맵이 안붙을 때 (0) | 2022.08.22 |
시놀로지 git 서버 최초 레포지토리 생성 (0) | 2022.08.11 |