BeomBeomJoJo

전체보기 (1478)

[인프라] 프로메테우스 메트릭 종류

인프라/그라파나 & 프로메테우스 범범조조 2022. 7. 22. 23:53

참고 https://prometheus.io/docs/concepts/metric_types/ https://gompangs.tistory.com/entry/Prometheus-%EB%A5%BC-%EC%95%8C%EC%95%84%EB%B3%B4%EC%9E%90 개요 프로메테우스 메트릭 종류에 대해서 조사 진행합니다. Counter 값을 나타내는 메트릭인데, "증가" 만 할 수 있은 메트릭이라고 보면 됩니다. 카운터는 값을 증감시키거나, 0으로 초기화해서 다시 시작하거나 하는 기능만 지원을 합니다. 그렇기 때문에 제한적인 부분에만 사용할 수 있습니다. http total send bytes http total request running time Gauge 게이지는 카운터와 개념은 같지만, 값이 "증감" ..

더 읽기

[C#] dotnet Memory 누수 체크

C# 범범조조 2022. 7. 22. 20:51

참고 가비지 수집 기본 사항 배경. 개발한 서비스가 Docker 환경에서 OOM (Out of Memory)가 발생하였다. Widnow에서도 메모리 누수가 일어나는지 확인하기 위하여 dotMemory를 이용하여 누수 체크를 하였다. Visual Studio Dynamic Tool dotMemory 확인결과 GC가 주기적으로 메모리를 잘 지워주고 있다 단서1. 2세대 메모리까지 쌓이지 않는 것으로 봐서 CG가 열일하고 있다. 단서3. 그래프 위쪽에 요동 치는 부분을 보면 확인 가능하다. 가바지 콜렉터 수집 조건. 가비지 수집은 다음 조건 중 하나가 충족될 경우 발생합니다. 시스템의 실제 메모리가 부족합니다. 이는 OS의 메모리 부족 알림 또는 호스트에서 표시되는 메모리 부족을 통해 감지됩니다. 관리되는 힙..

더 읽기

[C# 문법] async 및 await 를 사용한 비동기 프로그래밍

C#/C# 문법 범범조조 2022. 7. 22. 19:48

참고 https://docs.microsoft.com/ko-kr/dotnet/csharp/programming-guide/concepts/async/ 개요 TAP(Task 비동기 프로그래밍) 모델은 비동기 코드에 대한 추상화를 제공하고 있습니다. 항상 그렇듯이 코드는 일련의 명령문으로 작성합니다. 다음 명령문이 시작되기 전에 각 명령문이 완료되는 것처럼 해당 코드를 읽을 수 있습니다. 이러한 명령문 중 일부에서 작업을 시작하고 진행 중인 작업을 나타내는 Task 를 반환할 수 있으므로 컴파일러는 여러 가지 변환을 수행합니다. 예제 시나리오 이 문서에서는 아침 식사를 만드는 지침의 예를 사용하여 일련의 비동기 명령이 포함된 코드에 대해 더 쉽게 추론할 수 있는 방법 async 및 await 키워드를 확인합..

더 읽기

[인프라] PostgreSQL, Grafana 연동하여 Tuple 통계 DashBoard 만들기

인프라/그라파나 & 프로메테우스 범범조조 2022. 7. 17. 03:17

개요 PostgreSQL, Grafana 연동하여 Tuple 통계 관련 DashBoard 만드는 방법에 대해서 정리합니다. Vacuum, AutoVacuum 실행 시간 DashBoard 만들기 Vacuum, AutoVacuum 이 정상적으로 수행이 되었는지 확인하기 위한 DashBoard 를 하나 생성하였습니다. Tuple 통계 DashBoard 만들기 테이블 별 Live Tuple, Dead Tuple 의 현황을 실시간으로 보기 위한 DashBorad 를 하나 생성하였습니다. 실행 결과 실행 결과, 2개의 DashBoard 가 정상적으로 출력되어 보여지는 것을 확인할 수 있습니다.

더 읽기

[인프라] Grafana, Prometheus 시스템 매트릭 모니터링

인프라/그라파나 & 프로메테우스 범범조조 2022. 7. 16. 18:15

참고 https://gurumee92.tistory.com/225 개요 Grafana, Prometheus, node-exporter 를 이용해서 시스템 메트릭을 모니터링 할 수 있도록 대시보드 구축 진행합니다. node-exporter 란 무엇인가? node-exporter 란 UNIX 계열 커널을 가진 하드웨어와 OS 릭 등 "시스템 메트릭" 을 수집하는 Exporter 입니다. Pormetheus 재단이 공식적으로 지원하고 있는 Exporter 중 하나이며, Prometheus 로 모니터링 시스템을 구축 시스템 메트릭 수집을 위해 가장 우선적으로 고려되는 Exporter 이기도 합니다. Exporter 란? 특정 메트릭을 수집해서 엔드 포인트에 노출 시키는 소프트웨어 혹은 에이전트라고 보시면 됩니다..

더 읽기

[인프라] 프로메테우스란?

인프라/그라파나 & 프로메테우스 범범조조 2022. 7. 16. 17:12

참고 https://cumulus.tistory.com/86 https://gurumee92.tistory.com/220 개요 프로메테우스 개념에 대해서 조사 및 정리 진행합니다. 프로메테우스(Prometheus) 란? Prometheus 는 메트릭 수집, 시각화, 알림, 서비스 디스커버리 기능을 모두 제공하는 오픈 소스 모니터링 시스템입니다. 처름에는 SoundCloud 에서 만들어졌으나 2016 년에는 쿠버네티스에 이어 두 번째로 CNCF(Cloud Native Compution Foundation) 산하 프로젝트 멤버로 들어가게 됐습니다. 프로메테우스 대표 기능 Pull 방식의 메트릭 수집, 시계열 데이터 저장 PromQL을 활용하여 저장된 시계열을 쿼리 및 집계 서비스 디스커버리 데이터 시각화 프..

더 읽기

[인프라] PostgreSQL, Grafana, Prometheus 연동하기

인프라/그라파나 & 프로메테우스 범범조조 2022. 7. 15. 20:14

참고 https://github.com/prometheus-community/postgres_exporter https://simpledb.tistory.com/84 https://www.postgresql.kr/blog/prometheus_for_postgres.html 개요 PostgreSQL, Grafana, Prometheus 연동하여 이미 만들어져 있는 PostgreSQL 템플릿을 다운받아서 실시간 데이터 Dash Board 조회 되도록 PoC 진행합니다. Docker-Compose 작성 관리해야 하는 컨테이너들이 많기 때문에 docker-compose.yml 파일을 작성하였습니다. version: '3.4' services: postgres: image: postgres cont..

더 읽기

[인프라] PostgreSQL, Grafana 연동

인프라/그라파나 & 프로메테우스 범범조조 2022. 7. 15. 19:10

개요 PostgreSQL, Grafana 연동하여 간단한 SQL 구문을 작성하여 Grafana Dashboard 에 표현되도록 PoC 진행합니다. PostgreSQL, Grafana Docker-Compose 작성 PostgreSQL, Grafana 모두 Docker Image 를 다운받아 컨테이너로 실행합니다. 2개의 이미지를 포함하는 docker-compose.yml 파일을 다음과 같이 작성하였습니다. version: '3.4' services: postgres: image: postgres container_name: postgres restart: always environment: - POSTGRES_USER=test - POSTGRES_PASSWORD=system - POSTGR..

더 읽기

[PostgreSQL] AutoVacuum 동작 테스트

Database(데이터베이스) 범범조조 2022. 7. 10. 18:08

개요 postgresql.conf 에서 AutoVacuum 관련 설정을 하였다고 가정을 하고, 실제 AutoVacuum 이 정상적으로 동작하는지 테스트 진행합니다. 데이터 삽입 및 수정 테스트 진행을 위해, test 테이블 하나를 생성하고 데이터 Insert 및 Update 를 진행하였습니다. create table test (a int, b int); alter table test set (autovacuum_enabled = false); -- autovacuum 비활성화 insert into test select generate_series, generate_series from generate_series(1, 100000); \dt+ test -- table 크기 : 3568 kB(10만건) /..

더 읽기

[PostgreSQL] 아카이브 모드 백업을 이용한 특정 시점 복구 시나리오(Point In Time Recovery(PITR))

Database(데이터베이스) 범범조조 2022. 7. 10. 17:06

절차 아카이브 모드 백업을 이용하여 특정 시점(PIRT) 으로 복구를 할 수 있습니다. 해당 부분에 대한 시나리오를 수립하여 복구 진행 합니다. 아카이브 모드 백업을 이용한 특정 시점 복구 시나리오 아카이브 모드 백업을 이용한 특정 시점 복구 시나리오를 정리해 보도록 하겠습니다. Docker 컨테이너 실행 PostgreSQL Docker-Compose 를 실행합니다. > docker-compose up Dockar Container Bash 접근 Docker Container 정상 실행 되면, 아래 명령어를 통해 bash 로 접속합니다. > docker exec -it postgres bash 계정 변경 계정 변경을 진행합니다. root@d5f06b09198b:/# su - postgres postgre..

더 읽기

[PostgreSQL] 아카이브 모드 백업을 이용한 전체 복구 시나리오

Database(데이터베이스) 범범조조 2022. 7. 8. 00:40

참고 https://mozi.tistory.com/560?category=1003665 절차 서버가 실행중이라면 서버를 중지합니다. 운영에 사용되던 기존 경로에 있던 파일들을 다른 경로로 저장합니다. (원본 파일은 항상 보관하도록 설정) 기존 경로에 있던 폴더/파일을 전부 삭제합니다. 백업받은 파일(pg_wal 경로 제외)을 기존 위치에 복사합니다. 이 때 파일 소유자나 권한 등은 동일해야 합니다. pg_wal 경로는 복구작업을 진행하면서 자동으로 만들어집니다. 만약 WAL 백업파일이 없다면, 2단계에서 복사한 pg_wal 경로의 로그파일을 기존 경로로 복사합니다. 데이터베이스 클러스터 디렉터리 안에 recovery.signal 파일을 만듭니다. 서버를 실행합니다. 서버가 복구모드로 구동되면서 필요한 W..

더 읽기

[PostgreSQL] 아카이브 모드 백업

Database(데이터베이스) 범범조조 2022. 7. 7. 21:36

개요 PostgreSQL 에서는 아카이브 모드 백업을 하여 데이터를 복원할 수 있습니다. postgresql.conf 파일을 이용하여 아카이브 모드 백업을 진행하는 방법을 정리 합니다. postgresql.conf 파일 옵션 설정 postgresql.conf 파일에서 Archiving 태그를 찾고 여기서 archive_mode, archive_command 2개의 옵션을 설정해 줍니다. archive_command : WAL 파일을 아카이브 시키는 명령어 (%p : WAL 파일의 절대 경로, %f : 저장할 로그 파일의 이름) archive_command = 'cp %p 아카이브 파일을 저장할 곳%f' archive_mode : on - WAL 파일이 archive_command 설정에 따..

더 읽기

Copyright © BeomBeomJoJo All Rights Reserved

Designed by JB FACTORY

티스토리툴바