BeomBeomJoJo

전체보기 (1478)

[Infra] OpenTelemetry 및 Prometheus 연동하기

인프라 범범조조 2022. 8. 19. 23:03

참고 https://docs.microsoft.com/ko-kr/dotnet/core/diagnostics/metrics-collection 개요 OpenTelemetry 는 클라우드 네이티브 소프트웨어에 관한 원격 분석 생성 및 수집의 표준화를 목표로 하는 Cloud Native Computing Foundation에서 지원하는 공급업체 중립 오픈 소스 프로젝트입니다. 기본 제공 플랫폼 메트릭 API는 이 표준을 사용하려는 .NET 개발자가 쉽게 통합할 수 있도록 이 표준과 호환되도록 설계되었습니다. 작성 당시에는 OpenTelemetry 메트릭에 대한 지원이 비교적 새로웠지만 Azure Monitor 및 많은 주요 APM 공급업체가 이를 승인했으며 통합 계획이 진행 중입니다. 다음 예제에서는 널리 사..

더 읽기

[인프라] Jaeger, OpenTelemetry, Grafana 연동

인프라 범범조조 2022. 7. 31. 09:05

참고 https://medium.com/@niteshsinghal85/opentelemetry-with-jaeger-in-net-core-9b1e009a73dc 개요 OpenTelemetry .NET 에서 Tracing 관련 코드를 작성 후, Jaeger 에서 정보를 받고, Grafana DataSource 로 Jaeger 등록하여 DashBoard 그리는 방법에 대해서 정리 진행합니다. ASP.NET Core 웹 API 프로젝트 생성 테스트를 진행하기 위한 .NET 프로젝트를 하나 생성합니다. 저는 ASP.NET Core Wep API 프로젝트 하나를 생성하였습니다. NuGet 패키지 설치 ASP.NET Core 프로젝트를 생성 하였다면, 다음 NuGet 패키지를 설치 진행합니다. OpenTelemet..

더 읽기

[인프라]Jaeger 란?

인프라 범범조조 2022. 7. 30. 09:02

참고 https://www.jaegertracing.io/ https://www.redhat.com/ko/topics/microservices/what-is-jaeger https://twofootdog.tistory.com/67 개요 분산 추적을 보다 쉽게 도와주는 서비스인 Jaeger 에 대해서 알아 봅니다. 분산 추적이란? 분산 추적은 마이크로 서비스 간 복잡한 상호 작용에서 이벤트 전체를 파악하는 방식입니다. 현대적인 클라우드 네이티브 소프트웨어 개발은 각기 다른 핵심 기능을 제공하는 개별 서비스인 마이크로서비으세 의존합니다. 사용자가 애플리케이션에서 요청을 보내면 여러 개별 서비스가 이에 응답하여 결과를 생성합니다. 애플리케이션에서의 단 한번의 호출로 상호 작용하는 수샙 개의 서로 다른 서비스가..

더 읽기

[C#] 분산 추적 이란?

C# 범범조조 2022. 7. 29. 09:00

참고 https://docs.microsoft.com/ko-kr/dotnet/core/diagnostics/distributed-tracing-concepts .NET 분산 추적 개념 분산 추적은 엔지니어가 특히 여러 머신 또는 프로세스에 분산될 수 있는 애플리케이션 내에서 오류 및 성능 문제를 지역화 하는 데 오움이 되는 진단 기술입니다. 추적 및 활동 애플리케이션이 새 요청을 수신할 때마다 해당 요청을 추적과 연결할 수 있습니다. .NET으로 작성된 애플리케이션 구성 요소에서 추적의 작업 단위는 System.Diagnostics.Activity의 인스턴스로 나타내며 전체적으로 추적은 해당 활동의 트리를 구성하고 많은 개별 프로세스에 걸쳐 있을 수 있습니다. 새 요청에 대해 만들어진 첫 번째 활동은 추..

더 읽기

[인프라] Zipkin 이란?

인프라 범범조조 2022. 7. 29. 07:59

참고 https://zipkin.io/ https://github.com/openzipkin/zipkin https://github.com/openzipkin/zipkin4net 개요 Zipkin 은 분산 추적 시스템입니다. 서비스 아키텍처의 대기 시간 문제를 해결하는데 필요한 타이밍 데이터를 수집하는데 도움이 됩니다. 기능에는 이 데이터의 수집 및 조회가 모두 포함됩니다. 로그 파일에 추적 ID 가 있는 경우 해당 ID로 직접 이동할 수 있습니다. 그렇지 않으면 서비스, 작업 이름, 태그 및 기간과 같은 속성을 기반으로 쿼리할 수 있습니다. 서비스에 소요된 시간의 백분율 및 작업 실패 여부와 같은 몇 가지 관심 있는 데이터가 요약됩니다. Zipkin UI는 또한 얼마나 많은 추적된 요청이 각 애플리케이..

더 읽기

[인프라] 프로메테우스 아키텍처

인프라/그라파나 & 프로메테우스 범범조조 2022. 7. 25. 06:03

참고 프로메테우스 오픈소스 모니터링 시스템 구조 다음 이미지는 프로메테우스의 전반적인 아키텍처를 보여줍니다. 프로메테우스는 서비스 검색을 통해 데이터 수집 다생을 발견합니다. 익스포터를 통해 데이터 수집이 가능한 자체적인 계측 애플리케이션이나 서드파티 애플리케이션 등이 데이터 수집 대상이라 할 수 있습니다. 수집된 데이터가 저장되면 PromQL 을 이용해 대시보드에서 활용 되거나 알림 매니저를 통해 알림이 발송되고 알림은 다시 무선 호출, 이메일 같은 통보로 바뀝니다. 클라이언트 라이브러리 메트릭은 애플리케이션에서 마법처럼 튀어나오는 것이 아닙니다. 누군가 메트릭을 만들기 위한 계측 코드를 추가해야 합니다. 바로 이 부분이 클라이언트 라이브러리가 관여하는 부분입니다. 보통 2~3 중의 코드로 메트릭을 정..

더 읽기

[인프라] 프로메테우스 모니터링 개념

인프라/그라파나 & 프로메테우스 범범조조 2022. 7. 25. 02:01

참고 프로메테우스 오픈 소스 모니터링 시스템 개요 프로메테우스 개념을 익히기 전, 간단히 모니터링 개념에 대해서 정리 진행합니다. 모니터링이란? 모니터링의 종류는 크게 4가지로 분류할 수 있습니다. 알림 : 문제가 발생한 시기나 시점을 파악하는 것이 모니터링에서 가장 중요합니다. 문제가 생기면 모니터링 시스템은 책임 운영자를 호출할 수 있어야 합니다. 디버깅 : 이제 운영자를 호출 했으니, 운영자는 문제의 근본 원인을 규명하고, 문제가 무엇이든 간에 반드시 해결해야 합니다. 추세 파악 : 알림과 디버깅은 보통 몇 분 부터 몇 시간까지 시간 단위로 발생합니다. 긴급하지 않은 문제인 경우에는 시스템이 어떻게 사용되고 시간에 따라 변화하는지를 확인할 수 있는 기능도 유용합니다. 추세 파악은 용량 계획 같은 설..

더 읽기

[인프라] 프로메테우스 데이터 구조

인프라/그라파나 & 프로메테우스 범범조조 2022. 7. 24. 21:01

참고 https://blog.naver.com/alice_k106/221535163599 개요 프로메테우스 기본 데이터 구조를 파악하여, 추후에 ASP.NET Core 서비스에서 수집되는 메트릭 정보를 이해합니다. 기본적인 데이터 구조 프로메테우스의 데이터 구조를 처음 접하게 되면 복잡하고 어렵게 느껴지지만 PromQL 까지 익히게 되면 잘 만들어진 TSDB 임을 알게 됩니다. 프로메테우스의 기본적인 데이터 구조는 다음과 같습니다. 데이터 이름 : Metrics 를 구분하기 위한 고유의 이름입니다. 프로메테우스에서는 데이터 이름을 입력하는 것 만으로도 해당 데이터의 목록을 조회할 수 있습니다. 라벨(Label) : 동일한 데이터에서 종류를 구분하기 위한 식별자 입니다. 같은 데이터 이름이라도 다른 레벨을..

더 읽기

[인프라] prometheus-net 메트릭 통계

인프라/그라파나 & 프로메테우스 범범조조 2022. 7. 24. 08:59

참고 https://developpaper.com/asp-net-core-integration-prometheus/ 개요 prometheus-net 을 이용하면 기본으로 제공해주는 메트릭 정보들이 있습니다. 해당 정보들이 어떤 의미를 지니는지 정리 진행합니다. 메트릭 정보 prometheus-net 을 이용하면 기본적으로 다음과 같은 메트릭 정보들이 수집됩니다. prometheus-net 메트릭 통계 자료 metrics name Description Get Method Metric Type dotnet_collection_count_total 각 세대의 GC 가비지 수집 횟수는 레이블로 구분할 수 있습니다. GC.CollectionCount(gen) Counter process_start_time_sec..

더 읽기

[인프라] prometheus-net ASP.NET Core 사용

인프라/그라파나 & 프로메테우스 범범조조 2022. 7. 24. 00:58

개요 prometheus-net 에서 제공하는 ASP.NET Core 라이브러리를 이용하여 실제 .NET 6 버전의 ASP.NET Core 프로젝트 하나 생성 후, 프로메테우스에서 메트릭 수집이 이루어 지는지 PoC 진행 합니다. ASP.NET Core Web API 프로젝트 생성 Visual Studio 에서 기본 ASP.NET Core Web API 프로젝트 하나를 생성합니다. Version : .NET 6 prometheus-net NuGet Package 추가 프로젝트 생성이 완료 되었으면, prometheus-net NuGet Package 를 추가합니다. ASP.NET Core 다른 PC에서도 접근 가능하도록 코드 추가 Prometheus 서버는 Docker Container 로 실행 하고, ..

더 읽기

[C#] Tensorflow Serving C# gRPC Model Status 체크

C#/C# 문법 범범조조 2022. 7. 23. 20:56

참고 https://github.com/tensorflow/serving/tree/master/tensorflow_serving/apis 개요 Tensorflow Serving 에서 현재 Model이 Loading 되어 있는지에 대한 여부를 알기 위해 C# 으로 gRPC 클라이언트 프로그램을 만든 후, Tensorflow Serving 에서 Model Status 요청 후 상태 체크 되는지 PoC 진행 합니다. Tensorflow Serving 프로토콜 버퍼 확인 실제 Tensorflow Serving 에서 Model 상태 체크를 할 수 있는지, 우선 Proto 버퍼를 확인해 보았습니다. 확인 결과, get_model_status.proto 에서 현재 model 상태를 체크하는 내용이 있는 것을 확인하였..

더 읽기

[인프라] prometheus-net C# 콘솔

인프라/그라파나 & 프로메테우스 범범조조 2022. 7. 23. 08:54

참고 https://www.nuget.org/packages/prometheus-net.AspNetCore#dependencies-body-tab https://github.com/prometheus-net/prometheus-net#quick-start https://dale-bingham-soteriasoftware.medium.com/net-core-web-api-metrics-with-prometheus-and-grafana-fe84a52d9843 개요 .NET 서비스를 메트릭으로 수집하여 Prometheus 에서 메트릭에 접근하여 최종적으로 Grafana 에서 DashBoard 구현 까지 가능한지 자료조사 진행합니다. 우선, .NET 서비스에서 메트릭 계측 라이브러리가 있는지 조사 진행합니다. ..

더 읽기

Copyright © BeomBeomJoJo All Rights Reserved

Designed by JB FACTORY

티스토리툴바