rubrub 님의 블로그

  • 홈
  • 태그
  • 방명록

DevOps 1

[Azure MLOps] Online & Batch Endpoint

이번에는 Azure ML에서 모델을 배포하고, Online/Batch Endpoint를 통해 모델을 실제로 사용하는 흐름에 대해서 정리하였다. 현재 회사에서 진행하고 있는 프로젝트에서는 Online Endpoint만 사용하고 있지만 Batch Endpoint 개념도 확실히 잡고 넘어가고자 한다. Online Endpoint란?Azure ML의 Online Endpoint는 실시간 추론을 위한 REST API 진입점이다. 애플리케이션에서 실시간으로 데이터를 전송하고, 그에 대한 예측 결과를 바로 받아야 하는 경우 사용된다. 예를 들어 웹사이트에서 사용자의 행동을 바탕으로 실시간 광고 추천을 할 때 유용하다.왜 필요한가?REST API 형태로 모델 서빙 가능실시간 응답 처리트래픽 분산 및 A/B 테스트 지원..

MLOps 2025.06.30
이전
1
다음
더보기
프로필사진

rubrub 님의 블로그

영-차. 현재 외국계 금융 회사에서 AI Engineer로 근무 중.

  • 분류 전체보기 (55)
    • Computer Vision (0)
    • LLM (13)
    • MLOps (3)
    • AI 논문 리뷰 (5)
    • Azure (1)
    • Responsible AI (RAI) (2)
    • AI (23)
    • AI 보안 (4)
    • 금융 (0)
    • 기타 (0)
    • 경제 (4)

Tag

MLOps, agentic ai, AI, Agentic RAG, rag, graphrag, aiagent, autogen, 생성형ai, 금융AI, agenticai, AzureML, Grpo, LLM, vllm, langsmith, ai agent, RLHF, Azure, 금융권 AI,

최근글과 인기글

  • 최근글
  • 인기글

최근댓글

공지사항

페이스북 트위터 플러그인

  • Facebook
  • Twitter

Archives

Calendar

«   2026/09   »
일 월 화 수 목 금 토
1 2 3 4 5
6 7 8 9 10 11 12
13 14 15 16 17 18 19
20 21 22 23 24 25 26
27 28 29 30

방문자수Total

  • Today :
  • Yesterday :

Copyright © Daum Corp. All rights reserved.

티스토리툴바