AWS Machine Learning Blog· Vamsi Goparaju·· 22일 전AI 점수31
Amazon SageMaker JumpStart에서 모델을 배포하고 평가하는 방법
Deploy and evaluate models with Amazon SageMaker JumpStart
AI 요약
Amazon SageMaker JumpStart의 모델을 배포하고, SageMaker Python SDK로 가볍고 재현 가능한 성능 테스트를 실행한 뒤, 종료 후 엔드포인트를 삭제하는 절차를 설명합니다. 스크립트는 모델 탐색 및 배포, 지연 시간과 출력량, 단일 요청 생성 속도 측정, 정리의 세 단계로 구성됩니다. 여러 호환 모델에 사용할 수 있지만, 페이로드 형식, 인스턴스 타입, EULA, 응답 파싱은 모델마다 조정이 필요한 경우가 있습니다.
출처: AWS Machine Learning Blog · aws.amazon.com