Amazon SageMaker los clientes pueden ver y administrar sus límites de cuota a través de Cuotas de servicio. Además, pueden ver métricas de utilización casi en tiempo real y crear Reloj en la nube de Amazon métrica para ver y consultar mediante programación las cuotas de SageMaker.
SageMaker lo ayuda a crear, entrenar e implementar modelos de aprendizaje automático (ML) con facilidad. Para obtener más información, consulte Primeros pasos con Amazon SageMaker. Service Quotas simplifica la administración de límites al permitirle ver y administrar sus cuotas para SageMaker desde una ubicación central.
Con Cuotas de servicio, puede ver la cantidad máxima de recursos, acciones o elementos en su cuenta de AWS o región de AWS. También puede usar Cuotas de servicio para solicitar un aumento de las cuotas ajustables.
Con el uso cada vez mayor de las prácticas de MLOps y, por lo tanto, la demanda de recursos designados para la experimentación y el reentrenamiento del modelo ML, más clientes necesitan ejecutar varias instancias, a menudo del mismo tipo de instancia al mismo tiempo.
Muchos equipos de ciencia de datos a menudo trabajan en paralelo, utilizando varias instancias para procesar, entrenar y ajustar al mismo tiempo. Anteriormente, los usuarios a veces alcanzaban un límite de cuenta ajustable para algún tipo de instancia en particular y tenían que solicitar manualmente un aumento del límite de AWS.
Para solicitar aumentos de cuota manualmente desde el Interfaz de usuario de cuotas de servicio, puede elegir la cuota de la lista y elegir Solicitar aumento de cuota. Para obtener más información, consulte Solicitar un aumento de cuota.
En esta publicación, mostramos cómo puede usar las nuevas funciones para solicitar aumentos de límite automáticamente cuando se alcanza un alto nivel de instancias.
Resumen de la solución
El siguiente diagrama ilustra la arquitectura de la solución.
Esta arquitectura incluye el siguiente flujo de trabajo:
- Una métrica de CloudWatch supervisa el uso del recurso. Una alarma de CloudWatch se activa cuando el uso de recursos supera un determinado umbral preconfigurado.
- Se envía un mensaje a Servicio de notificación simple de Amazon (red social de Amazon).
- El mensaje es recibido por un AWS Lambda función.
- La función Lambda solicita el aumento de la cuota.
Además de solicitar un aumento de cuota para la cuenta específica, la función de Lambda también puede agregar el aumento de cuota a la plantilla de organización (hasta 10 cuotas). De esta forma, cualquier cuenta nueva creada en una organización de AWS determinada tiene solicitudes de cuota aumentadas de forma predeterminada.
Requisitos previos
Complete los siguientes pasos de requisitos previos:
- Configurar un Cuenta de AWS y crear un Gestión de identidades y accesos de AWS (IAM) usuario. Para obtener instrucciones, consulte Proteja su cuenta de AWS.
- Instale la CLI de SAM de AWS.
Implemente con el modelo de aplicación sin servidor de AWS
Para implementar la aplicación mediante el Repositorio GitHub, ejecute el siguiente comando en la terminal:
Después de implementar la solución, debería tener una nueva alarma en la consola de CloudWatch. Esta alarma supervisa el uso de instancias de notebooks de SageMaker para la instancia ml.t3.medium.
Si el uso de sus recursos supera el 50 %, se dispara la alarma y la función Lambda solicita un aumento.
Si la cuenta que tiene es parte de una organización de AWS y tiene la plantilla de solicitud de cuota habilitado, también debería ver esos aumentos en la plantilla, si la plantilla tiene ranuras disponibles. De esta forma, las cuentas nuevas de esa organización también tienen configurados los incrementos al momento de su creación.
Implementación mediante la consola de CloudWatch
Para implementar la aplicación mediante la consola de CloudWatch, complete los siguientes pasos:
- En la consola de CloudWatch, elija Todas las alarmas en el panel de navegación.
- Elige Crear alarma.
- Elige Seleccionar métrica.
- Elige Uso.
- Seleccione la métrica que desea monitorear.
- Seleccione la condición en la que desea que se dispare la alarma.
Para más configuraciones posibles al configurar la alarma, consulte Cree una alarma de CloudWatch basada en un umbral estático.
- Configure el tema de SNS para recibir notificaciones sobre la alarma.
También puede utilizar Amazon SNS para activar una función Lambda cuando se activa la alarma. Ver Uso de AWS Lambda con Amazon SNS para obtener más información.
- Nombre de la alarma, ingresa un nombre.
- Elige Siguiente.
- Elige Crear alarma.
Limpiar
Para limpiar los recursos creados como parte de esta publicación, asegúrese de eliminar todas las pilas creadas. Para hacer eso, ejecute el siguiente comando:
Conclusión
En esta publicación, mostramos cómo puede usar la nueva integración de SageMaker con Service Quotas para automatizar las solicitudes de aumentos de cuotas para los recursos de SageMaker. De esta manera, los equipos de ciencia de datos pueden trabajar de manera efectiva en paralelo y reducir los problemas relacionados con la falta de disponibilidad de las instancias.
Puede obtener más información sobre las cuotas de Amazon SageMaker accediendo a la documentación. También puede obtener más información sobre las cuotas de servicio esta página.
Sobre los autores
bruno klein es ingeniero de aprendizaje automático en el equipo de AWS ProServe. Le gusta especialmente crear automatizaciones y mejorar el ciclo de vida de los modelos en producción. En su tiempo libre, le gusta pasar tiempo al aire libre y hacer caminatas.
Paras Mehra es gerente sénior de productos en AWS. Está centrado en ayudar a crear Amazon SageMaker Training and Processing. En su tiempo libre, Paras disfruta pasar tiempo con su familia y andar en bicicleta por el Área de la Bahía. Puedes encontrarlo en Etiqueta LinkedIn.
- Distribución de relaciones públicas y contenido potenciado por SEO. Consiga amplificado hoy.
- Platoblockchain. Inteligencia del Metaverso Web3. Conocimiento amplificado. Accede Aquí.
- Fuente: https://aws.amazon.com/blogs/machine-learning/best-practices-for-viewing-and-querying-amazon-sagemaker-service-quota-usage/
- :es
- $ UP
- 10
- 100
- 7
- 8
- a
- Sobre
- de la máquina
- el acceso
- Mi Cuenta
- Cuentas
- acciones
- adición
- ajustable
- alarma
- Todos
- Permitir
- Amazon
- Amazon SageMaker
- y
- Aplicación
- arquitectura
- Reservada
- en torno a
- AS
- At
- automatizado
- automáticamente
- Hoy Disponibles
- AWS
- AWS Lambda
- basado
- Bay
- BE
- MEJOR
- y las mejores prácticas
- Más allá de
- build
- by
- PUEDEN
- CD
- central
- a ciertos
- Elige
- completar
- condición
- externa (Biomet XNUMXi)
- Consola
- Para crear
- creado
- Creamos
- creación
- Clientes
- datos
- Ciencia de los datos
- Predeterminado
- Demanda
- desplegar
- desplegado
- designada
- de manera eficaz
- facilita
- ingeniero
- Participar
- Éter (ETH)
- familia
- Caracteristicas
- Encuentre
- centrado
- siguiendo
- Gratuito
- en
- función
- Git
- dado
- Va
- Tienen
- ayudando
- ayuda
- Alta
- excursionismo
- Cómo
- HTML
- http
- HTTPS
- AMI
- Identidad
- la mejora de
- in
- incluye
- aumente
- aumentado
- Los aumentos
- creciente
- información
- ejemplo
- Instrucciones
- integración
- cuestiones
- artículos
- jpg
- APRENDE:
- aprendizaje
- Nivel
- ciclo de vida
- como
- LIMITE LAS
- límites
- Etiqueta LinkedIn
- Lista
- Ubicación
- máquina
- máquina de aprendizaje
- para lograr
- gestionan
- Management
- gerente
- a mano
- máximas
- mediano
- mensaje
- métrico
- Métrica
- ML
- MLOps
- modelo
- modelos
- Monitorear
- monitores
- más,
- múltiples
- nombre
- Navegación
- Cerca
- ¿ Necesita ayuda
- Nuevo
- Nuevas características
- Next
- cuaderno
- .
- número
- of
- on
- organización
- al exterior
- cristal
- Paralelo
- parte
- particular
- particularmente
- Platón
- Inteligencia de datos de Platón
- PlatónDatos
- posible
- Publicación
- prácticas
- previamente
- tratamiento
- Producto
- gerente de producto
- Producción
- en comunicarse
- alcanzado
- alcances
- en tiempo real
- recibido
- reducir
- región
- relacionado
- solicita
- solicitudes
- Recurso
- Recursos
- reentrenamiento
- carretera
- Ejecutar
- sabio
- Diana
- mismo
- Ciencia:
- mayor
- Sin servidor
- de coches
- Varios
- tienes
- Mostrar
- sencillos
- ranuras
- a medida
- algo
- soluciones y
- pasar
- Gastos
- Stacks
- fundó
- pasos
- equipo
- equipos
- plantilla
- terminal
- esa
- El
- su
- por lo tanto
- umbral
- A través de esta formación, el personal docente y administrativo de escuelas y universidades estará preparado para manejar los recursos disponibles que derivan de la diversidad cultural de sus estudiantes. Además, un mejor y mayor entendimiento sobre estas diferencias y similitudes culturales permitirá alcanzar los objetivos de inclusión previstos.
- equipo
- a
- tema
- Entrenar
- Formación
- detonante
- desencadenados
- verdadero
- bajo
- Uso
- utilizan el
- Usuario
- usuarios
- Ver
- Camino..
- Actividades:
- flujo de trabajo
- se
- tú
- zephyrnet