Amazon SageMaker az ügyfelek megtekinthetik és kezelhetik a kvótakorlátaikat Szolgáltatási kvóták. Ezenkívül megtekinthetik a valós idejű felhasználási mutatókat, és létrehozhatnak amazonfelhőóra mutatók a SageMaker kvóták megtekintéséhez és programozott lekérdezéséhez.
A SageMaker segít a gépi tanulási (ML) modellek egyszerű felépítésében, betanításában és üzembe helyezésében. További információért lásd: Az Amazon SageMaker első lépései. A szolgáltatáskvóták leegyszerűsítik a limitkezelést, mivel lehetővé teszik a SageMaker kvótáinak központi helyről történő megtekintését és kezelését.
A szolgáltatáskvóták segítségével megtekintheti az AWS-fiókjában vagy az AWS-régióban lévő erőforrások, műveletek vagy elemek maximális számát. A szolgáltatási kvóták segítségével a beállítható kvóták növelését is kérheti.
Az MLOps-gyakorlatok növekvő elterjedésével, és ezáltal az ML-modell-kísérletezésre és -átképzésre kijelölt erőforrások iránti igény miatt több ügyfélnek kell több példányt futtatnia, gyakran ugyanabban az időben.
Sok adattudományi csapat gyakran párhuzamosan dolgozik, és több példányt használ egyidejűleg a feldolgozáshoz, a képzéshez és a hangoláshoz. Korábban a felhasználók néha elértek egy állítható fiókkorlátot egy adott példánytípushoz, és manuálisan kellett kérniük a korlát növelését az AWS-től.
A kvóta igényléséhez manuálisan nő a Szolgáltatáskvóták UI, kiválaszthatja a kvótát a listából, és kiválaszthatja Kvótaemelés kérése. További információkért lásd: Kvótaemelés kérése.
Ebben a bejegyzésben bemutatjuk, hogyan használhatja az új funkciókat a limitemelések automatikus kérésére, ha magas példányszámot ér el.
Megoldás áttekintése
A következő ábra a megoldás architektúráját mutatja be.
Ez az architektúra a következő munkafolyamatot tartalmazza:
- A CloudWatch mérőszáma figyeli az erőforrás használatát. A CloudWatch riasztás akkor aktiválódik, ha az erőforrás-használat túllép egy bizonyos előre konfigurált küszöböt.
- Üzenetet küld a címre Amazon Simple Notification Service (Amazon SNS).
- Az üzenetet egy AWS Lambda funkciót.
- A Lambda függvény a kvóta növelését kéri.
Amellett, hogy az adott fiókhoz kvótanövelést kér, a Lambda funkció a kvótanövelést is hozzáadhatja a szervezeti sablon (legfeljebb 10 kvóta). Ily módon az adott AWS-szervezet alatt létrehozott új fiókok alapértelmezés szerint megnövelt kvótakérelmekkel rendelkeznek.
Előfeltételek
Hajtsa végre a következő előfeltétel lépéseket:
- Állítson be egy AWS-fiók és hozzon létre egy AWS Identity and Access Management (IAM) felhasználó. Az utasításokat lásd Biztosítsa AWS-fiókját.
- Telepítse a AWS SAM CLI.
Telepítse az AWS kiszolgáló nélküli alkalmazásmodell használatával
Az alkalmazás telepítéséhez a GitHub repo, futtassa a következő parancsot a terminálban:
A megoldás üzembe helyezése után új riasztásnak kell megjelennie a CloudWatch konzolon. Ez a riasztás figyeli a SageMaker notebook példányok használatát az ml.t3.medium példányhoz.
Ha az erőforrás-felhasználás meghaladja az 50%-ot, a riasztás aktiválódik, és a lambda funkció növelést kér.
Ha a fiókja egy AWS-szervezet része, és rendelkezik a kvótakérési sablon engedélyezve, akkor a sablonon is látnia kell ezeket a növekedéseket, ha a sablonnak vannak szabad helyei. Ily módon az adott szervezet új fiókjainál is a létrehozáskor konfigurálják a növekedést.
Telepítés a CloudWatch konzol segítségével
Az alkalmazás CloudWatch konzol segítségével történő üzembe helyezéséhez hajtsa végre a következő lépéseket:
- A CloudWatch konzolon válassza a lehetőséget Minden riasztás a navigációs ablaktáblában.
- A pop-art design, négy időzóna kijelzése egyszerre és méretének arányai azok az érvek, amelyek a NeXtime Time Zones-t kiváló választássá teszik. Válassza a Készítsen riasztást.
- A pop-art design, négy időzóna kijelzése egyszerre és méretének arányai azok az érvek, amelyek a NeXtime Time Zones-t kiváló választássá teszik. Válassza a Válassza ki a mérőszámot.
- A pop-art design, négy időzóna kijelzése egyszerre és méretének arányai azok az érvek, amelyek a NeXtime Time Zones-t kiváló választássá teszik. Válassza a Használat.
- Válassza ki a figyelni kívánt mérőszámot.
- Válassza ki azt a feltételt, amikor szeretné, hogy a riasztás aktiválódjon.
A riasztás konfigurálásakor további lehetséges konfigurációkért lásd: Hozzon létre egy CloudWatch riasztást statikus küszöbérték alapján.
- Állítsa be az SNS-témát, hogy értesítést kapjon a riasztásról.
Használhatja az Amazon SNS-t is a Lambda funkció aktiválására, amikor a riasztás aktiválódik. Lát Az AWS Lambda használata az Amazon SNS-sel további információért.
- A Riasztás neve, írjon be egy nevet.
- A pop-art design, négy időzóna kijelzése egyszerre és méretének arányai azok az érvek, amelyek a NeXtime Time Zones-t kiváló választássá teszik. Válassza a Következő.
- A pop-art design, négy időzóna kijelzése egyszerre és méretének arányai azok az érvek, amelyek a NeXtime Time Zones-t kiváló választássá teszik. Válassza a Készítsen riasztást.
Tisztítsuk meg
A bejegyzés részeként létrehozott erőforrások megtisztításához törölje az összes létrehozott köteget. Ehhez futtassa a következő parancsot:
Következtetés
Ebben a bejegyzésben bemutattuk, hogyan használhatja a SageMaker új integrációját a szolgáltatáskvótákkal a SageMaker-erőforrások kvótaemelési kérelmeinek automatizálására. Így az adattudományi csoportok hatékonyan párhuzamosan dolgozhatnak, és csökkenthetik a példányok elérhetetlenségével kapcsolatos problémákat.
Az Amazon SageMaker kvótáiról többet megtudhat, ha eléri a dokumentáció. A szolgáltatáskvótákról is többet megtudhat itt.
A szerzőkről
Bruno Klein gépi tanulási mérnök az AWS ProServe csapatában. Különösen szereti az automatizálások létrehozását és a gyártásban lévő modellek életciklusának javítását. Szabadidejében szeret a szabadban tölteni, túrázni.
Paras Mehra az AWS vezető termékmenedzsere. Arra összpontosít, hogy segítsen felépíteni az Amazon SageMaker képzést és feldolgozást. Szabadidejében Paras szívesen tölt időt családjával, és országúti kerékpározást folytat az öböl környékén. Megtalálhatod rajta LinkedIn.
- SEO által támogatott tartalom és PR terjesztés. Erősödjön még ma.
- Platoblockchain. Web3 metaverzum intelligencia. Felerősített tudás. Hozzáférés itt.
- Forrás: https://aws.amazon.com/blogs/machine-learning/best-practices-for-viewing-and-querying-amazon-sagemaker-service-quota-usage/
- :is
- $ UP
- 10
- 100
- 7
- 8
- a
- Rólunk
- hozzáférés
- Hozzáférés
- Fiók
- Fiókok
- cselekvések
- mellett
- állítható
- riasztás
- Minden termék
- lehetővé téve
- amazon
- Amazon SageMaker
- és a
- Alkalmazás
- építészet
- TERÜLET
- körül
- AS
- At
- automatizált
- automatikusan
- elérhető
- AWS
- AWS Lambda
- alapján
- öböl
- BE
- BEST
- legjobb gyakorlatok
- Túl
- épít
- by
- TUD
- CD
- központi
- bizonyos
- A pop-art design, négy időzóna kijelzése egyszerre és méretének arányai azok az érvek, amelyek a NeXtime Time Zones-t kiváló választássá teszik. Válassza a
- teljes
- feltétel
- konfigurációk
- Konzol
- teremt
- készítette
- létrehozása
- teremtés
- Ügyfelek
- dátum
- adat-tudomány
- alapértelmezett
- Kereslet
- telepíteni
- telepített
- kijelölt
- hatékonyan
- engedélyezve
- mérnök
- belép
- Eter (ETH)
- család
- Jellemzők
- Találjon
- összpontosított
- következő
- A
- Ingyenes
- ból ből
- funkció
- megy
- adott
- Goes
- Legyen
- segít
- segít
- Magas
- turisztika
- Hogyan
- HTML
- http
- HTTPS
- IAM
- Identitás
- javuló
- in
- magában foglalja a
- Növelje
- <p></p>
- Növeli
- növekvő
- információ
- példa
- utasítás
- integráció
- kérdések
- tételek
- jpg
- TANUL
- tanulás
- szint
- életciklus
- mint
- LIMIT
- határértékek
- Lista
- elhelyezkedés
- gép
- gépi tanulás
- csinál
- kezelése
- vezetés
- menedzser
- kézzel
- maximális
- közepes
- üzenet
- metrikus
- Metrics
- ML
- MLOps
- modell
- modellek
- monitor
- monitorok
- több
- többszörös
- név
- Navigáció
- Közel
- Szükség
- Új
- Új funkciók
- következő
- jegyzetfüzet
- bejelentés
- szám
- of
- on
- szervezet
- szabadban
- üvegtábla
- Párhuzamos
- rész
- különös
- különösen
- Plató
- Platón adatintelligencia
- PlatoData
- lehetséges
- állás
- gyakorlat
- korábban
- feldolgozás
- Termékek
- termék menedzser
- Termelés
- el
- elérte
- Elér
- real-time
- kapott
- csökkenteni
- vidék
- összefüggő
- kérni
- kéri
- forrás
- Tudástár
- átképzés
- út
- futás
- sagemaker
- Sam
- azonos
- Tudomány
- idősebb
- vagy szerver
- szolgáltatás
- számos
- kellene
- előadás
- Egyszerű
- nyílások
- megoldások
- néhány
- különleges
- költ
- Költési
- Stacks
- kezdődött
- Lépései
- csapat
- csapat
- sablon
- terminál
- hogy
- A
- azok
- ebből adódóan
- küszöb
- Keresztül
- idő
- nak nek
- téma
- Vonat
- Képzések
- kiváltó
- váltott
- igaz
- alatt
- Használat
- használ
- használó
- Felhasználók
- Megnézem
- Út..
- val vel
- Munka
- munkafolyamat
- lenne
- A te
- zephyrnet