Kategória index

Architect

325 cikk

325 CIKK

KIEMELT JELENTÉS

Minimálja a használatlan gyorsítók használatát: A helyi RL-munkák időszámítással történő egymásba kapcsolása az LLM-ben

A kutatók egy olyan megoldást bevezettek, amely a nagyméretű nyelvi modelok infrastruktúrájának hatékonyságát növeli, az utánpazás során alkalmazva a 강화 tanulást. Az “co-operative time-slicing through the llm-d project” nevű megközelítés a diszkrét RL lépéseket dinamikus entitásoknak kezeli, és független RL feladatokat osztja el a közös fizikai hardveren, növelve a teljesítő eszkökhöz tartozó időt és javítva a költség-teljesítmény arányt. Ez a platform-szintű multiplexálás minimalizálja a tétlen időt, lehetővé téve a források hatékonyabb kihasználását, és azonnal használható felhasználói útmutatókkal és nyílt forráskódú kóddal.

SZERZŐ Aishu Kamal
PERC OLVASÁS 8 PERC OLVASÁS
FELFEDEZÉS north_east
Minimálja a használatlan gyorsítók használatát: A helyi RL-munkák időszámítással történő egymásba kapcsolása az LLM-ben
EKS Auto Modus és Karpenter számára a zóna-változás támogatása
ARCHITECT

EKS Auto Modus és Karpenter számára a zóna-változás támogatása

Ebben a bejegyzésben bemutatjuk, hogyan integrálódik a zonal shift az Amazon Elastic Kubernetes Service (Amazon EKS) rendszerrel, és mit tapahtul, amikor egy shift elindul. Emellett bemutatjuk, hogyan lehet ezt engedélyezni a saját rendszerben lévő Karpenter és az EKS Auto Mode (EKS Auto) cluster-ekben is.

1 PERC OLVASÁS arrow_forward
A terv: Hogyan Önélhetővé teszi a Voicify az AI-alapú rendelést a felhasználók számára
ARCHITECT

A terv: Hogyan Önélhetővé teszi a Voicify az AI-alapú rendelést a felhasználók számára

A Voicify mesterséges intelligencia és felhőtechnológiákat használva átalakítja a hagyományos telefonhívásokat zökkenőmentes élményekre. A 2018-ban alapított cég eleinte hangvezérelt asszisztenseket fejlesztett, de a pandémia alatt a vendéglátásban és az egészségügyben a telefonhívásokra összpontosított. A sikeres működés érdekében a Voicify olyan kihívásokkal, mint a tranzakciós pontosság, forgalmi hullámok kezelése, késés és biztonság és megfelelés, szembenézett. A cégének beszélgetési koordinációs platformja rendeléseket épít és ellenőrzi a kasszaszistemekkel, így biztosítva a pontosságot. A Gemini Enterprise segítségével a Voicify minimalizálja a késést és megakadályozza a hívások megszakadását, miközben körülbelül 25-30%-os megtakarítást érhet el más nagy nyelvi modellekkel szemben. A cég a Vertex AI-t és a Gemini Enterprise-et használja a nagy hívási volumerek kezelésére és a megbízható működés biztosítására, ami hatékonyabb ügyfélbemutatást és a vendégek számára a működéshez szükséges idő csökkentését teszi lehetővé, a vendégek számára a működéshez szükséges idő a laboratórium kipróbálására 1-2 hét helyett csak 1-2 napra csökken.

4 PERC OLVASÁS arrow_forward
Az AI-alapú rendszerek készen állnak. A saját adatok?
ARCHITECT

Az AI-alapú rendszerek készen állnak. A saját adatok?

A legtöbb szervezet nehézségekkel küzd az AI kezdeményezéseik 확장ában az üzleti környezethez és a szemantikus jelentéshez való hozzáférés hiánya miatt, nem a mai modelok képességei miatt. Ennek megoldására egy egységes rendszerre van szükség, amely az Agentic Data Cloud, amely integrálja az adatokat, az AI modelokat és az operációs adatbázisokat egyetlen rendszerbe. Ehhez AI-alapú infrastruktúra szükséges, amely képes kezelni az agentikus terhelést, és biztosítja az adatokhoz való hozzáférést, lehetővé téve az agentum számára, hogy pontos döntéseket hozzon, és leküzdje a manuális munkát, valamint az adatban rejlő hiányosságokat és hiányosságokat.

4 PERC OLVASÁS arrow_forward
Az Expedia az AI alapú szolgáltatási adatközpont elemzőt használ a incidensek gyorsabb kivizsgálásához
ARCHITECT

Az Expedia az AI alapú szolgáltatási adatközpont elemzőt használ a incidensek gyorsabb kivizsgálásához

Az Expedia Group bevezette a STAR-t, egy belső, mesterséges intelligencia alapú megfigyelési platformot, amely lehetővé teszi a mérnökök számára, hogy a termelési incidensek kivizsgálásában segítsen a szolgáltatási adatok és a nagyméretű nyelvi modellek segítségével. A STAR, amely a FastAPI, Datadog, Celery, Redis és a Langfuse segítségével épült, strukturált folyamokat alkalmaz a telemetria elemzésére, a kiváltó okok meghatározására és a incidens kezelésére, miközben a mérnökök is be vannak foglalva a folyamatba.

1 PERC OLVASÁS arrow_forward
Az AI jövője közösség által meghatározott és nyílt
ARCHITECT

Az AI jövője közösség által meghatározott és nyílt

A Kubernetes az AI-hez a gyakorlatban elismert operációs rendszer lett. A CNCF 2025-ös éves felhő alapú felmérésében 82%-os a konténerhasználók aránya, akik a Kubernetes-t használják a termelési környezetben, és 66% az olyan szervezetek aránya, amelyek generatív AI-t használ, és ezt a Kubernetes-t…

1 PERC OLVASÁS arrow_forward
Egy kiszolgáló nélküli AI asszisztens fejlesztése a Pelagón: ötlettől a megvalósításon át két hét alatt
ARCHITECT

Egy kiszolgáló nélküli AI asszisztens fejlesztése a Pelagón: ötlettől a megvalósításon át két hét alatt

Az egészségügyi szervezetek egy kritikus kihívással szembesülnek: hogyan tudják megőrizni a személyre szabott páciens-interakciókat, ahogy a taglétszám növekszik, miközben az ellátó csapatokat nem terhelik túl, és a minőséget sem veszélyeztetik. A Pelago, egy digitális egészségügyi vállalat, amely a függőség kezelésére specializálódott, a mérnöki csapatnak megtalált egy megoldást az AWS segítségével, hogy ezt a problémát megoldja.

1 PERC OLVASÁS arrow_forward
A Confidential Containers CNCF-ben incubating projektté vált
ARCHITECT

A Confidential Containers CNCF-ben incubating projektté vált

Az CNCF Technikai Felügyeleti Bizottság (TOC) szavazott arról, hogy elfogadja a Confidential Containers-t CNCF-n egyelőre fejlesztett projektként. A Confidential Containers-ről A Confidential Containers célja, hogy adatokat védje a felhő alapú környezetekben használat közben. Míg a…

1 PERC OLVASÁS arrow_forward