Á GTC Taipei og Computex í dag sýndi NVIDIA Corp. nokkra opna-uppspretta líkamlega gervigreindarfærni og verkfæri til að hjálpa þróunaraðilum vélfærafræði, sjálfstýrðra farartækja, sjónræn gervigreind og stafræna tvíbura í iðnaði. Fyrirtækið hélt því fram að þau gætu hjálpað til við að draga úr kostnaði, tíma og flókið við að byggja upp líkamlegt gervigreindarverkflæði í stærðargráðu.
Fáanlegt sem hluti afNVIDIA Agent Toolkit, nýja færnin mun gera gervigreindum umboðsmönnum kleift að flýta fyrir gagnaframleiðslu, uppgerð, þjálfun, mati og uppsetningu leiðslna á bak við vélmenni, sjálfstýrð farartæki (AV), verksmiðjur og rannsóknarstofur, sagði fyrirtækið.
"AI umboðsmenn eru að gjörbylta hugbúnaðarþróun og sú breyting er nú að koma að líkamlegri gervigreind og nær yfir í kerfin sem munu umbreyta flutningum, framleiðslu, heilsugæslu og vélfærafræði," sagði Jensen Huang, stofnandi og forstjóri NVIDIA, hjá GTC Taipei. „Þegar umboðsmenn geta notað NVIDIA bókasöfn, gerðir og ramma beint, mun líkamleg gervigreind þróast hraðar, sem gerir forriturum kleift að smíða vélmenni, sjálfstýrð farartæki og iðnaðarkerfi framtíðarinnar á ótrúlegum hraða.
„Líkamleg gervigreind krefst gríðarlegs magns af þjálfunargögnum í fjölbreyttu umhverfi,“ sagði Rev Lebaredian, varaforseti fyrir líkamlega gervigreind eftirlíkingar hjá NVIDIA. „Gögn um fjarvirkni, uppgerð og-internetkvarða leiða til heimsgrunnslíkana fyrir óendanlega fjölbreytni notkunartilvika.“
NVIDIA gerir líkamlega gervigreindarstakka-tilbúna
NVIDIA sagði að það væri að fínstilla allan líkamlega gervigreindarstafla sinn fyrir umboðsmenn með því að breyta bókasöfnum, líkönum og ramma í verkfæri sem-kalla umboðsmann. Þetta felur í sér:
NVIDIA Cosmos3 heimsgrunnslíkön fyrir líkamlega heimshugsun og kynslóð
NVIDIA Omniversebókasöfn fyrir uppgerð og stafræna tvíbura
NVIDIA Ísakfyrir vélfærafræðihermi og vélmennanám
NVIDIA Metropolisfyrir sjón AI
NVIDIA Alpamayofyrirsjálfvirkan akstur
NVIDIA Jetsonvettvangur fyrir þróun á sviði gervigreindar
„Cosmos 3 er grunnlíkanið fyrir líkamlega gervigreind,“ sagði Lebaredian. "Það skilur myndbönd og texta og getur flaggað því sem skiptir máli. Cosmos er líkamlega nákvæm uppgerð og getur spáð fyrir um hvað gerist næst og framkallað aðgerðir."
Til að hjálpa til við að beita þessum verkfærum er NVIDIA að koma af staðnýja færniað breyta líkamlegum gervigreindarþróunarferlum í endurteknar leiðbeiningar sem kóðunarmiðlar geta fylgt. Þetta felur í sér hvaða verkfæri á að hringja í, hvaða úttak á að framleiða og hvernig þróunaraðilar geta sannreynt niðurstöður.
Hönnuðir geta einnig á öruggan hátt smíðað og sent sjálfstætt starfandi umboðsmenn með því að nota þessa færni meðNVIDIA NemoClawteikning ogNVIDIA OpenShellkeyrslutími, sem veitir-reglubundið öryggi og persónuverndarstjórnun á staðbundnum eða skýjabúnaði. Umboðsmennirnir munu keyra á brúninni í Jetson og hafa þegar sýnt fram á framfarir í spennutíma, sagði Lebaredian.
NVIDIA sagði líkamlega gervigreindarhæfileika sína og verkfæri vera að hraða umboðsþróun á milli:
Vélfærafræði og edge AI:Vélmennaframleiðendur geta notað færni til að flýta fyrir allri þróunarpípu vélfærafræðinnar, allt frá því að búa til skynjunar- og hreyfanleikaþjálfunargögn til uppgerðar, sjálfvirkrar leiðsöguþjálfunar, efla vélmennanám og stilla Jetson-jaðarkerfi fyrir uppsetningu.
Sjálfstýrð farartæki:Fyrir AV þróunaraðila getur kunnátta beint umboðsmönnum til að endurbyggja gögn sem eru tekin af flota í hermiumhverfi, búa til ljósraunsæjar akstursatburðarásir í mælikvarða og keyra lokuð-lykkjustyrkingarnám til að auka þjálfunar- og matssvið.
Rauntímasjón gervigreind umboðsmenn-:Fyrir sjálfvirka skoðun og myndbandsnjósnir sagði NVIDIA að umboðsmannahæfileikar þess geti hjálpað teymum að búa til tilbúnar þjálfunargögn, fínstilla-líkön, gera sjálfvirka merkingu og búa til gervigreindarmiðlar fyrir myndband sem leita, draga saman og greina lifandi eða hljóðrituð myndskeið.
Iðnaðar gervigreind:Iðnaðarhugbúnaðarframleiðendur geta notað þessa færni til að umbreyta verkfræðilegum gögnum í tölvu-stýrða hönnun (CAD) eignir fyrir stafræna tvíburauppgerð, fínstilla stórar OpenUSD senur með minni handvirkri uppsetningu.
Heilsugæsla:Áður en sjálfvirkni er beitt í klínískt umhverfi geta heilbrigðisteymi leiðbeint umboðsmönnum í gegnum sköpun stafrænna tvíbura sjúkrahúsumhverfis, sim-til-raunverulegrar gagnaframleiðslu og hugbúnaðar-í-lykkjustefnuprófunum.
Hægt er að sameina og samþætta hæfileikana í stærri umboðskerfi, samkvæmt NVIDIA. Þetta gerir forriturum kleift að skipuleggja og gera flókið verkflæði sjálfvirkt eins og gagnaframleiðslu, uppgerð, hagræðingu, ályktunarstillingu, stöðugu mati og fleira.
Vélfærafræðihönnuðir taka upp líkamlegan gervigreindarstafla
1X Technologies, Agile Robots, Agility, FieldAI, Hexagon Robotics, NEURA Robotics, Skild AI og Universal Robots eru meðal vélfærafræðifyrirtækja sem nota nú þegar umboðsmann NVIDIA-tilbúinn líkamlegan gervigreindarstafla.
„Með staflauppfærslum í NVIDIA Isaac GR00T er hægt að setja upp ný end-to-verkflæði á klukkustundum á móti vikum,“ sagði Lebaredian. "'Omni-modal' þýðir að það virkar með mismunandi stillingum - myndbandi, skynjurum, texta og hljóði fyrir aðgerðainntak og úttak."
Að auki nota Foxconn og Compal NVIDIA Isaac fyrir heilsugæslu til að flýta fyrir vélfærafræði sjúkrahúsa. Compal er að efla þróunarferli PolyMedX vélmennisins í átt að sjúkrahúss-breiðum hljómsveitarvettvangi, sem samþættir uppgerð, gervigreind og raunverulega-heimsaðgerðir.
Foxconn er að stækka Nurabot yfir nokkur sjúkrahús og langtímaumhverfi fyrir-umönnun, koma með gervigreind-vélfærafræði í umönnun sjúklinga, auk þess að kynna nýja Scrub Nurse Collaborative Robot til að hjálpa til við að hámarka vinnuflæði skurðstofu.
Leiðtogar iðnaðarins byggja með NVIDIA tækni
NVIDIA samstarfsaðilar og viðskiptavinir á sviði framleiðslu, flutninga, heilsugæslu og iðnaðarhugbúnaðar nota líkamleg gervigreind bókasöfn sín til að efla þróun sjálfstæðra kerfa og gervigreindar í iðnaði.
Þegar þessi bókasöfn verða-tilbúin geta forritarar notað NVIDIA færni til að hjálpa umboðsmönnum að gera sjálfvirkan uppsetningu, framkvæmd og endurtekningu á flóknum líkamlegum gervigreindum verkflæði.
Í rafeindaframleiðslu eru TSMC og Pegatron fínstilla -sjónræn skoðunarlíkön. Pegatron hefur að sögn dregið úr líkanaþjálfun og dreifingartíma um 67% með því að nota tilbúnar gögn sem eru búin til úr kunnáttunni um myndmyndun galla.
Delta Electronics bjó til tilbúið gallagögn og notaði kunnáttuna til að ná umfram lóðun á málmstöngum, og bætti greiningarhlutfallið um 17%. Inventec þróaði Observation Agent sjónræna skoðunarleiðslu sína með því að samþætta Defect Image Generation færni, sem minnkaði gallagagnasöfnun fyrir framleiðslu fartölvu undirvagna um 30%.
Foxconn, sem vann með DeepHow, notaði hæfileikann til að bæta framleiðsluhagkvæmni með því að grípa villur snemma og auka afrakstur fyrstu umferðar um 3%.
Í gervigreind í iðnaði nota Cadence, Dassault Systèmes, Siemens og Synopsys NVIDIA Omniverse bókasöfn og færni fyrir verkfræðilega gagnaskoðun, uppgerð og gagnvirka stafræna tvíbura. PTC, MetAI og Lightwheel eru að smella á NVIDIA Isaac Sim ramma og OpenUSD-verkflæði til að umbreyta CAD gögnum í eftirlíkingar-tilbúnar eignir og umhverfi.
Sem hluti af „Autonomous Fab 2030“ vegvísinum sínum, er SK hynix að innleiða hálfleiðara stafræna tvíbura með því að nota NVIDIA Omniverse. Flísaframleiðandinn er einnig í samstarfi við NVIDIA og SK Telecom til að sannreyna NVIDIA Agent Toolkit til að framleiða-sérstaka líkamlega gervigreind.
Sjálfkeyrandi-hönnuðirnir Li Auto, Afari og DeepRoute.ai nota NVIDIA Omniverse NuRec líkön fyrir endurgerð og endurgerð taugasenu. Þeir hafa búið til meira en 1.000 endurbyggingar og meira en 300.000 myndir og uppgerð á dag.
Að auki eru AV fyrirtækin að nota nýju umboðshæfileikageymsluna til að flýta fyrir og efla þróun sína á öruggari og hæfari sjálfstýrðum aksturskerfum. Foxconn, VinFast, Uber og HUMAIN hafa gengið til liðs við NVIDIA DRIVE Hyperion vistkerfið til að þróa og dreifa SAE Level 4 vélfæraaxa.
Alpamayo 2 Super hefur þegar verið hlaðið niður yfir 500.000 sinnum og var valinn „Besta tæknin“ hjá Computex, sagði Spencer Huang, forstöðumaður vöru fyrir vélfærafræði hjá NVIDIA.
Líkamleg gervigreindarverkfæri eru nú fáanleg
NVIDIA sagði að líkamleg gervigreindarverkfæri og færni þess séu tiltæk í gegnumGitHubogfærni.shtil notkunar með hvaða kóða sem er.
Færni umboðsmanna og verkfæri til að búa til tilbúið gögn -Taugauppbygging, Myndbandsaukning, Myndun galla- eru einnig fáanlegar á NVIDIA Brev asLíkamleg gervigreind, forstillt umhverfi sem sameinar umboðsmennsku og verkfæri fyrir hraðari tilbúna gagnaframleiðslu og mat.
Microsoft,CoreWeave, ogNebíuseru að samþætta þessa umboðsmannafærni og verkfæri við skýjaþjónustu sína til að gera forriturum kleift að hagræða og skala tilbúna gagnaframleiðslu og dreifingu.
Unitree humanoid tilvísun fyrir NVIDIA Isaac GR00T
NVIDIA tilkynnti einnig NVIDIA Isaac GR00T Reference Humanoid Robot, opna tilvísunarhönnun fyrir manngerða vélmenni byggð á NVIDIA Jetson Thor og NVIDIA Isaac GR00T þróunarvettvanginum. Fyrirtækið sagði að þetta muni hjálpa til við að lýðræðisfæra aðgang að háþróaðri vélbúnaði og hugbúnaði án þess að þurfa dýra, einkarekna vettvanga sem áhuga áalmennar-manneskjurhækkar.
NVIDIA sameinaði vélmenni í fullri-stærð með handlagni, skynjun, stjórn og gervigreindartölvu um borð:
Unitree H2 manngerð undirvagn,stendur næstum 6 fet (1,8 m) á hæð og vegur 150 lb. (68 kg), með 31 gráðu frelsi til að prófa á mönnum-kvarða.
TvískipturSharpa bylgjaáþreifanlegar fimm-fingra hendur,gerir kleift að stjórna handlagni með 22 frelsisgráðum og koma vélmenninu í 75 frelsisgráður yfir líkama og hendur.
Fjölsýna-skynjun,þar á meðal höfuð-stereómyndavél með breitt sjónsvið (140 gráður lárétt, 102 gráður lóðrétt), úlnliðsmyndavélar fyrir nær-stillingu og tregðumælingareiningu fyrir hreyfirakningu.
Heils-líkamsstjórnun,með allt að 120 Newton-metra tog á handlegg, allt að 360 Newton-metrar á fótlegg, 7 kg (15,4 lb.) handleggsburðarþol og 15 kg (33 lb.) hámarksburðarhleðslu, sem opnar hæfari lyftingar og teygjur.
NVIDIA Jetson AGX Thor T5000 tölvu um borð,er með NVIDIA Blackwell GPU með 2.070 FP4 teraflops af gervigreindarafköstum, 14-kjarna Arm CPU, 128GB af sameinuðu minni og stillanlegu 40- til 130-watta aflsviði fyrir rauntíma skynjaravinnslu og ályktun vélmenna.
Tengingaryfir Ethernet, Wi-Fi 6, Bluetooth 5.2, USB og fjölda hljóðnema og hátalara fyrir raddsamskipti.
Rafhlaða fyrir lengri notkun,með 15Ah, 0,972kWh afkastagetu og um það bil þriggja tíma líftíma.
Á-fjarlægri neyðarstöðvunaðgerð til að aftengja vélmennið fljótt á öruggan hátt.
Isaac GR00T pallurinn inniheldur:
NVIDIA Isaac Teleoptil að fanga hágæða sýnikennslugögn úr-vélmenni fyrir þjálfun og stefnumótun.
NVIDIA Isaac GR00T opnar grunngerðirtil að styðja við rökhugsun, nám og fjölverkahegðun.
NVIDIA Isaac Sim ogÍsak Labtil að líkja eftir, þjálfa, prófa og meta vélmennastefnur áður en-heimurinn er tekinn í notkun.
Hröðun NVIDIA Isaac ROS millihugbúnaðarað færa þjálfaðar stefnur yfir á vélmenni.
NVIDIA Jetson Þórtil að keyra rauntíma- á-ályktun og stjórn vélmenna.
Kerfið er hannað til að vera mát, þannig að vélfærafræðiteymi geta notað allan vettvanginn eða samþætt valda getu inn í núverandi þróunarleiðslur, og hjálpað þeim að stækka manngerðaþróun án þess að endurbyggja sama innviði fyrir hvert vélmenni eða verkefni.
Leiðandi rannsóknarstofnanir þar á meðal Ai2, ETH Zurich, Stanford Robotics Center og Advanced Robotics and Controls Laboratory UC San Diego ætla að nota þessa viðmiðunarhönnun til að efla rannsóknir á manngerðum vélfærafræði.
„Til að ná framförum í átt að almennum-vélmennum þurfa rannsakendur vettvanga sem eru bæði færir og víða aðgengilegir,“ sagði Deepak Pathak, með-stofnandi og forstjóri Skild AI. "Viðmiðunarhönnun gerir fleiri rannsakendum kleift að taka þátt í landamærarannsóknum á manngerðum og fara hraðar frá hugmyndum yfir í tilraunir. Þetta hjálpar til við að ýta öllu vistkerfi vélfærafræðirannsókna áfram."