Fetolela batho le lintho ho 3D ka Meta's SAM 3 le SAM 3D

¿Mokhoa oa ho fetolela batho le lintho hore e be mehlala ea 3D ka SAM 3D? Bohlale ba maiketsetso bo sebelisoang liponong bo na le tšusumetso e kholo, 'me joale, ntle le ho rema lintho ka nepo, hoa khoneha. fetola setšoantšo se le seng ho ba mohlala oa 3D E itokiselitse ho batlisisa ho tsoa mahlakoreng a mangata. Meta e hlahisitse moloko o mocha oa lisebelisoa tse koalang ho hlophisoa, kutloisiso ea lefats'e ea pono, le kaho ea likarolo tse tharo ntle le ho hloka lisebelisoa tse tsoetseng pele kapa tsebo.

Re bua ka SAM 3 le SAM 3D, mefuta e 'meli e fihlang ho ntlafatsa ho lemoha, ho latela, le ho arola, le ho tlisa Khaho bocha ea 3D ea lintho le batho ho bamameli ba bangata. Tlhahiso ea bona e kenyelletsa ho utloisisa litaelo tsa mongolo le matšoao a bonoang ka nako e le 'ngoe, e le hore ho seha, ho fetola, le ho hlophisa bocha likarolo ho be bonolo joalo ka ho thaepa seo re se batlang kapa ho penya hanyane.

SAM 3 le SAM 3D ke eng, 'me li fapane joang?

Lelapa la Meta's Anything le atoloha ka litlatsetso tse peli tse ncha: SAM 3 le SAM 3D. Ea pele e shebana le ho tsebahatsa, ho latela, le ho arola lintho ka har'a linepe le livideo ka ho nepahala ha moloko o latelang, athe ea morao-rao. E tsosolosa jiometry ea 3D le ponahalo ho tsoa setšoantšong se le sengho kenyelletsa batho, liphoofolo, kapa lihlahisoa tsa letsatsi le letsatsi.

Phapang ea ts'ebetso e hlakile: SAM 3 e sebetsana le "kutloisiso le ho arola" ha lintho tse bonahalang, 'me SAM 3D e sebelisa kutloisiso eo ho "bopa" molumo oa likarolo tse tharo. Ka pairing ena, kemiso ea mosebetsi eo pele e neng e hloka software e rarahaneng kapa li-scanner tse khethehileng e ba haholo ho fihlella le kapele.

Ho feta moo, SAM 3 ha e felle feela lits'ebetsong tsa mantlha tsa pono. E fana ka karohano e tataisoang ke puo ea tlhaho e khonang ho toloka litlhaloso tse nepahetseng haholoHa re sa bua feela ka "koloi" kapa "ball", empa re bua ka mantsoe a kang "red baseball cap" ho fumana likarolo tseo hantle sebakeng, esita le video eohle.

Ho sa le joalo, SAM 3D e tla ka litatso tse peli tse tlatselletsang: Lintho tsa SAM 3D, tse shebaneng le dintho le dietsahalale SAM 3D Body, e koetliselitsoeng ho hakanya sebōpeho le 'mele oa motho. Boiphihlelo bona bo e lumella ho koahela ntho e 'ngoe le e 'ngoe ho tloha ho thepa ea bareki ho ea ho litšoantšo le litšoantšo, ho bula monyetla oa ho sebelisa mekhoa ea boqapi, ea khoebo le ea saense.

Ba khona joang ho arola le ho aha bocha ho tsoa setšoantšong se le seng?

Ntho ea bohlokoa e ka har'a meralo e koetlisitsoeng ka bongata bo boholo ba data ho theha likhokahano tse tobileng lipakeng tsa mantsoe le lipikselse. Mohlala o utloisisa litaelo tse ngotsoeng le matšoao a bonoang (ho tobetsa, matheba kapa mabokose) ka nako e le 'ngoe, fetolela kopo libakeng tse itseng ya foto kapa foreimi ya video.

Kutloisiso ena ea puo e feta mabitso a tloaelehileng a sehlopha. SAM 3 e ka sebetsana le litaelo tse rarahaneng, mekhelo, le mekhelo, e nolofalletsang lipotso tse kang "batho ba lutseng fatše ba sa roala katiba e khubelu." Sena se lumellana le lintlha tse qaqileng tsa mongolo E rarolla moeli oa histori oa mehlala ea pele, e neng e atisa ho ferekanya maikutlo a granular.

Joale SAM 3D e qala ho sebetsa: ho qala ka setšoantšo, e hlahisa setšoantšo sa mahlakore a mararo se u lumellang ho sheba ntho ka litsela tse ling, ho hlophisa bocha sebaka, kapa ho sebelisa liphello tsa 3D. Ha e le hantle, e hokahana le karolo e fetileng ho khetholla se re khahlang, ka hona, Haha bocha ka 3D ntle le mehato e thata ea mahareng.

Likarolo tse ncha ha li bapisoa le meloko e fetileng

SAM 1 le SAM 2 li fetotse karohano ka ho itšetleha haholo ka matšoao a bonoang. Leha ho le joalo, ba ile ba thatafalloa ha ba kōptjoa ho fana ka litlhaloso tse telele kapa litaelo tse sa tšoaneng tsa puo ea tlhaho. SAM 3 e phunyeletsa mokoallo oo ka ho kenyelletsa kutloisiso ea multimodal e kopanyang mongolo le pono ka kotloloho.

Meta e tsamaisana le tsoelopele e nang le benchmark e ncha ea karohano e bulehileng ya tlotlontsweE etselitsoe ho lekola likarolo tse tataisoang ke mongolo maemong a nnete a lefats'e, le ka phatlalatso ea boima ba SAM 3. Ka tsela ena, bafuputsi le bahlahisi ba ka lekanya ka thata le ho bapisa liphetho lipakeng tsa mekhoa.

Ha e ntse e hlophisa bocha, Lintho tsa SAM 3D li ntlafala haholo holima mekhoa e fetileng, ho latela data e arolelanoang ke Meta, eo hape e lokollang li-checkpoints, khoutu ea inference, le sete ea tlhahlobo. Haufi le SAM 3D Body, k'hamphani e ntse e lokolla Lintho tsa SAM 3D Artist, dataset e ncha e entsoeng ka litsebi ho hlahloba boleng ba 3D litšoantšong tse ngata tse fapaneng.

Lisebelisoa tsa 'nete tsa lefats'e le linyeoe tsa ts'ebeliso ea hanghang

Meta e kopanya bokhoni bona lihlahisoa tsa eona. Ho "Edits," sesebelisoa sa eona sa video sa Instagram le Facebook, karolo e tsoetseng pele e se e ntse e sebelisoa ho sebelisa litlamorao ho livideo. batho kapa dintho tse itseng ntle le ho ama setšoantšo se setseng. Sena se thusa ho fetola maemo a ka morao, li-filters tse khethiloeng, kapa liphetoho tse lebisitsoeng ntle le boleng ba boleng.

Hape re tla bona likarolo tsena ho Vibes, ka har'a sesebelisoa sa Meta AI, le sethaleng sa meta.ai, ka boiphihlelo bo bocha ba ho hlophisa le boqapi. Ka ho lumella litaelo tse rarahaneng, mosebelisi a ka hlalosa seo a batlang ho se fetola, 'me sistimi e tla arabela ka nepo. e etsa mesebetsi ea morao-rao ea tlhahiso seo pele se neng se le boima.

Khoebong, "View in Room" ea Facebook Marketplace e hlahella, e thusa basebelisi ho bona ka mahlo a kelello hore na thepa ea ka tlung kapa mabone e tla shebahala joang ka tlung ea bona ka lebaka la mefuta ea 3D e iketselitsoeng ka bo eona. Ts'ebetso ena e fokotsa ho hloka botsitso le ho e ntlafatsa khetho ea ho reka, ntlha ea bohlokoa ha re sa khone ho bona sehlahisoa ka nama.

Tšusumetso e fetela ho liroboto, saense, thuto le meriana ea lipapali. Kaho e ncha ea 3D e tsoang lifotong tse bonolo e ka fepa li-simulators, ea theha mefuta ea litšupiso tsa anatomical, le lisebelisoa tsa tlhahlobo ea tšehetso tse neng li hloka lisebelisoa tse ikhethang pele. Sena sohle sea khothaletsa mesebetsi e mecha lipatlisisong le koetlisong.

Segment Anything Playground: leka 'me u thehe ntle le likhohlano

Ho etsa demokrasi ho fihlella, Meta e qalile Karolo efe kapa efe Lebala la LipapaliSebaka sa Marang-rang moo mang kapa mang a ka kenyang litšoantšo kapa livideo le ho etsa liteko ka SAM 3 le SAM 3D. Sebopeho sa eona se re hopotsa "magic wand" ea bahlophisi ba khale, ka molemo oo re ka o khonang ngola seo re batlang ho se khetha kapa ntlafatsa ka ho tobetsa tse 'maloa.

Ho feta moo, Lebala la Lipapali le fana ka litempele tse seng li loketse ho sebelisoa. Tsena li kenyelletsa likhetho tse sebetsang tse kang lifahleho tsa pixelate kapa lipoleiti tsa laesensele litlamorao tse ngata tsa boqapi joalo ka litselana tsa metsamao kapa mabone. Sena se etsa hore ho khonehe ho fihlela mesebetsi ea ts'ireletso ea boitsebiso kapa litlamorao tse hapang mahlo ka metsotsoana.

Ntle le karohano, basebelisi ba ka hlahloba lits'oants'o ho tsoa ho lipono tse ncha, ba li hlophisa bocha, kapa ba sebelisa litlamorao tsa likarolo tse tharo ka SAM 3D. Sepheo ke hore mang kapa mang, ntle le tsebo ea pele ea 3D kapa pono ea k'homphieutha, a khone ho etsa joalo. fihlela sephetho se amohelehang ka metsotso le ntle le ho kenya letho.

Mehlala, lisebelisoa tse bulehileng le tlhahlobo

Meta e lokolotse lisebelisoa ho thusa sechaba ho ntšetsa pele boemo ba bonono. Bakeng sa SAM 3, tse latelang lia fumaneha: boima ba mohlala mmoho le palo e bulehileng ea mantsoe le pampiri ea tekheniki e hlalosang meralo le koetliso. Sena se nolofatsa ho ikatisa le ho bapisa ka toka.

Ka pele ho 3D, k'hamphani e lokolotse lintlha tsa taolo, khoutu ea boitsebiso, le sehlopha se latelang sa tlhahlobo. Bobeli ba SAM 3D Objects le SAM 3D Body bo lumella ho fana ka litaba ka botlalo. dintho tse akaretsang le mmele wa motho ka metrics e ikamahanyang le boemo bo bong le bo bong, ntho ea bohlokoa ho lekola bots'epehi ba jiometri le pono.

Ho sebelisana 'moho le baetsi ba litšoantšo ho theha SAM 3D Artist Objects ho hlahisa mekhoa e metle le ea mefuta-futa tlhahlobong, eseng feela ea tekheniki. Sena ke senotlolo sa ho etsa hore ntlafatso ea 3D e be molemo ho libaka tsa boiqapelo le tsa khoebomoo boleng bo bonoang ke batho bo etsang phapang.

Karohano ea mongolo: mehlala le melemo

Ka SAM 3, o ka thaepa "red baseball cap" mme sistimi e tla tsebahatsa lipapali tsohle setšoantšong kapa video eohle. Ho nepahala hona ho bula monyetla oa ho hlophisa li-workflows moo ho thaepa "red baseball cap" ho lekane. dipolelo tse kgutshwane le tse hlakileng ho arola dielemente le ho sebedisa ditlamorao kapa diphetoho ho tsona.

Ho lumellana le mefuta ea lipuo tse ngata ho lumella ho fana ka litaelo tse ruileng, ho kenyelletsa le mekhelo kapa maemo ("batho ba lutseng fatše ba sa roala kepisi e khubelu"). Ho feto-fetoha ha maemo ho fokotsa lihora tsa mosebetsi oa matsoho le ho fokotseha liphoso tsa khetho tseo pele di neng di lokisoa ka letsoho.

Bakeng sa lihlopha tse hlahisang litaba ka bongata, likarolo tse tsamaisoang ke mongolo li potlakisa liphaephe le ho etsa hore ho be bonolo ho tiisa liphetho. Ka ho bapatsa, mohlala, botsitso bo ka bolokoa ka ho sebelisa li-filters ho lelapa la sehlahisoa, ntho e itseng e ntlafatsa nako le litšenyehelo ea tlhahiso.

Ho hlophisa mecha ea litaba ea sechaba le boqapi ba dijithale

Ho kopanya ho Edits ho tlisa likarolo tse tsoetseng pele tsa tlhahiso ea morao-rao ho baetsi ba Instagram le Facebook. Sesefa seo pele se neng se hloka limaske tse rarahaneng joale se ka sebelisoa ka taelo ea mongolo le ho penya hanyane, ha se ntse se bolokoa likarolo le lintlha tse hlakileng foreimi e tsitsitseng ka foreimi.

Bakeng sa likotoana tse khutšoane, moo kemiso ea khatiso e leng bohlokoa, automation ena ke khauta. Ho fetola semelo sa sekotwana, ho totobatsa motho a le mong feela, kapa ho fetola ntho e itseng ha ho sa hloka tšebetso ea matsoho, le hore e etsa demokrasi liphello tseo pele li neng li khethetsoe litsebi feela.

Ho sa le joalo, Vibes le meta.ai li ntse li atolosa mefuta e mengata ea liphihlelo ka ho hlophisa lipuo le boqapi. Ka ho khona ho hlalosa ka botlalo seo re se batlang, ho tlola ho tloha mohopolong ho ea ho sephetho ho khutsufatsoa, ​​​​e fetolelang ho boqapi bo bongata bo pheta-phetoang ka nako e nyane.

Khoebo, saense le lipapali: ho feta boithabiso

"Sheba ka Kamoreng" ho Facebook Marketplace e fana ka mohlala oa boleng bo sebetsang: ho bona lebone kapa thepa ea ka tlung ka phaposing ea hau ea ho phomola pele u e reka, ho fokotsa meputso le ho haha ​​tšepo. Ka morao ho eona ho na le phaephe eo, ho qala ka litšoantšo, e hlahisang a 3D ea mohlala bakeng sa pono maemo a teng.

Ho mahlale le thuto, ho aha bocha ho tsoa lifotong tse bonolo ho fokotsa litšenyehelo tsa ho theha lisebelisoa tsa ho ruta le li-simulator tsa nnete. Moetso oa anatomical o hlahisitsoeng ke AI o ka sebelisoa e le sesebelisoa sa tšehetso ka liphaposing tsa borutelo kapa ... tlhahlobo ea biomechanicalho akofisa boitokisetso ba dikahare.

Meriana ea lipapali, ho kopanya tlhahlobo ea sebopeho sa 'mele le ho aha sebopeho bocha ho fana ka lisebelisoa tsa ho ithuta maemo le metsamao ntle le lisebelisoa tse turang. Sena se bula menyetla ea litlhahlobo khafetsa le tlhokomelo e hole.

Lekunutu, melao ea boitšoaro le mekhoa e metle

Matla a lisebelisoa tsena a hloka boikarabelo. Ho fetola litšoantšo tsa batho ntle le tumello ea bona ho ka lebisa mathateng a molao le a boitšoaro. Ho eletsoa ho qoba ho tsosolosa litšoantšo. lifahleho tse sa tloaelehangSe ke oa arolelana limotlelara ntle le tumello 'me u seke oa fetola liketsahalo tse ka bakang pherekano kapa kotsi.

Meta e phatlalatsa litaolo tsa ho fokotsa tšebeliso e mpe, empa boikarabello ba mantlha bo ho mosebelisi oa theknoloji. Ho eletsoa ho netefatsa tšimoloho ea litšoantšo, ho sireletsa data ea hau, le hlahloba moelelo oa taba pele o phatlalatsa mefuta ea 3D e ka hlahisang tlhahisoleseling ea lekunutu.

Litlhophisong tsa litsebi, ho theha maano a tlhahlobo le tumello, le ho ngola ka mokhoa o hlakileng litaba tse hlahisoang ke AI, ho kenya letsoho ts'ebelisong e nang le boikarabelo. Ho koetlisa sehlopha ka lihlooho tsena ho thusa ho thibela mekhoa e mebe e se e arabela ka potlako liketsahalong.

Mokhoa oa ho fetolela batho le lintho hore e be mehlala ea 3D ka SAM 3D: Mokhoa oa ho qala

Haeba u batla ho etsa liteko hang-hang, Karolo efe kapa efe ea Lebala la Lipapali ke monyako. Ha u le moo u ka kenya foto kapa video, ua ngola seo u batlang ho se khetha, 'me u leke likhetho tsa kaho ea 3D ka har'a sehokelo se bonolo. Bakeng sa lintlha tsa tekheniki, [lintho tse ling li teng]. boima, libaka tsa tlhahlobo le khoutu e thusang ho etsa liteko tse ikhethileng.

Bafuputsi, bahlahisi, le baetsi ba litšoantšo ba na le ecosystem e kenyelletsang li-benchmarks, li-database tsa tlhahlobo, le litokomane. Sepheo ke ho theha motheo o lumellanang oa ho lekanya tsoelo-pele le ho potlakisa ho adoptha ka mafapha a fapanengho tloha ho boqapi ba dijithale ho isa ho liroboto.

Ntho e khahlisang ka ho fetesisa ke hore ho tlola hona ha ho boloketsoe litsebi: nako ea ho ithuta e ntse e khutsufala, 'me likarolo li fihla lits'ebetsong tsa letsatsi le letsatsi. Ntho e 'ngoe le e' ngoe e fana ka maikutlo a hore ho hlophisa le 3D ho tla tsoela pele ho kopanngoa le mosebetsi oa ho sebetsa moo puo ea tlhaho ke sebopeho.

Ka SAM 3 le SAM 3D, Meta e tlisa likarolo tsa mongolo le kaho ea setšoantšo se le seng ho baqapi le lihlopha tsa boholo bo fapaneng. Pakeng tsa Lebala la Lipapali, kopanyo ho Edits, lisebelisoa tse bulehileng, le lits'ebetso khoebong, thutong le lipapaling, ho ntse ho theoa motheo o tiileng. mokhoa o mocha oa ho sebetsa ka litšoantšo le molumo e kopanyang ho nepahala, phihlello, le boikarabello.

Sehlooho se amanang:

Tataiso e felletseng ea Luma Ray: e hlahisa litšoantšo tsa 3D ho tsoa linepe

Mokreste garcia

O ne a rata theknoloji ho tloha ha a sa le monyenyane. Ke rata ho ba tsa morao-rao lefapheng lena, 'me ka holim'a tsohle, ho buisana le lona. Ke ka lebaka leo ke 'nileng ka inehela ho puisano ka theknoloji le liwebsaete tsa lipapali tsa video ka lilemo tse ngata. U ka mphumana ke ngola ka Android, Windows, MacOS, iOS, Nintendo kapa sehlooho sefe kapa sefe se amanang le seo se tlang kelellong.