- SAM 3 ṣafihan aworan ati ipin fidio ni itọsọna nipasẹ ọrọ ati awọn apẹẹrẹ wiwo, pẹlu ọrọ ti awọn miliọnu awọn imọran.
- SAM 3D gba ọ laaye lati tun ṣe awọn nkan, awọn iwoye, ati awọn ara eniyan ni 3D lati aworan kan, ni lilo awọn awoṣe ṣiṣi.
- Awọn awoṣe le ṣe idanwo laisi imọ-ẹrọ imọ-ẹrọ ni Ilẹ-iṣere Ohunkohun Ohunkohun, pẹlu awọn awoṣe adaṣe ati adaṣe.
- Meta ṣe idasilẹ awọn iwuwo, awọn aaye ayẹwo, ati awọn ipilẹ tuntun ki awọn idagbasoke ati awọn oniwadi ni Yuroopu ati iyoku agbaye le ṣepọ awọn agbara wọnyi sinu awọn iṣẹ akanṣe wọn.
Meta ti ṣe igbesẹ miiran ninu ifaramo rẹ si itetisi atọwọda ti a lo si iran kọnputa pẹlu ifilọlẹ SAM 3 ati SAM 3D, Awọn awoṣe meji ti o faagun Abala Ohunkohun idile ati pe Wọn ṣe ifọkansi lati yi ọna ti a ṣiṣẹ pẹlu awọn fọto ati awọn fidio padaJina lati ku idanwo yàrá kan, ile-iṣẹ fẹ ki awọn irinṣẹ wọnyi jẹ lilo nipasẹ awọn alamọja mejeeji ati awọn olumulo laisi ipilẹ imọ-ẹrọ.
Pẹlu iran tuntun yii, Meta n dojukọ ilọsiwaju wiwa ohun ati ipin ati ni kiko awọn onisẹpo mẹta atunkọ si kan Elo anfani jepeLati ṣiṣatunṣe fidio si iworan ọja fun iṣowo e-commerce ni Ilu Sipeeni ati iyoku Yuroopu, ile-iṣẹ n wo oju iṣẹlẹ kan ninu eyiti Nkan ṣapejuwe ohun ti o fẹ ṣe ni awọn ọrọ ti to fun AI lati ṣe pupọ julọ ti gbigbe eru..
Kini SAM 3 nfunni ni akawe si awọn ẹya ti tẹlẹ?
SAM 3 wa ni ipo bi itankalẹ taara ti awọn awoṣe ipin ti Meta gbekalẹ ni 2023 ati 2024, ti a mọ si SAM 1 ati SAM 2. Awọn ẹya ibẹrẹ yẹn ni idojukọ idamọ iru awọn piksẹli ti o jẹ ti ohun kọọkan, nipataki lilo awọn ifojusọna wiwo gẹgẹbi awọn aami, awọn apoti tabi awọn iboju iparada, ati ninu ọran ti SAM 2, atẹle awọn nkan jakejado fidio kan fẹrẹẹ ni akoko gidi.
Bọtini idagbasoke tuntun ni bayi ni pe SAM 3 loye ọlọrọ ati kongẹ ọrọ takii ṣe awọn akole gbogbogbo nikan. Lakoko ti o ti lo awọn ọrọ ti o rọrun bii “ọkọ ayọkẹlẹ” tabi “ọkọ akero”, awoṣe tuntun ni agbara lati dahun si awọn apejuwe pupọ diẹ sii, fun apẹẹrẹ “ọkọ akero ile-iwe ofeefee” tabi “ọkọ ayọkẹlẹ pupa ti o duro ni ilopo”.
Ni iṣe, eyi tumọ si pe o to lati kọ nkan bii “fila baseball pupa” ki eto naa le wa ati ya gbogbo awọn eroja ti o baamu apejuwe yẹn laarin aworan tabi fidio. Agbara yii lati ṣatunṣe pẹlu awọn ọrọ jẹ iwulo paapaa ni ọjọgbọn ṣiṣatunkọ àrà, ipolowo tabi itupalẹ akoonu, nibiti o nigbagbogbo ni lati wo awọn alaye pato pato.
Pẹlupẹlu, SAM 3 ti ṣe apẹrẹ lati ṣepọ pẹlu awọn awoṣe ede multimodal nlaEyi n gba ọ laaye lati lọ kọja awọn gbolohun ọrọ ti o rọrun ati lo awọn ilana ti o nipọn gẹgẹbi: “Awọn eniyan joko ṣugbọn wọn ko wọ fila pupa kan” tabi “awọn ẹlẹsẹ ti n wo kamẹra ṣugbọn laisi apoeyin.” Iru itọnisọna yii daapọ awọn ipo ati awọn imukuro ti o ṣoro titi di aipẹ lati tumọ si ohun elo iran kọnputa kan.
Iṣe ati iwọn ti awoṣe SAM 3
Meta tun fẹ lati ṣe afihan apakan ti ko han ṣugbọn pataki: awọn imọ iṣẹ ati imo asekale ti awoṣe. Gẹgẹbi data ile-iṣẹ naa, SAM 3 ni agbara lati ṣiṣẹ aworan kan pẹlu diẹ sii ju ọgọrun awọn ohun ti a rii ni ayika 30 milliseconds ni lilo H200 GPU kan, iyara ti o sunmọ ohun ti o nilo fun wiwa awọn ṣiṣan iṣẹ.
Ninu ọran fidio naa, ile-iṣẹ naa ṣe idaniloju pe eto n ṣetọju iṣẹ ṣiṣe fere ni akoko gidi Nigbati o ba n ṣiṣẹ pẹlu awọn nkan igbakana marun marun, ṣiṣe ni ṣiṣeeṣe fun ipasẹ ati ipin akoonu gbigbe, lati awọn agekuru media awujọ kukuru si awọn iṣẹ iṣelọpọ ifẹ agbara diẹ sii.
Lati ṣaṣeyọri ihuwasi yii, Meta ti kọ ipilẹ ikẹkọ pẹlu diẹ sii ju 4 million oto agbekaleApapọ awọn onitumọ eniyan pẹlu awọn awoṣe AI lati ṣe iranlọwọ aami awọn iwọn nla ti data, idapọ ti afọwọṣe ati abojuto adaṣe ni ero lati dọgbadọgba deede ati iwọn-bọtini lati rii daju pe awoṣe dahun daradara si awọn igbewọle oniruuru ni Ilu Yuroopu, Latin America, ati awọn agbegbe ọja miiran.
Awọn fireemu ile-iṣẹ SAM 3 laarin ohun ti o pe Apa Ohunkohun GbigbaIdile ti awọn awoṣe, awọn ipilẹ, ati awọn orisun ti a ṣe apẹrẹ lati faagun oye wiwo AI. Ifilọlẹ naa wa pẹlu ala tuntun fun ipin “awọn ọrọ ṣiṣii”, ti dojukọ lori wiwọn iwọn eyiti eto naa le loye fere eyikeyi imọran ti o ṣafihan ni ede abinibi.
Ijọpọ pẹlu Awọn atunṣe, Vibes, ati awọn irinṣẹ Meta miiran
Ni ikọja paati imọ-ẹrọ, Meta ti bẹrẹ si tẹlẹ ṣepọ SAM 3 sinu awọn ọja kan pato ti a ti pinnu fun lilo ojoojumọ. Ọkan ninu awọn ibi akọkọ yoo jẹ Awọn atunṣe, ṣiṣẹda fidio wọn ati ohun elo ṣiṣatunkọ, nibiti imọran jẹ pe olumulo le yan awọn eniyan kan pato tabi awọn nkan pẹlu apejuwe ọrọ ti o rọrun ati lo awọn ipa, awọn asẹ tabi awọn ayipada nikan si awọn apakan ti aworan naa.
Ona miiran fun iṣọpọ yoo wa ninu Vibes, laarin ohun elo Meta AI ati pẹpẹ meta.aiNi agbegbe yii, ipin ọrọ yoo ni idapo pẹlu awọn irinṣẹ ipilẹṣẹ lati ṣẹda ṣiṣatunṣe tuntun ati awọn iriri ẹda, gẹgẹbi awọn ipilẹ aṣa, awọn ipa iṣipopada, tabi awọn iyipada fọto yiyan ti a ṣe apẹrẹ fun awọn nẹtiwọọki awujọ ti o gbajumọ pupọ ni Ilu Sipeeni ati iyoku Yuroopu.
Imọran ti ile-iṣẹ ni pe awọn agbara wọnyi ko ni ihamọ si awọn ikẹkọ alamọdaju, ṣugbọn kuku de ọdọ… awọn olupilẹṣẹ ominira, awọn ile-iṣẹ kekere, ati awọn olumulo ilọsiwaju ti o ṣiṣẹ lojoojumọ pẹlu akoonu wiwo. Agbara lati pin awọn iwoye nipa kikọ awọn apejuwe ni ede adayeba dinku ọna ikẹkọ ni akawe si awọn irinṣẹ ibile ti o da lori awọn iboju iparada ati awọn fẹlẹfẹlẹ.
Ni akoko kanna, Meta n ṣetọju ọna ṣiṣi si awọn idagbasoke ita, ni iyanju pe awọn ohun elo ẹni-kẹta -lati awọn irinṣẹ ṣiṣatunṣe si awọn solusan fun awọn atupale fidio ni soobu tabi aabo- le gbarale SAM 3 niwọn igba ti awọn eto imulo lilo ile-iṣẹ ti bọwọ fun.
SAM 3D: Atunṣe onisẹpo mẹta lati aworan kan
Awọn iroyin nla miiran ni SAM 3Deto ti a ṣe lati ṣe onisẹpo mẹta reconstructions ti o bere lati 2D images. Dipo ti o nilo awọn iyaworan lọpọlọpọ lati awọn igun oriṣiriṣi, awoṣe ṣe ifọkansi lati ṣe agbejade aṣoju 3D ti o gbẹkẹle lati fọto kan, ohunkan ti o nifẹ si pataki fun awọn ti ko ni ohun elo ọlọjẹ amọja tabi ṣiṣan iṣẹ.
SAM 3D ni awọn awoṣe orisun ṣiṣi meji pẹlu awọn iṣẹ pataki: SAM 3D Ohunlojutu lori atunko ohun ati awọn sile, ati SAM 3D Ara, ti lọ soke si esitimeti eda eniyan apẹrẹ ati ara. Iyapa yii ngbanilaaye eto lati ni ibamu si awọn ọran lilo ti o yatọ pupọ, lati awọn katalogi ọja si ilera tabi awọn ohun elo ere idaraya.
Gẹgẹbi Meta, Awọn nkan SAM 3D jẹ ami a Aṣepari iṣẹ ṣiṣe tuntun ni atunkọ 3D itọsọna AIni irọrun ju awọn ọna iṣaaju lọ ni awọn metiriki didara bọtini. Lati ṣe iṣiro awọn abajade diẹ sii ni lile, ile-iṣẹ ti ṣiṣẹ pẹlu awọn oṣere lati ṣẹda Awọn nkan olorin SAM 3D, data ti a ṣe ni pataki lati ṣe ayẹwo iṣotitọ ati awọn alaye ti awọn atunkọ kọja ọpọlọpọ awọn aworan ati awọn nkan.
Ilọsiwaju yii ṣii ilẹkun si awọn ohun elo ti o wulo ni awọn agbegbe bii roboti, imọ-jinlẹ, oogun ere idaraya, tabi ẹda oni-nọmbaFun apẹẹrẹ, ninu awọn roboti o le ṣe iranlọwọ fun awọn ọna ṣiṣe ni oye iwọn didun ti awọn nkan ti wọn ṣe pẹlu; ni iṣoogun tabi iwadii ere idaraya, o le ṣe iranlọwọ itupalẹ iduro ara ati gbigbe; ati ni apẹrẹ ẹda, o ṣiṣẹ bi ipilẹ fun ṣiṣẹda awọn awoṣe 3D fun ere idaraya, awọn ere fidio, tabi awọn iriri immersive.
Ọkan ninu awọn ohun elo iṣowo akọkọ ti o han tẹlẹ ni iṣẹ naa "Wo ninu yara" de Ọjà Facebookeyi ti o fun ọ laaye lati wo oju bi nkan ti aga tabi ohun ọṣọ yoo wo ni yara gidi kan ṣaaju ki o to ra. Pẹlu SAM 3D, Meta n wa lati ni pipe iru awọn iriri wọnyi, ti o ṣe pataki pupọ fun iṣowo e-commerce ti Europe, nibiti awọn ọja ti n pada nitori awọn ireti ti ko ni ibamu ṣe afihan iye owo ti o pọ sii.
Apa Ohunkohun Ibi isereile: agbegbe fun idanwo
Lati gba gbogbo eniyan laaye lati ṣe idanwo awọn agbara wọnyi laisi fifi sori ẹrọ ohunkohun, Meta ti mu ṣiṣẹ Apa Ohunkohun ibi isereileO jẹ iru ẹrọ wẹẹbu ti o jẹ ki o gbejade awọn aworan tabi awọn fidio ati ṣe idanwo pẹlu SAM 3 ati SAM 3D taara lati ẹrọ aṣawakiri rẹ. Ero naa ni pe ẹnikẹni ti o ni iyanilenu nipa wiwo AI le ṣawari ohun ti o ṣee ṣe laisi eyikeyi imọ siseto.
Ninu ọran ti SAM 3, Ilẹ-iṣere naa ngbanilaaye pipin awọn nkan ni lilo awọn gbolohun ọrọ kukuru tabi awọn ilana alayeApapọ ọrọ ati, ti o ba fẹ, awọn apẹẹrẹ wiwo. Eyi jẹ ki o rọrun awọn iṣẹ ṣiṣe ti o wọpọ gẹgẹbi yiyan eniyan, awọn ọkọ ayọkẹlẹ, awọn ẹranko, tabi awọn eroja kan pato ti iṣẹlẹ naa ati lilo awọn iṣe kan pato si wọn, lati awọn ipa ẹwa si yiya tabi rirọpo lẹhin.
Nigbati o ba n ṣiṣẹ pẹlu SAM 3D, pẹpẹ jẹ ki o ṣee ṣe Ṣawari awọn iwoye lati awọn iwo tuntuntunto awọn nkan, lo awọn ipa onisẹpo mẹta, tabi ṣe ipilẹṣẹ awọn iwo yiyan. Fun awọn ti o ṣiṣẹ ni apẹrẹ, ipolowo, tabi akoonu 3D, o funni ni ọna iyara lati ṣe apẹrẹ awọn imọran laisi nini lati lo awọn irinṣẹ imọ-ẹrọ idiju lati ibẹrẹ.
Ibi isereile tun pẹlu kan lẹsẹsẹ ti Àwọn àpẹẹrẹ tí a ti ṣetán láti lò Awọn ẹya ara ẹrọ wọnyi jẹ ti lọ si awọn iṣẹ-ṣiṣe kan pato. Wọn pẹlu awọn aṣayan iṣeṣe bii awọn oju piksẹli tabi awọn awo iwe-aṣẹ fun awọn idi ikọkọ, ati awọn ipa wiwo bii awọn itọpa išipopada, awọn ifojusi yiyan, tabi awọn ayanmọ lori awọn agbegbe ti iwulo ninu fidio naa. Awọn iru awọn iṣẹ wọnyi le jẹ ipele ti o dara julọ fun ṣiṣan iṣẹ ti media oni-nọmba ati awọn olupilẹṣẹ akoonu ni Ilu Sipeeni, nibiti iṣelọpọ awọn fidio kukuru ati akoonu media awujọ jẹ igbagbogbo.
Ṣii awọn orisun fun awọn olupilẹṣẹ ati awọn oniwadi
Ni ila pẹlu ilana Meta ti tẹle ni awọn idasilẹ AI miiran, ile-iṣẹ ti pinnu lati tu ipin pataki kan silẹ awọn orisun imọ-ẹrọ ti o ni nkan ṣe pẹlu SAM 3 ati SAM 3DFun akọkọ, awọn iwọn awoṣe, ala tuntun kan ti dojukọ lori ipin awọn ọrọ ṣiṣii, ati iwe imọ-ẹrọ kan ti n ṣe alaye idagbasoke rẹ ni a ti sọ di gbangba.
Ninu ọran ti SAM 3D, awọn atẹle wa: awọn aaye ayẹwo awoṣe, koodu ifọkasi, ati ipilẹ data igbelewọn tókàn iran. Ipilẹ data yii pẹlu ọpọlọpọ awọn aworan ati awọn nkan ti o ni ero lati lọ kọja awọn aaye itọkasi 3D ibile, pese otitọ nla ati idiju, nkan ti o le wulo pupọ fun awọn ẹgbẹ iwadii Yuroopu ti n ṣiṣẹ ni iran kọnputa ati awọn aworan.
Meta ti tun kede awọn ifowosowopo pẹlu awọn iru ẹrọ asọye bi Roboflow, pẹlu ibi-afẹde ti mu awọn olupolowo ati awọn ile-iṣẹ ṣiṣẹ lati Tẹ data tirẹ ki o ṣatunṣe SAM 3 si kan pato aini. Eyi ṣii ilẹkun si awọn ipinnu-ẹka kan pato, lati ayewo ile-iṣẹ si itupalẹ ijabọ ilu, pẹlu awọn iṣẹ akanṣe ohun-ini aṣa nibiti o ṣe pataki lati pin ni deede ti ayaworan tabi awọn eroja iṣẹ ọna.
Nipa jijade fun ọna ṣiṣi ti o jo, ile-iṣẹ n wa lati rii daju pe ilolupo idagbasoke, awọn ile-ẹkọ giga ati awọn ibẹrẹ -pẹlu awọn ti n ṣiṣẹ ni Ilu Sipeeni ati iyoku Yuroopu- le ṣe idanwo pẹlu awọn imọ-ẹrọ wọnyi, ṣepọ wọn sinu awọn ọja tiwọn ati, nikẹhin, ṣe alabapin awọn ọran lilo ti o kọja awọn ti Meta le dagbasoke ni inu.
Pẹlu SAM 3 ati SAM 3D, Meta ni ero lati fese a diẹ rọ ati wiwọle visual AI Syeednibiti ipin itọsọna-ọrọ ati atunkọ 3D lati aworan kan ko si awọn agbara ti o wa ni ipamọ fun awọn ẹgbẹ amọja to gaju. Ipa ti o pọju ti o wa lati atunṣe fidio ojoojumọ lojoojumọ si awọn ohun elo to ti ni ilọsiwaju ni imọ-ẹrọ, ile-iṣẹ, ati e-commerce, ni aaye kan nibiti apapọ ede, iran kọmputa, ati ẹda ti n di ọpa iṣẹ-ṣiṣe ti o ṣe deede kii ṣe ileri imọ-ẹrọ nikan.
Mo jẹ olutayo imọ-ẹrọ ti o ti sọ awọn ifẹ “giigi” rẹ di oojọ kan. Mo ti lo diẹ sii ju ọdun 10 ti igbesi aye mi ni lilo imọ-ẹrọ gige-eti ati tinkering pẹlu gbogbo iru awọn eto jade ninu iwariiri mimọ. Ní báyìí, mo ti mọ iṣẹ́ ẹ̀rọ kọ̀ǹpútà àti àwọn eré fídíò. Eyi jẹ nitori diẹ sii ju ọdun 5 Mo ti n ṣiṣẹ kikọ fun ọpọlọpọ awọn oju opo wẹẹbu lori imọ-ẹrọ ati awọn ere fidio, ṣiṣẹda awọn nkan ti o wa lati fun ọ ni alaye ti o nilo ni ede ti o jẹ oye nipasẹ gbogbo eniyan.
Ti o ba ni awọn ibeere eyikeyi, awọn sakani imọ mi lati ohun gbogbo ti o ni ibatan si ẹrọ ṣiṣe Windows bii Android fun awọn foonu alagbeka. Ati pe ifaramọ mi ni fun ọ, Mo ṣetan nigbagbogbo lati lo iṣẹju diẹ ati ṣe iranlọwọ fun ọ lati yanju eyikeyi ibeere ti o le ni ni agbaye intanẹẹti yii.