LoGeR – 3D jɔli kokura ka bɔ wideyow la minnu janya ka bon kosɛbɛ (DeepMind, UC Berkeley)

Wideyow ka lɛrɛw tigɛli ka kɛ diɲɛ 3D jɛlen ye

Miiri k’a filɛ i bɛ ko bɛɛ lajɛlen wideyow ta — kɔɲɔ seli, jɔli baara, walima sigida taama kungo kɔnɔ. I bɛ laban ni lɛrɛ caman ye, nka a ye ɲɔgɔndan fla ye, min bɛ kɛ ɲɔgɔn kan. N’i ​​tun bɛ se k’o wideyo jan, min tɛ se ka minɛ, o fɛn caman tigɛli kɛ ka kɛ o yɔrɔ bɛɛ lajɛlen 3D modɛli kelen ye, min bɛ se ka taama? Nin ye LoGeR ka laɲiniba ye, n’o ye ɲinini jɛ-ka-baara ye min bɛ DeepMind ni UC Berkeley cɛ. Nin fɛɛrɛ in tɛ fotow siri ɲɔgɔn na dɔrɔn; a bɛ hakilitigiya kɛ ka diɲɛ 3D basigilen dɔ jɔ kokura ka bɔ wideyow la minnu bɛ janya u kuntaala ni farikolo sira bɛɛ la, ka gɛlɛyaba dɔ ɲɛnabɔ ɔridinatɛri yecogo la.

Gɛlɛya koloma : bɛnkan sɔrɔ sɛgɛsɛgɛlibaw kan

Laadala 3D sigicogo kura fɛɛrɛw ka fisa ni wideyow surunw ye walima fotow lajɛlen ye minnu tara ka bɔ yɔrɔw la minnu tɛ kelen ye waati kelen na. Nka, u bɛ kɛlɛba kɛ ni wideyow "janya" ye. Gɛlɛyaw ye fila ye. A fɔlɔ, waati janya : ni wideyow bɛ taa miniti walima lɛrɛ caman kɔnɔ, yeelen bɛ Changé, fɛnw bɛ lamaga, mɔgɔw bɛ na ka taa. Filanan, yɔrɔ hakɛ : kamera bɛ se ka yɔrɔba dɔ tɛmɛ, i n’a fɔ ka taama nakɔsɛnɛyɔrɔ dɔ kɔnɔ ka don boon kɔnɔ, ka sigida belebeleba ni gɛlɛn dɔ da walasa ka kariti kɛ. Tuma caman na, sigida minnu bɛ yen, olu tɛ se ka diɲɛ kariti basigilen mara, o bɛ na ni jɔli kura walima "floaters" ye minnu tɛ ɲɔgɔn ta — fɛn minnu ye jinɛw ye minnu tɛ dugukolo yɔrɔ si ta ye. LoGeR b’o ɲɛnabɔ ni a y’a sinsin jirali kelen jɔli kan min bɛ to ka bɛn nin waati ni yɔrɔ hakɛba ninnu ma.

LoGeR bɛ se ka sigikafɔ jɛlen sɔrɔ cogo min na

LoGeR, n’o kɔrɔ ye ko Long Generative Reconstruction, o bɛ fɛɛrɛ kura dɔ jira min sinsinnen bɛ "kisɛ daminɛni" fɛɛrɛ kan. Sanni a k’a ɲini ka 3D ɲɛjirali bɛɛ jɔ siɲɛ kelen na ka bɔ wideyow la minnu bɛ ɲagami, o sistɛmu bɛ fɔlɔ ka wideyow yɔrɔ fitinin dɔ jira, min bɛ se ka ɲɛnabɔ, min jɔli ka nɔgɔn ni dannayaba ye. Nin 3D patch ɲumanba in bɛ kɛ ankɔri sabatilen walima "kisɛ" ye. O kɔfɛ, modɛli bɛ nin 3D jiracogo in bonya dɔɔnin dɔɔnin, karamɔgɔya ni karamɔgɔya, ka kunnafoni yetaw kura don a kɔnɔ ni hakilisigi ye k’a sɔrɔ a bɛ segin ka ɲɛsin kisɛ sigilen ma walasa ka diɲɛ bɛɛ ka bɛnkan sabati. O fɛɛrɛ in b’a to modɛli bɛ se ka a yɛrɛ tanga sɛgɛsɛgɛli jaanw ma minnu bɛ sɔrɔ ɲɔgɔn fɛ, ka 3D modɛli tiɲɛnen ni dannaya bɛ se ka da min kan ka bɔ donta janyalenba la. O ye jiginni ye ka bɔ a ɲinini na ka ja bɛɛ ye siɲɛ kelen na ka taa a jɔli la ka bɔ dankan na.

ye "An ka fɛɛrɛ in bɛ se ka kɛ sababu ye ka diɲɛ kɔnɔ 3D ja dɔ jɔ kokura min bɛ bɛn ɲɔgɔn ma ka bɔ wideyow jan dɔ la, o min ye sigida gɛlɛn ye fɛɛrɛ kɔrɔw kama minnu ka teli ka jateminɛ tigɛlenw bɔ."(Alimankan na) - LoGeR Sɛgɛsɛgɛlikɛlaw

Baarakɛcogo waleyali jagokɛlaw ni dabɔbaaw bolo

Fɛn minnu bɛ se ka kɛ fɛɛrɛ dɔ la i n’a fɔ LoGeR, olu ka bon kosɛbɛ. Fɛn dilannikɛlaw ni dugukolofeerelaw fɛ, a bɛ se ka yɔrɔw sɛgɛsɛgɛliw sɛmɛntiya, ka sira di wideyow taamacogo nɔgɔman ma walasa ka yɔrɔ dɔ modɛli 3D ɲɛfɔlen dɔ dilan. Ɲɛnajɛko la, filimu dilannikɛlaw tun bɛ se ka seti nimɔrɔmaw dilan ka bɔ yɔrɔw ɲinini ja caman na. Ka ɲɛsin fɛnw ladonni ni fɛnmarayɔrɔw ɲɛnabɔli ma, a bɛ se ka kɛ sababu ye ka yɔrɔbaw ka karti 3D fangama kɛ. Nin se in ka filanin nizɛri jɛlen dɔ da ka bɔ wideyow la minnu ma labɛn, o ye baarakɛminɛn barikama ye. Mewayz la, an bɛ jɛɲɔgɔnya dabɔlen ye ni nin fɛɛrɛ in ye. An ka jago OS modulari jɔlen don walasa ka kunnafonidilan gɛlɛnw don ɲɔgɔn na ani k’u labɛn. Miiri k’a filɛ poroze ɲɛnabɔli modulu dɔ la, yɔrɔ min na yɔrɔ sɛgɛsɛgɛli wideyow bɛ baara kɛ a yɛrɛma ni baarakɛminɛn dɔ ye i n’a fɔ LoGeR, ani 3D modɛli min bɛ sɔrɔ o la, o bɛ tali kɛ o yɔrɔnin bɛɛ la ni baarakɛminɛnw lisɛli ye, ni fɛnw jatebɔsɛbɛnw, ani waatibolodalenw ye Mewayz ka sigida kɔnɔ, ka porozɛ ɲɛtaa yecogo di tiɲɛ na, min bɛ mɔgɔ su ji la ani min falen bɛ kunnafonidilanw na.

ɲɛnajɛ filɛli : yɔrɔ ni waati faamuyali nata

LoGeR bɛ wuliba jira ka taa AI sitɛmuw fɛ minnu bɛ se k’an ka diɲɛ faamuya i n’a fɔ ja minnu bɛ tugu ɲɔgɔn na dɔrɔn, nka i n’a fɔ yɔrɔ 4D min bɛ taa ɲɛ, min bɛ wuli (3D + waati). Iterations nataw tun bɛ se ka fɛnw ni mɔgɔw nɔfɛtaama cogo la min tɛ fɛn tiɲɛ lɛrɛw kɔnɔ, ka fɛnw bɛ yɔrɔ min na dɔrɔn, o faamuya, nka u bɛ Changé cogo min na ani u bɛ ɲɔgɔn sɔrɔ cogo min na waati jan kɔnɔ. O yɔrɔ-ni-waati faamuyali in ye dancɛ nata ye. Plateformes i n’a fɔ Mewayz, n’u laɲini ye ka kɛ jagokɛyɔrɔ cɛmancɛ baarakɛminɛn ye, o yɔrɔ kunnafonidilanw seko kɔrɔlen suguw farali ɲɔgɔn kan, o bɛ se ka fɛn caman sɛmɛntiya tɔnw ka baarakɛcogo farikoloma bolodacogo, kɔlɔsili, ani sɛgɛsɛgɛli kɛcogo la. A b’an gɛrɛ siniɲɛsigi la, diɲɛ nizɛri ni diɲɛ farikoloma bɛ siri ɲɔgɔn na cogo min na, walasa ka latigɛ hakilitigiw sɔrɔ.

K’a sɔrɔ ɲinini baara don hali bi, LoGeR bɛ siniko dɔ jira, yɔrɔ min na, sigida o sigida kopi nimɔrɔma bɛɛ lajɛlen dilanni ka nɔgɔn i n’a fɔ wideyow ta. Sɛbɛnni, sɛgɛsɛgɛli, ani jɛɲɔgɔnya lakika nɔfɛkow ka bon, u bɛ fɔlisen janw tigɛli kɛ diɲɛ banbaliw ye, minnu bɛ se ka sɛgɛsɛgɛ.