NVIDIA-ийн шинэ NeRF технологи нь метаверсийг эхлүүлэхэд тусална

Агуулгын хүснэгт:

NVIDIA-ийн шинэ NeRF технологи нь метаверсийг эхлүүлэхэд тусална
NVIDIA-ийн шинэ NeRF технологи нь метаверсийг эхлүүлэхэд тусална
Anonim

Үндсэн санаанууд

  • Nvidia саяхан 2D зургийг хэдхэн секундын дотор 3D үзэгдэл болгон хувиргадаг техникийг үзүүлжээ.
  • Энэ арга нь бодит ертөнцөд гэрэл хэрхэн ажилладагийг тооцоолохын тулд компьютерийн хүчийг ашигладаг.
  • Метаверс бол 3D үзэгдлүүдийг ямар ч камерын өнцгөөс харах боломжтой тул тустай хэсэг юм.
Image
Image

Nvidia-ийн шинэ хиймэл оюун ухааны (AI) технологи нь тун удахгүй 2D зургийг хэдхэн секундын дотор 3D үзэгдэл болгон хувиргаж, мета ертөнц гэх мэт гайхалтай виртуал орон зайг үүсгэх нь текст боловсруулалттай адил хялбар байх болно.

Nvidia саяхан Instant NeRF хэмээх гэрэл зургийн аргыг харуулсан бөгөөд энэ нь бодит ертөнцөд гэрэл хэрхэн ажилладагийг тооцоолохын тулд тооцоолох хүчийг ашигладаг. Энэ нь таны хуучин зургуудыг видео тоглоомын үзэгдэл болгон хувиргах эсвэл роботууд болон өөрөө жолооддог машинуудыг бодит ертөнцийн объектуудын хэмжээ, хэлбэрийг ойлгоход сургахад ашиглаж болно.

"3D дүрслэл нь өөрчлөлтийн шинэ ертөнцийг авчирдаг" гэж 3D алгоритмуудаа Nvidia платформ дээр ажиллуулдаг Visionary.ai компьютерийн харааны компанийн гүйцэтгэх захирал Орен Дебби Lifewire-д өгсөн цахим шуудангаар ярьжээ. "3D-г ашигласнаар та бодит ертөнцийн гүнийг дуурайж, дүр төрхийг илүү амьд, бодитой харагдуулдаг. AR/VR болон үйлдвэрлэлийн камеруудаас гадна 3D нь маш түгээмэл байдаг. Одоо бид үүнийг бараг бүх ухаалаг гар утсанд ашиглаж байгааг харж байна. Хэрэглэгч бүр мэдэж байгаа."

Хэмжээ нэмэх

Одоогоос 75 жилийн өмнө Полароид камераар авахуулсан анхны шуурхай гэрэл зураг нь 3D ертөнцийг 2 хэмжээст дүрслэлд хурдан буулгах зорилготой байв. Одоо хиймэл оюун ухаан судлаачид эсрэгээрээ ажиллаж байна: хөдөлгөөнгүй зургийн цуглуулгыг хэдхэн секундын дотор дижитал 3D үзэгдэл болгон хувиргах.

Урвуу дүрслэл гэж нэрлэгддэг уг процесс нь хиймэл оюун ухааныг ашиглан бодит ертөнцөд гэрэл хэрхэн ажилладагийг ойролцоогоор тооцоолж, судлаачдад өөр өнцгөөс авсан цөөн тооны 2D зургаас 3D дүр зургийг дахин бүтээх боломжийг олгодог. Nvidia энэ даалгаврыг бараг тэр дор нь гүйцэтгэх аргыг боловсруулсан гэж мэдэгджээ.

Nvidia энэ аргыг neural radiance fields буюу NeRF хэмээх шинэ технологид ашигласан. Тус компани Instant NeRF гэж нэрлэсэн үр дүн нь өнөөг хүртэл хамгийн хурдан NeRF техник юм. Уг загварт хэдхэн секундын дотор хэдэн арван хөдөлгөөнгүй зураг дээр дасгал хийх шаардлагатай бөгөөд дараа нь хэдэн арван миллисекундын дотор 3D дүр зургийг гаргах боломжтой.

"Хэрэв олон өнцөгт торон гэх мэт уламжлалт 3D дүрслэл нь вектор зурагтай төстэй бол NeRFs нь битмап зурагтай адил юм: тэд объектоос эсвэл үзэгдэл доторх гэрлийн цацрагийг нягт нямбай авдаг" гэж График судалгааны дэд ерөнхийлөгч Дэвид Любке хэлэв. Nvidia нэгэн мэдээнд дурджээ.“Тийм утгаараа Instant NeRF нь дижитал камер болон JPEG шахалт нь 2D гэрэл зургийн хувьд чухал ач холбогдолтой байж болох бөгөөд 3D зураг авах, хуваалцах хурд, хялбар, хүртээмжийг эрс нэмэгдүүлсэн.”

NeRF-г тэжээхийн тулд өгөгдөл цуглуулахын тулд мэдрэлийн сүлжээ нь үзэгдлийн эргэн тойрон дахь олон байрлалаас авсан хэдэн арван зураг, мөн тэдгээр зураг авалт бүрийн камерын байрлалыг авах шаардлагатай.

NeRF нь 3 хэмжээст орон зайн аль ч цэгээс аль ч чиглэлд цацрах гэрлийн өнгийг урьдчилан таамаглах замаар дүр зургийг дахин бүтээх жижиг мэдрэлийн сүлжээг сургадаг.

3D-н давж заалдах

Метаверс бол 3D үзэгдлүүдийг ямар ч камерын өнцгөөс харж болохуйц ашиг тустай хэсэг юм гэж Perceptus Platform for Perceptus Platform for Augmented reality (AR)-ийг үүсгэн байгуулагч Брэд Куинтон Lifewire-д өгсөн цахим ярилцлагадаа хэлэв. Бид бодит амьдрал дээр өрөөгөөр алхаж, түүний агуулгыг өөр өөр өнцгөөс харж, сэргээн босгосон 3D дүр зурагтай адил орон зайг бараг л хөдөлгөж, ямар ч өнцгөөс харах боломжтой.

Image
Image

"Энэ нь ялангуяа виртуал бодит байдалд ашиглах орчныг бий болгоход хэрэг болно" гэж Квинтон хэлэв.

Apple-ийн Object Capture гэх мэт программууд нь фотограмметрийн аргыг ашиглан хэд хэдэн 2D зургаас виртуаль 3D объект үүсгэдэг. 3D загваруудыг виртуал бодит байдал болон AR програмуудад өргөнөөр ашиглах болно гэж Куинтон таамаглаж байна. Жишээлбэл, Perceptus AR платформынх шиг зарим хиймэл оюун ухаан нь бодит ертөнцийн талаарх ойлголтыг бий болгохын тулд 3D загваруудыг ашигладаг бөгөөд энэ нь бодит цагийн AR програмуудыг ашиглах боломжийг олгодог.

3D зураг ашиглах нь дүр зураг дахь бодит ертөнцийн гүнийг дуурайж, зургийг илүү амьд, бодитой болгодог гэж Дебби хэлэв. Боке эффект (хөрөг зураг эсвэл киноны горим) үүсгэхийн тулд 3D гүнийн зураглал хийх шаардлагатай. Энэ аргыг бараг бүх ухаалаг гар утсанд ашигладаг.

"Энэ нь аль хэдийн киноны зураг авалтын мэргэжлийн видео зураглаачдын стандарт болсон бөгөөд энэ нь хэрэглэгч бүрийн стандарт болж байна" гэж Дебби нэмж хэлэв.

Зөвлөмж болгож буй: