3D显示效果
https://lookingglassfactory.com/
多人,怎么做到的。
决定直接用摄像头,摄像头提取人脸位置(最好是3D位置),放到Unity接口里面映射摄像头位置
壁画、版画
可变、有版权库、立体艺术、立体NFT艺术终端
图像分割制作终端
https://www.boe.com/CustomerProducts/BOEiGalleryS3
通过机械臂+屏+相机的映射来做
如果把相机变成人眼做实时mapping呢?
找相关产品找到一个吹牛的推送:离屏空间悬浮裸眼3D光场显示
然而最想要的显示屏已经有产品了:Spatial Reality Display
和我想到解决方案一毛一样:柱面镜+全息膜+眼动。
所以能不能去掉全息膜,做一个让人感觉像是屏幕后面有东西呢?
用Realsense加上视角和景深,追踪人眼在空间中的位置呢?
软件
Intel® RealSense™ SDK 2.0 (v2.44.0)
https://github.com/IntelRealSense/librealsense/releases
Viewer可以用来看输出的效果,SDK里面包含Viewer和Quality Tool
安装opencv-python
pip3 install opencv-python
跑exe Demo失败
PS C:\Users\ztl20\Downloads\openpose> bin\OpenPoseDemo.exe --face --hand
Starting OpenPose demo...
Configuring OpenPose...
Starting thread(s)...
Auto-detecting camera index... Detected and opened camera 0.
Auto-detecting all available GPUs... Detected 1 GPU(s), using 1 of them starting at GPU 0.
F0506 16:29:05.468179 19928 syncedmem.cpp:71] Check failed: error == cudaSuccess (2 vs. 0) out of memory
*** Check failure stack trace: ***
显卡内存报错,估计是到集显上面了
https://blog.csdn.net/qq_44001342/article/details/105900378
还是要重新build
Unity的插件
https://github.com/CMU-Perceptual-Computing-Lab/openpose_unity_plugin
视错觉,最好包括角度和景深。
图形得好好设计,为了观感更好。
接口工作量估计不小
Unity或UE游戏引擎
可能需要仔细考虑怎么映射
https://docs.unity3d.com/Manual/class-Camera.html
1080p摄像头 + 投影
追踪头部位置
Realsense D435i + 32寸4k 60Hz面板 + UR机械臂(最多可以有两组)
可以做眼动,即捕捉看的方向
https://eyeware.tech/gazesense/
暂时还是放弃机械臂,工作量太大了。