上海万科徐泾天空之城弧形投影互动系统

 

万科天空之城这一充满浪漫色彩的名称不仅具有标志性与天然，更是位于上海西门户、上海经济增长第三极的大虹桥商务区徐泾镇。2020年12月，南京投石智能系统在上海为万科徐泾天空之城售楼处提供沉浸式体感互动空间。
万科沉浸式投影互动系统功能：支持在不同的位置，体验者通过体感凌空感应触发功能切换。包括ipad中控联动控制、支持外部嵌入的VR系统，并支持临时活动发布会场景。 开发环境：Window 10
开发语言：Processing 3.0
功能库包括PixelFlow UDP OSC Shadertoy KinectPV2 Spout video
OPENGL ES 3.0
工具软件：SPOUT NDI 局域网共享体感实时数据图
硬件配置：松下8000流明激光投影机5台
体感设备：Kinect 6套。
万科沉浸式弧幕投影体感互动空间系统包括了体感主程序，采集端程序，驻守+自启动程序和发布会内容管理程序四套系统。
万科沉浸式弧幕投影体感互动空间主程序：
1.待机状态：人影透过互动（透过呈现的可为静态图片），仅前面五台体感级联人影信号。前景为动态视频。
2.流程触发条件：主控端体感识别到人以后，结束待机互动，画面浮现LOGO。
3.一定时间范围内，识别到的人体大小位置符合条件，抬手可出现擦拭效果，前方的视频被部分擦拭掉，漏出后方的四字的图片，四个字基本显示完整后，切换到背景视频播放。
4.抬左手或右手分别触发不同的视频，左或右视频播完以后回到待机状态。超时没擦完或没抬手播视频均会返回待机互动状态。
5.回到待机状态一定时间后才可再次触发流程。
6.实时响应中控信号，无缝切换到VR程序，以及从VR程序切换回本程序。
7.体感数据整合功能，主机端除本身采集本端体感Kinect数据以外，还整合了其他5台体感采集端实时影像流数据。局域网数据图单个通路帧率在60帧每秒，延迟小于20帧，并做了同步处理，保证体感画面融合图像基本没有快慢差别。
8.多台体感融合总控制功能：主程序可通过UDP协议在局域网中分别控制各采集端融合参数，实时查看调整融合效果，并保存。
9.各端体感控制功能开关和控制画面切换的功能：抬左右手分别控制不同的视频播放。播放结束后，按条件切换回互动画面模式。
10.程序在任意状态可响应中控UDP控制信号，进行不同画面的切换跳转。
11.主程序调试模式的制作和外接参数配置功能，以便调试和更改。
12.所有的视频可配置，可替换。  
万科沉浸式弧幕投影体感互动空间采集端程序：
1.人影数据图融合前处理，点云数据图。
2.接收各种主程序端的UDP控制信号，实时反馈并保存当前参数。
3.不同采集端主机上体感画面通过局域网传给总控主机的SPOUT NDI视频流。
可通过主程序被设置修改画面的有效深度范围，在有效深度范围内仅发送人影图像，可被实时改变大小上下左右三维旋转状态。 万科沉浸式弧幕投影体感互动空间驻守+自启动程序：
1.监听主程序和VR程序的OSC指令，收到指令后切换程序。
2.自动启动多个SPOUT NDI工具软件，并自动换选视频流来源。
3.自动启动主程序。
4.可配置采集端个数，各程序路径位置等参数信息。 样例示范：体感粒子互动