Digital FUN
Digital FUN
- 实验场
虚拟偶像动捕测试Demo
Digital FUN 工作室联合国内顶级动捕公司诺依藤Noitom，完成从诺依藤动态捕捉设备PERCEPTION NEURON 到UE4虚拟偶像的动态和面部表情控制的整套工作流测试。这套动捕系统的虚拟偶像是目前市面上的行业标准，已经用于众多虚拟偶像演绎的商业项目之中。时间：2022.02软件： 诺依藤 PERCEPTION NEURON， Unreal Engie 4光点2021系列作品 · AR 美杜莎
Digital FUN 为AI Medusa开发AR体验，结合AI Medusa故事内容和从半透明的状态逐渐形成实体，如果观看者靠近并触摸她，她会发狂和暴怒，全身幻化为无数的尖刺猛烈的向空间中迸发。透过空间中缓缓出现AI Medusa的影像，该作品和观众主动建立临时连结，当音乐与视觉在现实空间中交融，通过AR技术模糊场域的边界，人机交互是AI Medusa概念里最有价值的部分，为创意呈现可交互的空间。时间：2021.12软件： TouchDesigner光点2021系列作品 · 用人的皮肤造蛇
探讨元宇宙世界身份真实性的问题。根据演出主题“美杜莎的石化凝视”，将自己石化的头部模型上传到虚拟世界，通过截取模型中的一寸皮肤而拉扯出蛇皮的花纹，外界的声音被传入虚拟世界，它仿佛被现实世界感召，而挣扎、破碎、扭曲、变形，是人类还是蟒蛇？在虚拟世界并不需要答案。人的精神内核留在现实世界，而皮肤将成为不具强烈身份代表性的一个视觉元素。在脱离了现代工业的制衣流程后，元宇宙世界中从头至脚的人类基础特征，都将由数字制作流程取代，每个人都可以成为自己的赛博基因创造师，打造属于自己的成百上千的数字皮肤，传统意义上的外貌将在虚拟世界中失去他的指向性。时间：2021.12软件： TouchDesigner，Mic光点2021系列作品 · 介质战争-EAU& Jimmz影音交互演出
《介质战争》影音交互作品是音乐人EAU和Digital FUN 工作室的Jimmz联合创作完成，并且在光点2021国际新媒体艺术节进行演出。掌握媒介的同时、又能谦逊克制地演绎，是这场演出的核心目标。艺术家用设计建筑般层层递进的手法，将声音视觉缓缓渗透到观众的体验中。又通过对激光、矩阵灯光、视觉投影、LED屏幕、人工智能算法、声道、元宇宙空间和手机小程序等媒介的调度，在关键的时刻剧烈扩大观者的感官，产生战争场景般的共振，让其包裹在声音和影像构筑的世界里。时间：2021.12软件： TouchDesigner，Notch VFX, Unreal Engine 4, Cinema 4D, Ableton Live光点2021系列作品 · 永恒的爱 线上虚拟展厅
基于web 3.0的线上加密技术，用户将点击一串独特的数字组合(https://www.cryptovoxels.com/play?coords=S@1061E,958S,10F) （https://www.cryptovoxels.com/play?coords=SW@1400W,1273S,-4.5U），展开沉浸式旅程。AI Medusa 的系列作品中，舞台表演和线下交互作为一个固定时间内的体验，相比之下，去中心化的区块链属性让AI Medusa成为了一个真实的永恒符号，数据构建的线上体验让观者都能参与其中，三者形成一个演绎闭环。观者通过参与式的游戏体验寻找永恒的AI Medusa，在元宇宙世界中重构屏幕传递的场域，当观者漫游在人类和机器通过想象力来构建的新世界，不由自主地开始思考永恒的意义。时间：2021.12软件： CryptoVoxels光点2021系列作品 · 人工智能美杜莎-流态意识
Digital FUN 为光点2021国际新媒体艺术节开幕演出制作的实时效果。舞者融合现代舞蹈表演结合实时影像技术呈现其角色穿梭在真实世界与虚幻空间的冲突和情感，摄影师手持拍摄以单机位居多，运镜不是铺设轨道那样平滑，尽可能模拟“人的视线”接近真实感受，画面内容通过放大被拍摄的舞者，引导观众把视线聚焦到镜头所指之处，在镜头语言的带领下，实时影像结合声音与画面营造出虚幻空间，如同现代人将屏幕后的世界塑造成另一个魔幻现场。当意识成为流态的，叙事不受限于特定的空间或时间框架，AI Medusa穿梭于各个时空的叙事交织在一起。时间：2021.12软件： TouchDesigner，Notch VFX光点2021系列作品 · AI Medusa 交互艺术小程序
Digital FUN 为光点2021国际新媒体艺术节 AI Medusa开发专属交互艺术小程序，结合AI Medusa故事内容和移动端的精神石化的视觉实践，参与者主动建立临时连结，通过实体装置和营造出的虚拟空间作为创意载体，模糊了现场的边界，这个是过程中最有价值的部分，而实践也依靠于参与者的合作。重构屏幕传递的场域，突破单一维度认知和感官认知的游戏机制，呈现参与式的审美体验，让其在体验过程中产生源源不断的回响。时间：2021.12软件： WebGL, 微信小程序Metahuman面部捕捉测试
在Metahuman中创建自定义角色并导入UE4。使用Iphone Livelink Face与PC连接设置，完成面部捕捉测试。时间：2021.10软硬件： Unreal Engine 4、Livelink Face，iPhoneNoitom动作捕捉Demo
Digital FUN lab实验研究中心Demo,使用Noitom动作捕捉测试设备，与pixotope完美兼容。Noitom虚拟现实解决方案可带来大空间环境下，六自由度、多人互动、虚实结合的虚拟现实体验。可以与动作捕捉系统共同组成更为直观化的虚拟拍摄系统，或为影视游戏 IP 提供延伸体验。
时间：2020.09
软硬件：Unreal Engine 4, Preception Neuron PRO
Pixotope AR 穿屏小实验
Digital FUN 首次进行AR元素的穿屏预演实验,两台Pixotope作为虚拟渲染引擎，将MR与AR结合起来，通过对显示器屏幕位置的测量与计算，获得MR与AR的遮罩区域分界部分，为AR元素获得两个不同的空间区域，从而能够实现其在不同空间的跳跃。
时间：2020.09
软硬件：Pixotope，Unreal Engine 4
即兴噪音 / TouchDesigner线上演出
氛围电子音乐人EAU 与 Digital FUN Jimmz合作，于摩登天空氛围音乐厂牌 Sound Blanc 现场直播声视互动线上演出。以“噪音”为主题衍生出的声音和视觉的即兴演出，30分钟的时间用TouchDesigner和模块合成器玩出无限的可能性。
时间：2020.08
软硬件： TouchDesigner， Ableton Live
错位山水 / 线上XR 虚拟演出
氛围电子音乐人EAU 与 Digital FUN Jimmz合作，于摩登天空氛围音乐厂牌 Sound Blanc 现场直播虚拟演播声视互动线上演出。将UE4 XR场景和TouchDesigner 的声音可视化相结合，使用多维视角和材质来打造一个潮湿迷离的错位山水城市景观。音乐人化身为多个大小的形象穿插在场景中，若即若离，无处不在。
时间：2020.06
软硬件：Unreal Engine 4, TouchDesigner
Space Y / 线上XR 虚拟演出
氛围电子音乐人EAU 与 Digital FUN Jimmz合作，于摩登天空氛围音乐厂牌 Sound Blanc 现场直播虚拟演播声视互动线上演出。配合EAU空灵的氛围音乐，在视觉架构上通过软性转换多个太空科幻场景，在概念性上表达了庄周的”小大之辩“，无所限制地遨游宇宙之向往。
时间：2020.05
软硬件：Unreal Engine 4
TouchDesigner 主题虚拟演播厅
Digital FUN 虚拟演播厅的概念首次被应用在澜景课堂的“TouchDesigner 设计师的可视化交互创作平台”线上直播讲座中。结合HTC Vive 追踪器的追踪功能，将摄像机位置和旋转角度实时传输给UE4的虚拟摄像机，结合众多如太空舱、森林、实验室等虚拟场景，呈现独特的线上直播体验。
时间：2020.03
软硬件：Unreal Engine 4, HTC Vive Tracker
Notch Kinect 元素互动Demo
作为国内Notch软件的使用先驱，使用Kinect One作为外接设备，我们测试了不同类型的Notch元件，生成以元素为主题的互动体验Demo，使用到Particle，Field，Cloner和Procedural Mesh等Notch Node，生成了火焰，冰块，流体和粒子等多种交互视觉效果。
时间：2019.05
软硬件：Notch，Kinect One
墨海 / Ink Ocean
墨海是使用TouchDesigner作为创作软件，将对2d物体动态进行向量识别的Optical Flow科技结合Fluid Simulation液态模拟系统制作的实验艺术音画互动Demo。被水墨包围的世界里涌起暗色的浪花，氤氲开来的雾气就好似黄粱一梦。
时间：2018.10
软硬件：TouchDesigner
征兆 / Omen
征兆是一件屏幕交互视觉艺术作品。一叶知秋，瞬息万变。一个简单的言行举止，其背后蕴含的能量，时常深不可测。有迹可循的征兆，代表着预言，趋势和怀疑。这组由四个屏幕，一个Hokuyo雷达传感器组成的声视交互装置，想要传达给用户一种对行为本身的反思以及因果变幻之间的辨证关系。深邃如海底般的图像暗流涌动，当用户接触屏幕的瞬间，无法预测的液态符文和声音如同流动的介质一样散开。随着用户移动手掌的位置，液态介质铺满整个视觉空间，声音也随之改变，映射着某一个微观宇宙已经被用户所影响。而当用户收回手掌，所有图像收缩，回归原状，仿佛一切都没有发生过，只有在不被注意的暗色之中若隐若现的圆形，代表着之前涌现过的历史。征兆中生长收藏四个阶段，从秋毫般细微的萌芽，到被完全改变的世界，而最终又回到看似相同的原点，其中微妙的关系和隐喻，是组成这个作品的核心。该作品参展2018年中国（上海）国际文化装备展览会。
时间：2018.06
软硬件：TouchDesigner，Hokuyo触控雷达
触梦 / Pushing through dream
Digital FUN 成员陈若琨在美国亚利桑那州的艺术展览，利用红外检测、计算机图形学分析及视觉交互设计等方法制作了这个大型的互动新媒体作品。作品的主题围绕中国的移民史，从一些不为人知的方面去诉说中国人在百年历史长河中移民美国的心路历程。艺术家走访了福建地区的“美国村”，深入美国唐人街去了解和记录一些真实的、被大众忽略的中国移民，记录了超过500分钟的视频和音频素材，结合计算机技术和视觉设计开发的背景，从而创作出了这件多媒体交互作品。作品在亚利桑那州立大学艺术学院展出，后受邀作为AZ本地艺术家在特斯拉赞助的 Girls in Tech NGO 组织会议上展出，并且受到了时任 Phoenix 市长的高度评价。
时间：2015.05-06
软硬件：Max/Msp
分离 / Division
分离是一个短期的视觉艺术实验项目，基于Josef Albers的Interaction of Color中的色彩关系原理，结合不同的基本集合形态，将两个相同形状，纹理颜色有所区别的图形经历重叠，离散，变化，再重叠的过程，得到一个完全不一样的纹理。旨在表达个体与个体之间的关系，从相似到差异，反向思考多元化。
时间：2018.05
软硬件：TouchDesigner
错位 / Cyber Awareness
错位是三个与身体部位有关的系列作品。其中头代表了思考，手代表了执行力，脚代表了速度。三个身体部分被单独提取出来，思考被复制，执行力指向不明，速度循环停滞。这个作品旨在表达当代泛滥的数字媒体对于身体的影响以及反思。
时间：2018.04
软硬件：TouchDesigner
Small Stage Valentine Edition
与温哥华知名声音表演艺术家 Patrick Pennefather 合作的舞蹈演出项目。这个项目模糊了虚拟与现实的界面，使用 TouchDesigner 将艺术家的声音语言与面部的像素特效结合，再通过屏幕显示出来。除此之外，将舞者的动态视频风格化，也是此次演出的部分视觉特效之一。不同于一般的传统Theater舞蹈演出，这个项目结合了声视艺术和灯光控制，展示了更加多元化的舞台综合效果。
时间：2018.02
软硬件：TouchDesigner
相由心生
作为一个短期的视觉艺术实验项目，我们在尝试如何用TouchDesigner 的视觉效果来表达汉字的内容含义。整个项目基于汉字的意义出发，结合了适度的视觉动效，表达了艺术家对于传统和当代艺术融合的一些尝试。
时间：2017.11
软硬件：TouchDesigner
Free Jazz performance
Free Jazz improvise performance 是一个小型的声视互动实验演出，结合了多达十余种的乐器，模拟合成器和数字合成器等，同时结合一位舞者的动态表演。在这个项目中，使用 TouchDesigner 为主要创意和开发软件，根据现场的多轨道音乐生成实时的影响。同时考虑到舞者的动态，视觉的元素能够有部分和影子产生联系，达到音乐-视觉-舞蹈的共振沉浸式体验。
时间：2017.11
软硬件：TouchDesigner
PLANETS
这是一个30天的实验项目，旨在探索 TouchDesigner 作为视觉艺术软件的可能性。整个项目始终基于一个基本的球体形态出发，通过加载动画，噪波，法线贴图，粒子动效，和 L-system 的算法等，表达了参差多态的艺术思考与灵感。
时间：2017.10
软硬件：TouchDesigner
2018上海青年艺术博览会
作为新锐艺术创意工作者，Digital FUN 成员陈若琨作为新媒体艺术家被邀请参加2017上海青年艺术博览会。作品 Pushing Through Dreams 以中国移民在美国的状态为背景，结合视觉，红外检测，交互，艺术探索等形式，将田野调查的形式以新媒体的形式进行呈现，探究和思考社会变革、文化冲突给中国移民带来的影响和冲击。
时间：2017.06
软硬件：TouchDesigner
Drawing Soul
作为Studio中第一个用引入德国 Leuze ROD4 设备的实验，Digital FUN 将抽象艺术与交互融为一体。实验在宽13米，高3米的空间内实施，让参与者能随心所欲的在墙上作画，释放内心的艺术渴望。
时间：2015.07
软硬件：TouchDesigner
火焰之魂、冰雪之躯
应用日本艺术家的底层算法，结合 Kinect 人体追踪技术，在 Unity3D 中呈现出无与伦比的视觉体验。在下一步研发计划，投影空间将被拓展为360环形区域，为用户提供全新的沉浸式体验感受。
时间：2017.03
软硬件：Unity 3D
实时交互立体沙画
Digital FUN 尝试利用 Microsoft Kinect 的深度检测算法和 TouchDesigner 的强大视觉分析模块进行一次实时投影的沙雕实验。从编程到调试和实现耗时不到半小时，已经能达到市面产品的基本功能产品。后续加上更多的UI设计和交互功能，将以产品形式呈现给市场。
时间：2016.08
软硬件：TouchDesigner
全息交互模型展示
Digital FUN 将全息技术与实时交互技术全面结合，让幻影成像不再是停留在观赏阶段。结合 LeapMotion 的精准手势识别系统与 TouchDesigner强大的功能整合能力，将三维模型通过与用户的实时交互来增加用户体验感，不再是单纯观赏，而在于游乐其中。
时间：2018.06
软硬件：TouchDesigner LeapMotion
Real-time Tracking in CAVE
Digital FUN 与杭州一隅千象信息科技合作测试的裸眼混合现实 CAVE 空间。结合其自主研发的3D深度视觉和机器学习算法，TouchDesigner 将 Cave 变为了一个实时变换的物理时空，开启了全空间交互技术的先河。
相关网页：http://www.archifiction-inc.com/
时间：2017.01
软硬件：TouchDesigner
机械臂实时交互表演
Digital FUN 与广州星莱电机科技有限公司合作，在2018年第一季度首次进行了实时机械臂通讯测试，并且取得了成功。不同于预编程系统，TouchDesigner 依托强大的实时渲染系统及协议通讯模块，将传统控制升级为实时操控。下一步结合I/O组件，机械臂将变身AI智能装置，真正实现人与机器的交互与交流。
时间：2018.03
软硬件：TouchDesigner
VIOSO 投影融合技术
德国知名自动校正融合软件公司 VIOSO 在2018年春季与Digital FUN 在上海共同举办了 TouchDeisigner + VIOSO 联合测试。借助 VIOSO 强大的自动校正功能，结合 TouchDesigner 的播控和实时渲染系统，Digital FUN 将在不久的将来推出基于 TouchDesigner 的服务器在内的媒体播控系统。
时间：2018.02
软硬件：TouchDesigner VIOSO
