“素面变豪华拉面，这位拉面狂魔用GAN和AR实现“味觉转换””

本篇文章2436字，读完约6分钟

大数据文摘产品。

作者:蒋宝尚，andy

中午打算吃拉面，家里的面粉没了。 请外卖吧。 总觉得味道差一点。

该怎么办呢，看着冰箱里的素面，陷入了深深的绝望……。

人工智能已经迅速发展到今天，创造“贾维斯”还有点困难。 但是，素面就这样做拉面是很难的……嗯，很难。

那么，能让素面看起来像拉面吗？ 我不能吃那个味道，我们去看看书店吧！

众所周知，GAN ( generative ADVER Sarial Network生成对抗互联网)合成的假图像可以完美地欺骗人类，经过语音数据的训练可以制作柯南的变声蝶领带。

嗯，技术这么不可思议，结合gan和ar技术，真的可以从拉面的味道吃素面！

召开ieeevr会议时，奈良先端科学技术研究生院大学和电信大学的研究小组发表了实时味觉操作系统，通过gan对食物的外观进行图像转换，利用ar叠加到实际图像上，在视觉上引起味觉错觉。

这篇论文收录在ieeevr中，作为demo展示。

论文:增强yournoodles:gan-based real-time food-to-foodtranslationanditsimpactonvision-inducedgustatorymanipulation

作者: kizashi nakano，daichi horita，nobuchika sakata，kiyoshi kiyokawa，keiji yanai，takuji narumi

所属: narainstituteofscienceandtechnology； theuniversityofelectro-communication s； the university of tokyo

具体地说，提出了通过gan实时地将实际食物转换成其他食物图像，操作味觉。 这种方法是实时转换食物的外观(颜色和纹理)以在视觉上控制味觉。

首先，从视频透视型头盔显示器( htc vive pro )的前置照相机取得rgb图像，发送到服务器。 服务器侧切出取得的图像的中心，转换成其他的食物图像。 转换图像后，将转换后的图像最终叠加在实际图像上。

从食物到食物的图像转换使用了基于stargan的互联网体系结构，实时执行。 因此，该系统可以基于原始食物的一些变化动态地同时交互操作。 另外，在某种程度上保持和调整原始食物的视觉特征，可以在转换后产生更自然的错觉。 另外，比如吃面的时候，不仅可以把素面换成拉面，还可以换成炒面这样的各种各样的面。

注:与pix2pix和cyclegan的比较过程不同，它处理一对一的问题，即从一个行业向另一个行业的转换。 stargan可以在多个行业进行转换。 具体来说，stargan是在统一的框架内实现多个行业转换的算法，可以在同一模型下进行头发颜色的交换、表情的交换、年龄的交换等多个图像翻译任务。

为了训练互联网，研究者从5种食物类别(拉面、炒面、白米、咖喱饭、炒饭)制作了149，370张食物图像数据集。 在演示视频中，系统可以把素面换成拉面和炒面，把白米换成咖喱饭和炒饭，就像吃一种食物时吃另一种食物一样的味觉幻觉。

素面变拉面，拉面“狂魔”的技术之路

这篇技术论文的第一个作者是kizashi nakano，对拉面抱有狂热的爱。 甚至在他facebook主页上的个人资料上也显示想吃拉面……。

根据facebook上的资料，kizashi nakano是日本奈良尖端科学技术研究生院大学的研究生，擅长的行业是vr、ar、mr。

其实，关于拉面味觉转换的研究，他已经做了两个，而且第一个项目已经得到了国家级的奖励。

把自己有趣的爱好弄得这么高端，我也很佩服。 在一次采访中，这个同学说出了他做这项研究的理由。 “我最喜欢拉面，生病后虽然不能品尝这个味道，但是我忘不了拉面！ 我还想吃拉面！ 同时，我总是这么想。 后来，我看了拉面的画像，吃了别的东西，我想可能又有拉面的味道了！ 所以我决定“尝试研究虚拟现实”。

据介绍，他高中时代从事过机器人等相关研究。 上大学后，他一定精通编程，想用它做相关研究。 因此，大学1年级的时候，参加了文部科学省主办的“科学学院”的研究，成为了学生志愿者制作的“fit口袋实验室”的一员。 两年后，当我以为是不太感兴趣的研究主题的素材时，他的伙伴也参加了。

注: fit袖珍实验室是福冈工业大学新闻工程学院的跨学科工作之一，集中在低年级的独特学术研究活动上。 参加者可以明确他们想做的研究主题，一边接受前辈和教授的建议，一边进行1年的实验和研究。

他的朋友的名字是津田，也在福冈工业大学学习，两人在大学认识，进行味觉转换的研究，发表了“利用增强现实技术开发味觉操纵系统”，受到了国家级的奖励。 所以ieeevr收录的这项研究肯定也离不开津田的支持和帮助。

这个味觉转换的研究在学术界并不多，刚接触的时候，kizashi nakano表示他和他的同伴经历了很多挫折，为了更真实的效果，让图像更清晰，两人反复试验错误，尝试各种食物 最后测试了一下，80%的人称食品的味道确实变了。

事实上，终极虚拟现实体验包括嗅觉和味觉等所有感觉，领域和社区继续探索相关的实现方法。 例如，东京大学的研究者提出了利用下颚刺激gjs技术，更好地改变味觉，控制味道。 相信这种结合了gan&ar技术的研究项目也会给虚拟现实研究者带来新的方向吧。

实习/全职记者招聘ing

加入我们，体验专业科技媒体撰写的细节，在最有前途的领域，与世界上最优秀的人们一起成长。 坐标北京清华东门在大数据文摘主页的对话页面上回复“招聘”以了解详细情况。 简历请直接发送到zz@bigdatadigest

志愿者的介绍

请在后台回复“志愿者”参加

点“看”的人都漂亮了

本文以wechatpublicplatform :大数据摘要开头。 文案是作者个人的观点，不代表网络的角度。 投资者据此，风险请自己承担。