“Project Tango” Google’s New Innovation on Mobile Devices




What is “project Tango”?

The goal of Project Tango is to give mobile devices a human-scale understanding of space and motion.
Now google’s ATAP(Advanced Technology And Project) group is in charge of the project. ATAP group is from Motorola. They are transfered to Google after the sale of Motorala Mobility to Lenovo.
In ATAP’ WHO WE ARE, they said,
“The future is what we choose to make, we make what we believe in.”
“Welcome to Motorala’s Advanced Technology and Project team.”
“A small band of pirates. Believers. Makers.”
“We like epic shit.”

Background

Our mobile devices assume that physical world ends at the boundaries of the screen. However, in daily life, we would navigate and understand the world through visual cues.
While walking down an aisle, we know it’s a path leading to a specific position while the mobile devices can only see the lines on the aisle’s projection and think them as geometry.
When buying furniture, we usually take pictuers of them in the mall, then go home and imagine our house with them according to the pictures. However, it doesn’t always go right! What if we can get the 3D model of furniture and our house. Things will be signifisant different!

Technology Details

ATAP’s current prototype is a 5” phone containing customized hardware and software designed to track the full 3D motion of the device, while simultaneously creating a map of the environment. These sensors allow the phone to make over a quarter million 3D measurements every second, updating its position and orientation in real-time, combining that data into a single 3D model of the space around you.
It runs Android and includes development APIs to provide position, orientation, and depth data to standard Android applications written in Java, C/C++, as well as the Unity Game Engine. These early prototypes, algorithms, and APIs are still in active development.

Future

With the help of Project Tango, we can change the data dimension to three, which is a signifisant improvment and will do great influence on our life. However, even though we have 3D data, we can only see them on a 2D plane. Perhaps in the past-Kinect age, more and more people will try to create a new way to display object 3D vividly!

谷歌手机版Kinect:Project Tango by 3D极客

在微软推出Kinect并在XBOX取得巨大成功之后,Google推出了Project Tango,这一次,3D技术又向前迈出了一大步。3D信息的获取技术开始进入移动平台,这将为其带来巨大的机遇。因为如果使用手机获取3D数据,除了3D数据之外,手机上的GPS模块、重力感应、光线感应、距离感应、电子罗盘、陀螺仪等一系列传感器将为3D数据的应用带来无限可能。比如,现在使用Kinect进行三维重建时,对每一帧获取的3D数据都需要进行相机姿态的估计,目前人们使用ICP等算法根据3D数据本身去估计相机姿态,但这种方法的性能并不令人满意,特别相机运动速度较快时,很容易跟丢。有了手机上众多传感器的帮助,或许这个问题很快就能得到更好的解决。

Tango计划的参与者众多,这其中包括hiDOF INC(他们的产品用于机器人、自动驾驶技术、移动平台的3D SLAM、医学影像处理以及点云数据的可视化与处理)、OLOCIG(致力于机器人应用嵌入式系统研究与开发的公司)、3D Robotics(The premiere advanced drone, UAV, multicopter, autopilot and autonomous vehicle control company in the world)、PARACOSM(They build 3D technologies to power the next generation of devices, help machines understand the physical world and improve virtual and augmented reality experiences)、OPEN SOURCE ROBOTICS FOUNDATION(Support the development, distribution, and adoption of open source software for use in robotics research, education, and product development)、MOVIDIUS(Develop technology that brings awareness and perception to cameras in connected devices. With their vision processor, they can better capture and interpret the world)、SPECK DESIGN(Design and innovation engine of the new economy)以及GOOGLE ATAP团队。

Tango拥有众多创新性应用,这包括了SLAM(Simultaneously localization and mapping),这项技术使得移动设备可以同时获取用户的位置以及用户周围的3D环境;增强现实,是通过计算机系统提供的信息增加用户对现实世界感知的技术,将虚拟的信息应用到真实世界,并将计算机生成的虚拟物体、场景或系统提示信息叠加到真实场景中,从而实现对现实的增强;盲人导航,帮助盲人了解身边的环境,保障行走的安全;距离测量,利用3D数据可以直接测量出画面中物体以米为单位的长度、宽度和高度;三维重建,重建出物体3D模型,在3D打印机的帮助下,人人都有可能创造奇迹。这一切,都在改变着计算机对真实世界的理解。

Tango让3D技术飞速进步的同时,也让移动设备拥有了新的感知能力,正如Google所说的那样,从前,移动设备对真实世界的理解消失在屏幕的边缘,而Tango将会让移动设备与人类一样去理解空间和运动。总而言之,The future is awesome!

3D极客 写在最前

3D极客

生活中,我们常说“眼睛是心灵的窗户”。没错,视觉作为人类最重要的感觉方式为我们获得着60%以上的信息。1839年,法国人达盖尔制成了第一台实用的”银版照相机” ,它是由两个木箱组成,把一个木箱插入另一个木箱中进行调焦,用镜头盖作为快门,来控制长达三十分钟的曝光时间,能拍摄出清晰的图像。从图像到视频,几百年来技术的发展,特别是伴随着计算机和互联网的多媒体概念,让我们记录视觉信息的能力突飞猛进。

可是不论是图像还是视频,归根到底是二维的信息,他们记录的是进行投影成像之后的三维空间或者物体,成像的同时也丢掉了距离的信息。随着技术的进步,特别是计算机运行速度的不断提高以及数据存储设备价格的持续降低,3D视觉技术应运而生,常见的3D电影通过滤镜对图像的过滤为大脑呈现出两幅略微有差别的图像,利用大脑的计算能力,让我们重新感觉到视频中的景深信息。

除了3D显示技术的进步,3D信息的获取技术同样日新月异,以色列的Primesense公司为微软打造的Kinect成功用消费电子的价格为用户提供了深度信息,虽然与价格动辄几十万的工业级设备差距不小,但它却让这项技术走入寻常百姓家。在3D信息的基础之上,基于图像的模式识别被成功应用于游戏,同时更为三维模型重建提供了可能。

什么是三维重建呢?简单地说它把物体变成了计算机可以保存、显示和打印的数据,为物体照了个“三维像”,你可以把它放在电脑上转来转去360°观察每一个角落。这还不是最酷的,有了3D打印机,模型直接就成真,听起来真快赶上神笔马良了,而且据说现在最便宜的3D打印机只要$199,未来,Awesome!

咫尺天涯的3D极客板块,意在介绍、传播、分享与3D显示、信息获取、三维重建、3D打印相关的技术、应用和创新,视觉信息进入了3D时代,未来,一切皆有可能。

秋日九寨沟游记 by 咫涯

秋日九寨沟游记

公路美景,云霞明灭 by 咫涯 2014.10.12

九寨美景

自西安出发经过陇南、文县至九寨沟游玩,经过汉中,天一下子从雾蒙蒙中解放出来,惊呆了车里的看客,感慨万千。

陇南路上的蓝天是那么的透亮 仿佛是最纯正的蓝,用最纯净的水化开,一层一层涂在天上一般。远离太阳的一边是格外多刷了几层显示出美丽的湛蓝。

沿着河道极目远眺崇山峻岭间勾勒出倒三角形的天空。在山与天相接的地方出现梦幻般紫色的云彩。

头顶上则是青蓝配上棉花团似的洁白的云团,遮住一半天遮住一半山。而靠近太远的一边又是另一种景象,蓝色在这里变成了极淡的明亮的蓝,每处都透着阳光含着温暖。

从天上洒下来金色光照在黑黝黝的柏油路上,反射出的光晃的刺眼。可是太阳并不是一直能占据蓝天 她和白云在进行一场角力。时而一团白云遮住了光,随着白云徐徐而来太阳的光芒从云的边缘透出来 为白云染上了橘色的边,仿佛神仙住在那里,霞光万丈,这是最美的特效也不能制作的美景。

时而白云完全遮住太阳,大地陷入阴影中。这里光与影上演一场优美的舞蹈 ,看客是缓缓流动的河流,挺拔翠绿的树木,巍峨的山川。它们不光欣赏着,也参与在这场表演中,一时被镀上柔和的光,一时覆盖上黑色的影。

车沿着公路前进,公路伴着河流,蜿蜒在山间。狭窄处河水碧绿而湍急,行至开阔处,水面平静而幽蓝,岸边几户农家,白房青瓦,傍晚时分炊烟袅袅升起,平添几分人气,却又不至于喧闹更加彰显出村落的宁静、缥缈、优雅。暧暧远人村,依依墟里烟 ,就是这样的画面吧。村庄与炊烟,一动一静,勾勒出人间的悠闲与繁忙,巧妙地组成了一幅农耕文明的乡风俚俗画,静的是百年老屋,动的是袅袅升腾的炊烟,炊烟随意的一舒展就是一幅人间最和谐的生活画景。间或能听见鸡鸣,是我这久在城里生活的人未曾见过的却已在这美丽的乡土间流传千古的自然生活方式,或许随着时光的流逝,科技的推进,这样的村落景象终有一天会消失,可是它的美不应消失,依然可从各种诗中窥探。