【环球新视野】写在Lytro十年-杂谈光场相机的不足、优势、应用和展望(上)
2023-05-04 18:25:39 来源:面包芯语
Lytro 公司在2011年向市场推出了第一代光场相机,距今已经过去了近十年。这款号称“一次拍摄,多次对焦”的成像设备,在进行首次商业发布之时,在摄影界、科技界和媒体界都引发了不小的轰动。相比于传统的单反摄影相机,它主打的卖点是不需要繁琐地对焦和寻找摄影角度,单次拍摄后即可得到不同焦深和角度的照片。
光场相机的发明者、同时也是Lytro的创始人Ren Ng的博士论文获得了ACM Dissertation Award,而他本人也获得了"MIT Tech Review"s TR35" ,"Fast Company"s 100 Most Creative People in Business" ,"Silicon Valley Journal"s 40 under 40" 等一系列称号。光场相机可谓一时风光无限,在被誉为一项颠覆性的技术发明的同时,甚至有人视其为单反相机的历史终结者。
然而十年过去了,负责研发、推广这款产品的公司Lytro在2018年被Google收购了,公司的CEO、同样也是这款相机的发明人Ren Ng选择了重回学术界任职,成为UC Berkeley的一名教授,其他高管则选择启动第二次创业,创立了light field lab做光场全息显示。
【资料图】
尽管在To C端, 光场相机的表现可谓惨不忍睹,使用者的反馈也是恶评如潮,但是在To B端和学术界,光场相机依然延续着比较旺盛的生命力,不仅学术文章在陆续的被发表,拓展光场相机的应用范围,同时国内外少数科技独角兽也将该技术在某些应用领域进行落地(比如德国的Raytrix和国内的上海奕目科技,他们可谓是光场成像在工业应用领域的两大领头羊)。
不仅有高校科研成果转化,比如上海交通大学施圣贤教授成功将光场相机产业化落地,应用于三维流场检测,航空发动机和泛半导体等高端智能制造检测领域;亦有基于光场成像的技术发明获得了国家重大科技进步奖项,世界顶级学术期刊上也可以见到它的身影,比如清华大学的戴琼海课题组,在光场成像的生物医学显微应用上,有着较大的影响。
这种仿佛是一个技术,在经历着某种兴衰变革,在技术史上不乏某种技术几起几落的兴衰交替的现象,驱使着学界和业界的人们一哄而上、一哄而散,不断参与或者离开某个技术领域。
就光场相机而言,本文试图从纯技术角度去回答一个对该现象反思式的问题:光场相机的优势和劣势在哪里?什么原因使得它被消费者抛弃的同时却又在工业界延续着自己的生命?落地应用的现状如何?本文既是自问自答,也是抛砖引玉,希望各位从事本行业的看官,能多多发表自己的高见。
欲扬先抑,回顾该设备的不足,也是对光场相机在To B市场逐渐被抛弃的一个回顾和解释。光场相机由于其本身的硬件构造,无法避免的存在三大先天缺陷。
1. 空间分辨率低
图1 光场相机结构源于《基于仿生视觉的单相机光场成像及3-3维直接转换基础》
由于光场相机为了采集不同视角的信息,在CCD前放置了一个微透镜阵列。但是相机可以采集的总信息量却是受限于成像芯片上CCD像素的尺寸和数目,角度信息和空间信息的关系可以简单描述为:
信息总量=空间信息x角度信息
两者相互折中和制约,单个视角下的光场图像的大小,等于微透镜阵列中微透镜的个数,由于单个微透镜下的像素数目介于100到200之间,因此微透镜个数相当于原始CCD像素数目的100倍级别的压缩,对于一个1000万像素的光场相机,经过视角信息的折中压缩后,得到的单视角有效像素数目,居然只有十万像素量级!相比起传统单反相机几千万像素的纤毫毕现,这个数量级的空间分辨率,对用于摄影的消费者而言如同玩具。这也是光场相机在消费者市场遇冷到消失的最大因素。即使Lytro后续推出了2.0代光场相机,以进一步压缩角度分辨率的方式来提高空间分辨率,上述问题,依旧没有得到彻底的解决。不过,这个缺陷应该辩证看待,角度信息和空间信息的相对取舍,取决于应用场景。
2. 基线过短
基线问题的长短问题,消费者对其不敏感,然而在宏观成像和测量领域,比如航空摄影测绘、双目立体视觉、卫星遥感成像,却是一个极其重要的参数。
图2 基线和视差关系示意图
在多目视觉中,图像接受者(人,机器)对于深度信息的感知,源于目标在不同相机(眼睛)上的视差,视差大小随着目标物离相机的距离变化。相机之间的距离长度被称为基线长度,在同等距离条件下,基线长度越大,则视差越大,对深度的分辨能力也越高。
对于双目视觉,它的基线长度可以由大致平行布置的两个相机之间的间距表示,而对于光场相机,它的基线长度如何计算?如下图所示,因为每个微透镜都记录着入射点光源的一部分信息,此时你把每个微透镜都当成是一个小相机,那么你就可以直观地得到答案,由于多个“小相机”的存在,光场相机存在多个基线,但是光场相机的最大基线长度,是被点亮的间隔最远的两个微透镜的距离。但是这个基线长度,存在两个特性:首先是基线长度随着点光源的离焦距离变化,离焦平面近的时候,只有少数个微透镜下被点亮,因此最大基线长度比较短,但是离焦平面远的时候,更多的微透镜被点亮,最大基线长度变大(这也是光场相机在焦平面附近,景深分辨率最差的原因);尽管如此,微透镜的基线长度,无法超过CCD芯片尺寸本身。
图3:双目视觉和光场相机的基线长度对比
这种差距,和双目视觉对比,尤其明显,比如上图右边的光场基线长度,大致在2~3个微透镜的直径左右。由于光场相机的基线过短,在被测物距离较远的情况下,深度分辨率将会受到很大限制。
3. 相机的动态范围HDR被压缩
利用上一个点光源的分析案例可以发现,当点光源在焦平面附近时,只有少数微透镜被点亮,必然有更多的光能量,集中到少数CCD上;当点光源离焦平面院时,多个微透镜被点亮,即点光源的能量分布更加分散。在这种条件下,为了让相机CCD不过曝或者过暗,被拍摄物体的亮度只能在一个比较小的动态范围内,使得物体离焦近时不至于过曝,离焦远时不至于过暗。
上述三大问题,严重限制着光场相机的应用领域,也是光场相机在过去十年,不被消费者所接纳的主要原因。然而,寸有所长,尺有所短,在To B端以及学界,光场相机却有着诸多独特优势,能完成传统成像设备所不能的任务。上述三大不足,在这些应用领域,都得到了相应的克服和一定程度的解决。此外,以动态的目光看,随着像素尺寸的缩小、芯片上像素数目的增长、更高动态范围芯片的出现(甚至有些芯片号称,开发了永远不过曝的技术),上述问题有望得到根本性的解决。
技术的兴衰往往如此,峰回路转又一村,吸引着每一个十年中的人们“Boom and Bust”。
欲知光场相机的独特优势如何,请持续关注《光场视觉》!
标签:
相关阅读
- (2023-05-04)【环球新视野】写在Lytro十年-杂谈光场相机的不足、优势、应用和展望(上)
- (2023-05-04)each of的用法和意思_each of的用法
- (2023-05-04)观速讯丨未央今日播报:银保监会通报2022年度保险业偿付能力监管工作情况 五一假期国内旅游收入达1480.56亿元
- (2023-05-04)全球即时:上海银行(601229):盈利平稳 拨备支撑
- (2023-05-04)曝光!美国中央情报局利用网络攻击他国的相关调查报告公布
- (2023-05-04)世界微资讯!格力电器5月“开门黑”!股价逼近跌停,分红太少了?
热点推荐
- (2023-05-04)【环球新视野】写在Lytro十年-杂谈光场相机的不足、优势、应用和展望(上)
- (2023-05-04)外汇有什么风险?如何防范?
- (2023-05-04)each of的用法和意思_each of的用法
- (2023-05-04)以“棋”代笔 绘就绿色发展“新画卷”
- (2023-05-04)一季度广西金融总量再创新高-世界焦点
- (2023-05-04)世界简讯:广西加大本土品牌知识产权司法保护力度
- (2023-05-04)农发行武功县支行投放1亿元贷款支持农贸园区基础设施建设
- (2023-05-04)今日要闻!庞红:“橙”心爱助人
- (2023-05-04)观速讯丨未央今日播报:银保监会通报2022年度保险业偿付能力监管工作情况 五一假期国内旅游收入达1480.56亿元
- (2023-05-04)中央气象台|全球简讯
- (2023-05-04)全球即时:上海银行(601229):盈利平稳 拨备支撑
- (2023-05-04)世界新消息丨东莞有哪几所中专
- (2023-05-04)曝光!美国中央情报局利用网络攻击他国的相关调查报告公布
- (2023-05-04)酒后难受吃什么东西好_酒后难受吃什么好_讯息
- (2023-05-04)世界微资讯!格力电器5月“开门黑”!股价逼近跌停,分红太少了?
- (2023-05-04)博俊科技:公司后续随着产能的大幅释放将保持快速增长趋势 环球头条
- (2023-05-04)当前播报:天娱数科:公司已接入GPT4的API接口 主要用于持续优化内容生产效率与创意
- (2023-05-04)创业慧康:公司与飞利浦在合作期限内将基于“Tasy 软件”进行本地化开发“新一代 EMR 软件”
- (2023-05-04)天娱数科:公司下属子公司元境科技是腾讯内容制作供应商
- (2023-05-04)农业产业融合发展项目创建名单公布!唐山这个镇上榜 天天新动态
- (2023-05-04)世界讯息:通过资金借贷获取大额回报,黎海坚被开除党籍、解除劳动关系
- (2023-05-04)焦点观察:紧跟新趋势 打造新供给
- (2023-05-04)垃圾分类知识进万家 环球视点
- (2023-05-04)【独家焦点】机构:燃料油开盘将以补跌为主
- (2023-05-04)观速讯丨扩张船队!这家中东“土豪”船东收购5艘散货船和3艘原油船
- (2023-05-04)每日信息:淘宝、京东、拼多多混战背后的深逻辑
- (2023-05-04)新金路筹码连续4期集中|环球微资讯
- (2023-05-04)Mysteel:44家家电企业公布2022年业绩,7成净利增长-天天亮点
- (2023-05-04)彩超检查报告脾脏血管瘤_全球热闻
- (2023-05-04)今晚地铁2号线虹桥火车站加班车延长运营至明日2点30分,10号线虹桥火车站加班车延长运营至明日1点
- (2023-05-04)上周成品油轮市场低迷VLCC油轮市场再次下跌
- (2023-05-04)鲁 泰A:目前公司所涉基金暂无智能穿戴方面投资-天天关注
- (2023-05-04)每日播报!索菲亚:公司未来资本支出主要用于生产基地的升级改造及总部大厦的建设
- (2023-05-04)西王食品:目前公司与淄博牧羊村等烧烤店有着业务合作_世界实时
- (2023-05-04)明德生物:公司2023年第一季度除新冠外其他产品收入占比相对较低 环球快播
- (2023-05-04)爱仕达:广交会是公司宣传和推广产品的重要渠道
- (2023-05-04)不断拓展服务半径和内容,TA们以实干笃行展示劳动者风采|讯息
- (2023-05-04)汉宇集团:4月27日召开业绩说明会,投资者参与-全球视点
- (2023-05-04)格力电器回应股价触及跌停 格力电器历年股价
- (2023-05-04)现实版“黑客帝国”离我们有多近 在世界各地秘密实施“颜色革命”
- (2023-05-04)球童_关于球童介绍-快看点
- (2023-05-04)开发商五一猛降1012万抢客 但去化效果并不乐观
- (2023-05-04)盐津铺子:目前公司蒟蒻果冻的自产产线已经正式投产 全球消息
- (2023-05-04)要闻:国泰君安:上调中手游目标价为3.75港元
- (2023-05-04)【快播报】慧智微:自主创新可重构射频前端技术架构 赋能国产5G产业发展
- (2023-05-04)芯片半导体大跌3%!回调加仓机会?|天天观点
- (2023-05-04)康希诺:公司关于克威莎雾优的专利已在海外相关国家进行了布局并递交了申请|全球播报
- (2023-05-04)5月4日国内钆铕钇稀土价格走势暂稳|全球观点
- (2023-05-04)9月1日起深圳不再全面禁止路边摊 户外广告扰民千元起罚
- (2023-05-04)全球今亮点!上海“进口嗨购节”启动 放大进博会溢出效应
- (2023-05-04)随身常备《旅游法》等 00后特种兵整顿旅游宰客
- (2023-05-04)【天天热闻】《大侠立志传》打更人出现时间一览[多图]
- (2023-05-04)江苏如皋客运站“五一”假期发出班次314趟
- (2023-05-04)环球动态:20多万人纷至沓来 剑阁旅游热度飙升
- (2023-05-04)孔子故里的200名社区“红帆驿站”志愿者
- (2023-05-04)共富工坊“浔”龙虾看花海|实时焦点
- (2023-05-04)当前热门:增长178%!合肥蜀山区文旅市场一路“狂飙”
- (2023-05-04)迈瑞医疗发布年报:高端客户群持续突破 打造“中国智造”出海名片
- (2023-05-04)全球看点:宠物小精灵世界之旅最终整合版攻略超梦_宠物小精灵世界之旅最终整合版攻略
- (2023-05-04)世界观热点:【青春中国】习言道 | 中国青年是有远大理想抱负的青年
- (2023-05-04)人潮人海生金地 商圈持续火爆释发展后劲-当前讯息
- (2023-05-04)【环球快播报】出口量创新高!小小罐头 撬动海外大市场
- (2023-05-04)咸阳市多措并举持续激活“五一”假日文旅市场_速看
- (2023-05-04)奥瑞金:目前公司和中国红牛的合作完全正常
- (2023-05-04)当前讯息:三川智慧:公司目前暂无人工智能AI方面的应用
- (2023-05-04)世界今头条!证通电子:数字化转型赋能中心基础功能业务之一是AI工业视觉
- (2023-05-04)气派科技:公司目前生产正常 公司的5G产品仍在销售 全球最新
- (2023-05-04)万向德农:公司主营业务是玉米杂交种 不是商品玉米
- (2023-05-04)当前头条:2023年焦作春季房产展销会开幕
- (2023-05-04)超燃!青春向上!_全球热议
- (2023-05-04)巴厘岛警方回应两中国游客身亡 原因究竟是什么 世界播报
- (2023-05-04)麦广互娱2022年亏损697.21万 同比亏损增加 客户减少对互联网营销业务采购_今日快看
- (2023-05-04)每日热议!“城市更新 向数而行” 青岛市数字经济赋能实体产业主题活动圆满收官
- (2023-05-04)东方雨虹:凝心聚力促发展,五一期间齐奋战 每日消息
- (2023-05-04)每日短讯:金螳螂业绩稳步回升:开拓新兴领域锁定高成长客户 未来值得期待
- (2023-05-04)岳阳东方雨虹上榜“2022湖南制造业企业100强名单”
- (2023-05-04)每日快讯!药明康德Q1净利润同比增长32%“一体化”赋能全年业绩增长可期
- (2023-05-04)存款利率再降,哪里还有“高息”机会? 今日看点
- (2023-05-04)养老保险可以转移吗?两地社保重叠怎么处理?
- (2023-05-04)国债回购代码是多少?一万买国债一天收益是多少?一
- (2023-05-04)外汇市场交易时间分哪几个时间段?外汇交易一般在什么市场进行?
- (2023-05-04)联合国秘书长:局势恶化,尽快停火!|快讯
- (2023-05-04)【天天新视野】尤文下赛季客场球衣谍照:白色主色调,配粉色灰色蓝色条纹
- (2023-05-04)丁真诉网友侵权获赔6.1万
- (2023-05-04)股票交易佣金是多少?万分之3佣金算高吗?
- (2023-05-04)平安基本法主要内容有哪些?平安三率是指哪三率的内容?
- (2023-05-04)英国监管机构将审查人工智能市场,称不会针对“任何特定公司”
- (2023-05-04)环球热头条丨脚一直脱皮是什么原因应该怎么办_脚一直脱皮是什么原因
- (2023-05-04)世界今亮点!工业命脉柴油需求急跌,担忧衰退加剧美国能源股重挫
- (2023-05-04)每日视点!山东省成立聊城鲁西化工“5·1”爆炸着火事故调查组
- (2023-05-04)环球快消息!土耳其东部发现新油田 可日产10万桶
- (2023-05-04)世界热议:9472米!我国开钻亚洲最深油气井
- (2023-05-04)常青科技:2022年营收、净利润同比大增近三成 核心主业逆势高增 今日最新
- (2023-05-04)拉芳家化:2022年营收9.87亿元 今年一季度利润同比实现大增
- (2023-05-04)蓝帆医疗:公司产品Allegra已经能够很好地治疗反流合并狭窄适应症
- (2023-05-04)当前热门:凯旺科技:公司的精密线缆连接组件产品也通过下游客户得到广泛的应用
- (2023-05-04)全球百事通!尚太科技:公司的产品适用于储能电池 储能电池是公司2023年重点开拓的产品领域
- (2023-05-04)中小微企业贷占比让同业眼红,这家农商行也要冲刺A股了
- (2023-05-04)环球今日报丨英国监管机构再出手:对Adobe收购Figma交易展开调查
- (2023-05-04)宁波职高有哪些专业适合男生(宁波职高有哪些)