解决方案

解决方案

您的位置: 首页 > 解决方案

手机多摄研报:三摄普及、四摄不远 算法成决胜关键

  摄影在过去几年中已经突飞猛进。比如近段时间,手机后置三摄热度开始直线上升,、LG、华为、小米、OPPO、vivo以及联想等不少主流安卓机大厂都已开始跟进三摄乃至多摄机型。同时,业内也将采用后置三摄这一方案。因此,后置三摄非常有可能成为2019年全球高阶高技术门槛,在新一轮的市场争霸战中脱颖而出,已成为当下各大手机及摄像头模组供应商们最为关切的

  据多方统计,截止目前全球已有八家主流手机品牌旗下多达16款新机都已搭载或确定搭载后置三摄。2019年,随着苹果和三星全新旗舰机的助攻,全球市场也将涌现出更多的三摄机型。市场占有率方面,IDC预测2019年华为三摄手机的出货量占比将达到25%、苹果是22%、三星是20%,此外OPPO、vivo及小米也都将有不错的表现,三摄手机有望占据手机市场总份额的15%。

  作为智能手机摄像头算法领域最主要的提供商, ArcSoft虹软也十分看好三摄在2019年的市场增长,认为三摄不仅将在高端旗舰机市场扎根,中低端机市场也将苗头初显。虹软全球副总裁徐坚表示:“近两年来,双摄所带来的多种拍摄功能,让用户对于三摄甚至多摄有了更多的期待。以当前消费市场来看,三摄将会成为2019年旗舰机型的主流配置,而且还会出现‘三摄+深度像头’的四摄手机。作为最主要的三摄算法提供商,目前虹软正在为多家手机品牌集成落地三摄方案,这也从市场角度说明了三摄主流化发展的趋势。

  站在应用的角度考虑,事实上三摄是在双摄方案的基础上,额外加入了一颗camera辅助成像,这样不仅带来了更多的双摄组合及更好的宽容度,并实现更强的变焦能力,除此,三摄像头还能在AR增强现实领域大显身手,比如日前OPPO发布的R17 Pro后置三摄顶部镜头就采用了TOF 3D立体视觉方案(市场传言苹果2019年新款机型也将采用该方案),可以探测更加精密的景深信息并快速生成3D模型,支持3D拍照等等应用,这些都非常大程度上拓展了三摄的应用场景。

  三摄的出现,实际上的意思就是为了增强手机在更多应用领域的场景化适应能力,从而提升用户的整体体验感。而谷歌在Pixel手机摄像头上却极力推崇单颗摄像头的方案,他们都以为通过软件算法端采取加载更多算法的方式,可以令手机在单摄相头条件下实现超过很多双摄的拍照水平,那三摄时代是否也能如此呢 ?徐坚认为:“作为算法公司,我们理解谷歌的说法,它其实是在强调单摄算法的能力。但单摄和多摄要实现的前提和目标不一样。的确,有些功能在不需要多个摄像头的硬件支持下,通过算法就能够实现,如超级夜景。但如遇到光学变焦的需求,在当前硬件水平下,双摄或者多摄才能是最好的选择。当然,谷歌在Pixel 3的前置摄像头上也选用了双摄方案,所以谷歌也是认可双摄方案的。”

  诚然,在这一波创新应用和市场增长环境下,各摄像头模组厂无疑还是最大受益者之一。编者获悉,目前一线模组厂的三摄模组造价基本在35到40美金左右,而在华为Mate20 Pro上采用的三摄模组,重要原材料由于都选用了客制化产品,价格可能超过了50美金。以欧菲科技在华为Mate20 Pro项目上高达20%的单个三摄模组利润来计算,供应商在三摄模组上的利润大多数都能达到7到8美金甚至更多。

  不过,如今手机摄像头的升级重点已经从像素提升开始转向高倍光学变焦能力上,加之过去多年在双摄市场红利的洗礼下,各大模组厂在量产工艺和制造能力上也都经过了充分的打磨,供应商之间的硬件制造实力虽仍存在差距但渐呈逐步缩小的态势。而今,各大手机品牌厂商的相机竞争态势已从单纯的硬件竞争转换为硬件+算法的组合竞争,尤其是针对当下势头正猛的三摄市场。对此,有业内资深人士就指出,算法是三摄和多摄时代的最大差异点,手机品牌厂商想要在三摄或多摄市场拉开差距,优质的算法技术是必不可少的。在双摄时代,我们见证过黑白camera +彩色camera、彩色camera +彩色camera、广角+长焦等种类的组合,而三摄时代则会有更多不同摄像头的组合变换和搭配,由此带来的算法技术门槛和难度也大幅提升。

  在三摄方案中,为了最大化发挥各摄像头的价值,软件算法端首先就需要最大限度地考虑和照顾到三个摄像头的“小情结”,即兼顾三镜头在各种不同应用场景和环境下的组合性能表现。这中间还包括提高算法运算性能,确保合理的算法运行时间、避免来自多个摄像头的多输入影像而导致的残影,并且要处理三摄像头在输入图像和视频数据的时间同步性,以及因为不同摄像头位置引起的视差问题等等,因此其复杂度远高于单摄像头和双摄像头。因此如何能够精确处理好三者之间纷繁复杂的“邻里关系”,以及利用好每个摄像头的优势是当下各算法技术提供商打造差异化市场之间的竞争优势的“杀手锏”。

  徐坚强调:“与双摄不同,要处理好三个摄像头之间的问题,对硬件和软件都会带来更大的挑战。硬件上,需要动态支持三个摄像头的加载,或者要三个ISP去支持三摄,这一些都会要求增加手机硬件资源,对于厂商会有硬件成本上的提升。而软件上,过去双摄只要考虑两个摄像头之间的切换、融合问题,但现在三摄就需要仔细考虑三个摄像头之间的切换、融合问题,软件的框架、算法本身都要做大幅度的提升才能满足规定的要求,比如一定要通过算法做好三摄的标定。其次,常规双摄一般实现1倍至2倍光学变焦,但三摄的发展将提供向下至0.5倍,向上至10倍的光学变焦,这使得手机拍摄近景和远景的能力极大的提升。这当中三个摄像头之间的光学变焦无感知的顺滑切换就需要算法去实现。此外,三摄中加入的超广角镜头,将为手机拍摄时带来更广的拍摄角度,但超广角镜头拍摄时产生的镜头畸变会很明显,这也需要用算法去进行矫正。目前,主流的三摄算法方案,不管是针对旗舰机还是中低端机,虹软都提供完善且可靠的解决方案。”

  而就典型的三摄标定问题为言,业内资深专家和记者说:“其实多摄像头的拍照,从照片中得到的一些空间信息,比如距离和物体的尺寸等,一般都还需要利用二维图像来得到三维信息。要将二维转三维就需要去找到一个摄像机数学模型,通过已经获得的二维信息加上模型逆推来获得图像的三维信息,标定实际上的意思就是在找这个模型。这样的一个过程通常要涉及到包括焦距和主点在内的固定物理参数,以及标定板到摄像机的坐标系变换矩阵等外部参数。由于三摄相比双摄更多了一个摄像头,摄像头数量提升的情况下这些参数相应都可能会发生不小的变化,这也相应提升了整体的算法复杂度,非常考验算法的设计能力。如果算法端能够将标定问题处理的比较好的话,也会对解决三摄镜头的畸变等问题有所助力。”

  当然,调和“邻里间的矛盾”只是方面,由于各摄像头单体在功能和性能上也存在一定的差异,不同场景下所扮演的角色也各不相同,针对三颗摄像头的不同特性做对应的调校也是算法技术的难点。

  诚如上述,三摄及多摄像头手机的出现,给算法技术提出了更多新的挑战。而在多摄这一优厚的硬件条件下,如今市场上也涌现出了慢慢的变多的AI拍照类应用。由此,业内也有观点认为,做多摄不仅是算法层面上做升级,一些算法计算量很大的部分还需要AI类硬件去跑,因此要做好三摄手机,硬件端配置高算力的AI芯片也十分重要,否则在拍照时很容易出现系统卡顿或者其他极大影响使用者真实的体验的问题。

  但在徐坚看来,做好三摄,其实跟Al芯片并没有本质联系,他表示:AI芯片的意义在于,它能够为深度学习算法提供更好的硬件支撑及更强的计算能力。但双摄、三摄算法本质上与深度学习算法关系不大,它们更多是通过计算机视觉的方法来实现。不过,部分原先通过计算机视觉实现的技术,在融合深度学习算法后,也迎来了创新改革的机会,如深度计算、HDR、暗光高清、防抖等。在这些技术上,使用AI芯片能发挥出更好的性能。但单就三摄算法而言,AI芯片是重要加分项,并非必选项。”

  那三摄和多摄时代,AI技术究竟该如何融入算法端,来满足日益涌现出的慢慢的变多手机端AI拍照和图像处理应用需求呢?徐坚和记者说:“目前,市场对深度学习的AI技术热度非常高。但事实上,从传统义上说计算机视觉也属于AI,不管是深度学习,还是传统计算机视觉,其实都只是一种手段,一种方法。我们大家可以运用它们,去达成一个同样的目的。举个简单的例子,比如大光圈景深虚化效果,传统方法是利用双摄像头的信息,运用计算机视觉方法来实现深度计算,而现在我们也融合深度学习的方法来提高深度计算的准确度。”

  但是,这两者是无法完全互相替代的,徐坚进一步补充到:“所以,虹软在看待AI深度学习方法时,会更加有选择有目的去使用深度学习。将它与计算机视觉深度、高效地融合在一起,以提供更高效的算法为最终目的。”因此,AI深度学习的出现并非是为了完全变革现有的手机摄像头算法技术,而是在现有CV算法技术已构筑的“城墙”上,更多的通过融合与协作的方式去改进和强化现有算法,推动算法技术向更高水平、更适应市场需求的方向去不断演进。

  总之,双摄时代之后,随着更多创新拍照场及应用的出现,三摄和多摄正快速起步,大有成为未来智能手机后置镜头的主流配置的趋势。正如徐坚所说:“手机的未来。终究是由客户的真实需求、市场导向所决定。单摄也好,多摄也罢,存在的背后就是用户的实际的需求。如同双摄刚刚起步时,很多人也在讨论它的意义在哪里,而随着双摄成为主流,人像模式,光学变焦成为标配,用户接受了双摄,而且逐步推动了双摄的发展。”如今,三摄也将接下双摄递予的“火矩”继续前行,而三摄时代将决胜“算法“高地,对于众多手机品牌厂商来说,如何能够拿到更多更优质的算法技术和资源,利用算法技术端的升级搭配硬件的升级,从而充足表现硬件的能力,将是未来在三摄和多摄时代决胜手机相机市场的关键一步。

  声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。举报投诉

  全新 1.5K 护眼直屏,更有全场景 AI 深度赋能,在质感、性能、续航、游戏和 AI 等维度全方位挑战中端

  ymodem_ota下载固件正常,qboot去更新app也没有报错。正常启动时,等待5s后,就

  bus fault。 定位到是qboot_stm32.c:106 的 void

  影响毋庸置疑。相对于接住 AVP 的“泼天热度”,ALVA Systems 作为深耕空间计算

  十余年的企业,看待这一事件显得更为客观和果断。立足整体空间计算产业高质量发展,硬件

  Error: Program \make\ is not found in PATH如何解决?

  Error: Program \make\ is not found in PATH。大家有遇到过吗?如果改呀,之前用的时候好好的,不会报这个错可以编译通过生成elf,不知道现在为什么编译老是

  Spring Boot和飞腾派融合构建的农业物联网系统-改进自适应加权融合

  用postman拉取融合结果如下: 改进前的融合结果 23.13,改进后的融合结果23.18,高精度传感器测量值23.25。

  高级汽车级桥式传感器信号调理芯片JHM150XJHM150X系列新产品是针对惠斯通电桥式传感器信号设计的具有数字补偿

  高精度信号调理电路,可对传感器信号的偏移、灵敏度、温漂和非线性同时进行补偿。补偿

  【飞腾派4G版免费试用】Spring Boot和飞腾派融合构建的农业物联网系统-数据融合

  本帖最后由 sda12138 于 2024-1-6 12:00 编辑 接上集: 上次实验我们已完成个人中心的设计,本次实验主要完成内容是完成

  ,加速了国产高安全芯片的加快速度进行发展,D9360是芯驰推出的一款六核CPU的高度集成、低功耗化、高安全性芯片

  杵气动升降陶瓷研磨机一、主要特征:1、研磨颗粒的力度可达微米级;2、对碾磨棒转速、碾磨时间精确控制;3、应用于超硬材料微粉、电子微粉、树脂微粉、食品微粉、医药微粉

  多传感器数据融合是一个综合处理多传感器数据的过程,以提高对环境或目标的感知和解释能力。在这样的一个过程中,各种数据融合

  控制器正在调试,急急急!!! 使用AD2S1205旋变芯片,控制器调试过程中电机正常运行中,突然

  DOS故障并且此故障锁存至低电平,经查看DATASHEET,为正余弦失配,但是电机还能正常运转

  F030。出问题电机全部是上海电机厂Z710-400,1250KW电机

  热像仪是一款专为户外运动打造的超便携热成像夜视仪,采用高性能12μm定制款热成像芯片,配备专业摄像高清镜头,专业夜视观察图像

  问题出现在解码后的位置波形,如下图所示。我用手转动旋变转子,发现在机械角360内出现了

  角波。由于是缓慢旋转的,转速很低,所以底下的速度波形是在0上下波动。求教有没有有经验

  等都有非常好的支持。 对于开发者而言,K230提供完备的AI工具,包括对多种类型算子的支持,数百种开源

  线制SPI通信,芯片手册中的时序不是标准的SPI时序,使用GPIO口可以模拟时序,但是若使用标准的

  DSP的设置值(特别是压缩曲线各个点的参数如何得来)?另外,ADAU1452与ADAU1442的compressor

  AD8609手册里的Voltage Noise Density数值是指一个运放还是

  运放,其手册里的Voltage Noise Density的数值是指一个运放还是

  卫星通信早已在传统卫星电话上应用,大多数都用在远洋渔业、野外科考等特殊领域。但卫星电话往往配有天线,外形笨重、通信费用昂贵,因此日常生活中并不

  应用提供充足的算力支持。 动态调频,更低功耗 功耗方面,JH7110被划分为8个可独立开关的电源域,CPU频率可通过软件调节,客户可依据不同应用场景动态调频,实现灵活的功耗控制。 双

  屏幕之间附着力的设备。该试验机使用先进的传感器和测量系统,能够准确地测量

  特性入手,通过一系列分析ZGC周期处理过程来理解这些特性,探索ZGC设计思想。

  同时显示需对源码做如下修改,修改文件 hardware/rockchip/camera/Camera3HALModule.cpp 注释掉下面函数中的部分代码即可。 测试 双

  打开 3588-android12/kernel-5.10/arch/arm64/boot/dts/rockchip/topeet_camera_config.dtsi 设备树,此设备树中对底板上的摄像头接口进行了配置,如下图所示: 如果想要使用 J1 接口打开摄像头 OV5695 或者 摄像头 OV13850,只需要在设备树中打开“#define CAMERA_J1”宏定义即可。 同理 J2 J3 J4 接口使用只需要打开对应的宏定义即可。修改完毕后,重新编译 Android 源码,然后烧写镜像。 烧写完镜像之后,在开发板底板插上摄像头,注意底板上所插接口要与源码中配置接口保持一致。 测试个人会使用 Android 源码自带的相机 APP。 更多文档能查看 B站搜索-北京迅为RK3588开发板, 公众Hao关注:北京迅为,

  优势体现在: 1)感知输出信息精准度更高; 2)鲁棒性高; 3)泛化能力强,有助于城市高阶智能驾驶落地。感知

  ,集成 1×A76@2.7GHz 大核 + 3×A76@2.3GHz 中核 + 4×A55@2.1GHz 小核以及 850MHz 的 Arm Mali-G57

  技术及应用进行研究。文章对其中的图像处理技术和定位与跟踪技术进行了详细研究 ,并与此相对应 ,介绍的相关的应用。

  拍照模式,拍摄1600*1200的照片,k210是否也能通过ov2640拍

  库 作为一种基础组件库,密码库十分重要,在各类场景中扮演着不可或缺的角色。主流密码

  层:第一层是支撑层,如ASN.1编码、PEM格式、X509证书、大数运算

  方库,开发的人能通过访问开源社区获取。接下来我们来了解crypto-js开源

  系统双频 RTK 定位模块,搭载了华大北斗的CYNOSURE III GNSS SoC 芯片。该模块支持新一代北斗

  华为mate60pro配置参数表,搭载麒麟9000S的华为Mate60 Pro值得买吗?

  华为Mate60 Pro是一款外观精美、性能强大、配置高端、价格相比来说较高的智能

  的详细介绍: 外观 华为Mate60Pro采用全新的“巴黎饰钉”设计,背面摄像头模组由华为

  址(TDMA),频分多址(FDMA)和码分多址(CDMA)提议采用的调制技术有高斯最小频移键控(GMSK)、

  的感知,在硬件被调用动态调整硬件效果。此外,还提供了自适应转换技术,通过增强

  ,分布式硬件平台还提供了硬件协同同步技术。能够在多路中提供毫秒级的时钟同步能力,确保

  上应用显得很重要。激光打标是一种高环保加工技能,它具有非触摸雕琢,工件不变

  特征,如眼睛、鼻子、嘴巴等部位的坐标、轮廓、颜色等信息,进行人脸识别。该

  主要包括几何结构的描述子、局部纹理模式和局部二值模式等。 2. 统计模型

  路径法(CriticalPath Method, CPM)是项目管理中最重要的概念之一,是一种基于数学计算的项目计划管理方法,是网络图计划方法的一种。

  中间变量”。这个变量是承上启下起决定性作用的,向上可以对接电机电磁 数学模型,这样就可被

  一样强大。在现代密码学中,我们拥有基本的XOR函数,以及当今许多应用程序中使用的更复杂的

  数据加密标准 (DES) 是由 IBM 开发并于 1977 年标准化的对称加密

  时代后,摄影方式也发生了巨大变化:用来拍照的不再只是镜头和传感器了,背后还加载着一系列的图像

  融入其中,人工智能(AI)、通信等,需要将芯片应用里庞大的数据库,以大量的计算任务模块用

  千里的重要时期,计熟事定,举必有功。然而,今年企业的招聘预算、需求都有所缩减,如何用有限的成本高效地找到符合的人才?如何减少和用人部门的沟通成本? 别急,我们来给你答案!作为同学和企业沟通

  ! 助力各位真正提升招聘效率! 本次大同学吧联合 上海思将企业管理咨询有限公司 (半导体HR公会) 上海肯耐珂萨人力资源科技股份有限公司 为大家带来 《2023集

  泰酷辣!基于全志R818的开源超迷你安卓手持终端CyberPad,芒果派惊喜之作

  的特性,做出了一些小小的改变。 芯片本体封装设计较小,核心板在3x3cm的大小下不仅预留了屏蔽罩安装接口,还集成起了R818+EMMC+LPDDR4+PMU

  ARM正酝酿对其IP授权模式进行大刀阔斧地改革。 对此,数码闲聊站分享称,ARM授权收紧,高通最快在SM8750也就是骁龙8 Gen4开始使用自

  天通卫星电话 指纹识别Model:X1D功能 IP68 MSM8909 2GB+16GB 13MPDualCanen 5000mAH可拆卸 Andold 8.1

  UWB北斗短报文Model:D2功能:IP68 美军标MIL-STD-810G MTK6762 4GB+64GB 13MPCameta 6000mAH Androld9.0

  DMR警用对讲POC公网对讲Model:D1IP68 美军标MIL-STD-810G MTK6739 1GH-8GB 5PCamera 5300mAH Androld9.0 NFC

  POC对讲Model:A6功能: IP68 Medlatck Hello G35 GGR+128GB 20MPnighndon Caman 4900mAH Androld12 NFC POC

  终端 700M网络Model:A5功能:IP68 MTK6761 4GB+32GB 13MPDunlCaner 5800mAH Androld12 NFC POC公网对讲系统

  用RT-Thread Studio,STM32L433CCT6移植功能都没问题了,就是有个问题一直解决不了。输入finish命令时,第

  IP68 Wi-fi6Model:S11功能:IP68 MTB87T(天玑900) 8GB+128GB43MPDualCamera 5300m4H可拆卸 Andrad11 NFC POC

  终端 5G POC公网对讲 Model:A8 5G(SOC)功能:1P68 MTK6833(天玑700) 3GB+128G8 4BMPTride Caman Andod11

  子短接J1,再插上USB上电:选择WCH-Link_APP_IAP_RV.bin然后点击下载就可以了。最后可以成功下载固件了,又看到了久违的wch-link:

消息提示

关闭