36氪 - 科技频道 14小时前
苹果自研图像传感器? 一项专利惊艳亮相
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

苹果公司一项新专利预示着图像传感器领域的重大突破,可能重塑移动和专业成像。该专利描述了一种堆叠式传感器架构,其动态范围高达20档,有望超越现有技术。这项技术的核心在于创新的像素级架构,包括LOFIC机制、内置噪声感应电路和3T像素设计,旨在实现电影级的HDR、实时无噪音视频捕捉和超薄外形。若技术得以应用,苹果可能摆脱对索尼传感器的依赖,并在计算摄影领域实现新的突破。

💡 苹果公司的新专利重点在于一种创新的堆叠式图像传感器,其动态范围可达20档,远超ARRI ALEXA 35等行业标杆。

✨ 核心技术之一是LOFIC(横向溢流积分电容器)机制,它能够处理三个电荷存储层级的光溢出,从而实现宽动态范围。

🔇 传感器内置噪声感应电路,可以实时检测并消除热噪声,即使在低光照条件下也能提供更清晰的图像。

📐 苹果采用3T像素设计,结合上述创新,在更少的组件下提供更佳的性能,而非传统的4T像素。

苹果公司可能正在悄悄筹备图像传感器设计领域最重大的进步之一——它可能会改变从iPhone到专业影院设备的一切。

最近,苹果公司新发布了一项名为“具有高动态范围和低噪点的堆叠像素图像传感器”的专利。这项发现可能预示着一项可能重塑移动和专业成像领域的突破。苹果公司声称其堆叠式传感器架构拥有高达20档的动态范围,或许正蓄势待发,准备与电影摄影机技术领域的巨头们竞争,甚至超越他们。

性能超越最佳的传感器

苹果新发布的一项名为“高动态范围低噪点堆叠像素图像传感器”的专利,揭示了成像技术的重大进步。虽然苹果以其定制芯片和相机软件而闻名,但这项专利暗示着一项更具雄心的目标:一种完全自主设计的图像传感器,其动态范围有望与领先的电影摄影机相媲美,甚至超越它们。而且,这并非仅仅是理论上的——该传感器架构声称其动态范围高达 120 dB,相当于近 20 档的动态范围。这比目前业界的巨头,例如ARRI ALEXA 35,都要高得多。

按照苹果在专利描述文件中所说:

“本文描述的本发明实施例提供了一种包含新颖设计的3T像素的图像传感器,该传感器可实现高动态范围、低噪声,并且不会出现传统4T像素阵列中可能出现的伪影。该图像传感器包含一个堆叠在逻辑芯片上的传感器芯片。每个3T像素在传感器芯片上包含一个传感电路,该电路包括一个光电二极管和一个横向溢流积分电容 (LOFIC: lateral overflow integration capacitor ) 电路,以便在从室内到明亮阳光的各种光照条件下进行传感,而无需自动曝光控制。此外,每个像素在逻辑芯片上包含一个像素电路,该电路包含一个电流存储电路。该电流存储电路用于感测探测器元件中的噪声水平。电流存储电路输出的信号能够利用CDS抑制热噪声 (kTC)。

苹果的专利内容是什么?

该专利概述了一种由两层组成的堆叠传感器:传感器芯片(带有光电二极管和模拟电路)

和逻辑芯片(处理读出、噪声消除和控制)

这种堆叠式方法与索尼的做法类似,使苹果能够将先进的电路封装到更薄的传感器模块中,非常适合智能手机和Vision Pro等 AR/VR 设备。但真正的创新在于像素级架构,其特点如下:

一、LOFIC(横向溢流积分电容器)

这种机制使传感器能够处理三个电荷存储层级的光溢出,自动适应极端亮度或黑暗环境——一次性完成。这便是 20 档动态范围得以实现的原因。

二、内置噪声感应电路

每个像素内的电流存储电路可实时检测并消除热噪声,这意味着即使在低光照条件下,最终图像也更加清晰 - 无需后期处理或 AI 技巧。

三、3T 像素设计(非 4T)

令人惊讶的是,苹果采用了 3 晶体管设计,这种设计通常被认为更简单,但噪音也更大。然而,得益于上述创新,该设计比标准的 4T 传感器噪音更低,从而以更少的组件和更高的效率提供更佳的性能。

按照苹果所说:

“本例中的 LOFIC 电路 44 包括两个电荷存储电容器 50 和 52 以及两个串联连接到浮动扩散节点 42 的 LOFIC 晶体管(LOFIC1 和 LOFIC2)54 和 56。第一个 LOFIC 晶体管(LOFIC1)54 将浮动扩散节点连接到第一个电荷存储电容器 50 的电荷输入端,该电容器的电容较小,例如约为 20 fF。第二个 LOFIC 晶体管 56 将第一个电荷存储电容器 50 的电荷输入端连接到第二个电荷存储电容器 52 的电荷输入端,该电容器的电容较大,例如约为 500 fF。在此配置中,浮动扩散节点 42 本身将用于在弱光条件下存储和读出光电荷;电荷存储电容器 50 将用于在中等光照条件下存储和读出光电荷;电荷存储电容器 52 将用于在强光条件下存储和读出光电荷。这种LOFIC结构使探测器元件26能够感测约120 dB动态范围内的光。或者,也可以使用其他LOFIC结构,并采用更少或更多数量的电容器和晶体管。”

这个产品意味着什么?

如果这项技术得以实施(或许在未来的 iPhone 17 Pro 或 Apple Vision Pro 2 中),它可能会导致:

苹果可能正准备摆脱对索尼高端相机传感器的依赖,以竞争对手而非客户的身份进入图像传感器市场。这也表明,苹果在计算摄影领域的下一次飞跃可能植根于以图像传感器为先的创新,而非软件或人工智能。

动态范围和噪点是数字成像的两个主要制约因素。一款能够提供 20 档动态范围和先进片上噪点抑制功能的移动式或紧凑型传感器,不仅是一种改进,更是颠覆性的。

这可能会影响:

由于这是苹果公司的产品,因此不难想象该公司会将该传感器与神经引擎处理深度集成,使其在极端条件下更加强大。

在我们看来,这项专利目前可能不太引人注目,但其影响深远。苹果不仅仅是在改进相机软件,而是从芯片层面重新定义图像传感器。如果这项技术投入生产,我们可能会看到数字成像领域的全新黄金标准——不仅在智能手机领域,也在电影领域。

具有高动态范围和低噪声的堆叠像素图像传感器

目前使用的绝大多数图像传感器都是CMOS(互补金属氧化物半导体)有源像素传感器(APS)单片阵列,具有4T像素。在这些器件中,每个探测器元件(称为“像素”)包含一个光电二极管、一个浮动扩散区和四个CMOS晶体管,其中包括一个传输门、一个复位门、一个选择门和一个源极跟随器读出晶体管。传输门控制从光电二极管到浮动扩散区的电荷转移,并通过相关双采样(CDS)实现降噪。使用3T像素(没有传输门)的图像传感器更容易制造,也更不容易出现伪影,但通常噪声较高。

概括

下文描述的本发明实施例提供了改进的图像传感器以及用于生产和控制此类图像传感器的方法。

因此,根据本发明的一个实施例,提供了一种图像传感器,该图像传感器包括一个逻辑芯片,该逻辑芯片包含列读出电路和连接到列读出电路的位线,以及一个覆盖在逻辑芯片上的传感器芯片。该图像传感器包括一个探测器元件阵列,每个探测器元件包括一个设置在传感器芯片上的传感电路和一个设置在逻辑芯片上的像素电路。该传感电路包括一个具有阴极和阳极端子的光电二极管、一个连接到光电二极管其中一个端子的浮动扩散节点、一个耦合在浮动扩散节点和复位电压之间的复位晶体管,以及一个具有连接到浮动扩散节点的输入和输出的源极跟随器晶体管。像素电路包括一个选择晶体管,该选择晶体管具有耦合到源极跟随器的输出的输入和耦合到其中一条位线的输出,以及一个电流存储器电路,该电流存储器电路耦合到选择晶体管的输入,并配置为感测和输出指示检测器元件中的噪声水平的信号。

在一些实施例中,每个感测电路包括一个横向溢流积分电容 (LOFIC) 电路,该电路包括一个或多个电荷存储电容以及耦合在浮动扩散节点和电荷存储电容之间的一个或多个 LOFIC 晶体管,其中,复位晶体管耦合在 LOFIC 电路和复位电压之间。在一个公开的实施例中,该 LOFIC 电路包括:具有第一电容的第一电荷存储电容;具有大于第一电容的第二电容的第二电荷存储电容;连接在浮动扩散节点和第一电荷存储电容的第一电荷输入端之间的第一 LOFIC 晶体管;以及连接在第一电荷存储电容的第一电荷输入端和第二电荷存储电容的第二电荷输入端之间的第二 LOFIC 晶体管。在一个实施例中,复位晶体管连接在第二电荷存储电容的第二电荷输入端和复位电压之间。此外或可选地,在将检测器元件读出到位线期间,第一和第二 LOFIC 晶体管依次导通,同时选择晶体管导通。

在一些实施例中,在每个图像帧期间,复位晶体管在第一复位周期内导通,以在帧的曝光周期之前复位浮动扩散节点;选择晶体管在曝光周期之后的第一读出周期内导通,以从浮动扩散节点读出光电荷。然后,复位晶体管在第一选择周期之后的第二复位周期内导通,以复位浮动扩散节点;选择晶体管在第二复位周期之后的第二读出周期内导通,以读出探测器元件累积的噪声。

在一些实施例中,电流存储电路包括至少一个采样电容器和至少一个采样晶体管,它们耦合在选择晶体管的输入端和至少一个采样电容器之间,其中,至少一个采样晶体管在第一和第二复位周期内跟随复位晶体管导通,使得至少一个采样电容器对探测器元件中的kTC噪声进行采样。在公开的实施例中,电流存储电路包括:连接在选择晶体管的输入端和至少一个采样晶体管之间的读取晶体管;以及与读取晶体管并联的、极性与读取晶体管相反的偏置晶体管。其中,读取晶体管和偏置晶体管在第一和第二读出周期导通,在曝光周期截止。在一个实施例中,偏置晶体管在第一和第二复位周期导通。

另外或可替代地,至少一个采样电容器包括第一和第二采样电容器,并且至少一个采样晶体管包括第一和第二采样晶体管,它们串联耦合在第一和第二采样电容器与选择晶体管的输入端之间。

根据本发明的一个实施例,还提供了一种图像感测方法,该方法包括:提供一个逻辑芯片,该逻辑芯片包括列读出电路和连接到列读出电路的位线;以及在逻辑芯片上覆盖一个传感器芯片。在传感器芯片和逻辑芯片上形成一个探测器元件阵列,每个探测器元件包括一个形成在传感器芯片上的感测电路和一个形成在逻辑芯片上的像素电路。每个感测电路包括一个具有阴极和阳极端子的光电二极管、一个连接到光电二极管其中一个端子的浮动扩散节点、一个耦合在浮动扩散节点和复位电压之间的复位晶体管,以及一个具有连接到浮动扩散节点的输入和输出的源极跟随器晶体管。每个像素电路包括一个选择晶体管,该选择晶体管具有耦合到源极跟随器的输出的输入和耦合到其中一条位线的输出,以及一个电流存储器电路,该电流存储器电路耦合到选择晶体管的输入并配置为感测和输出指示检测器元件中的噪声水平的信号。

通过以下结合附图对本发明实施例的详细描述,将更全面地理解本发明:

实施例详细说明

本文描述的本发明实施例提供了一种包含新颖设计的3T像素的图像传感器,该传感器可实现高动态范围、低噪声,并且不会出现传统4T像素阵列中可能出现的伪影。该图像传感器包含一个堆叠在逻辑芯片上的传感器芯片。每个3T像素在传感器芯片上包含一个传感电路,该电路包括一个光电二极管和一个横向溢流积分电容 (LOFIC) 电路,以便在从室内到明亮阳光的各种光照条件下进行传感,而无需自动曝光控制。此外,每个像素在逻辑芯片上包含一个像素电路,该像素电路包含一个电流存储电路。该电流存储电路用于感测探测器元件中的噪声水平。电流存储电路输出的信号能够利用CDS抑制热噪声 (kTC)。

虽然逻辑芯片上的电流存储电路与LOFIC电路配合使用特别有用,但在其他实施例中,即使没有LOFIC电路,逻辑芯片上的组件也可用于降低其他图像传感器像素中的噪声。

图1是根据本发明实施例的图像传感器的示意侧视图;

图 1 是根据本发明实施例的图像传感器 20 的示意侧视图。图像传感器 20 包括由一个硅晶片制成的逻辑芯片 24,以及由另一个硅片制成的传感器芯片 22,该芯片覆盖在逻辑芯片 24 上。图像传感器 20 包含一个探测器元件阵列 26(也称为像素),每个探测器元件包括位于传感器芯片 22 上的传感电路 28 和位于逻辑芯片 24 上的像素电路 30。像素电路 30 通过位线连接到列读出电路(如图 2 所示)。图像传感器 20 的堆叠硅片配置使得在逻辑芯片 24 中使用标准 CMOS 控制和读出电路成为可能,而传感电路 28 可以通过不同的工艺制造。或者,传感器芯片 22 可以包含除硅之外的其他半导体材料。

图2是根据本发明实施例的图像传感器中探测器元件细节的示意电路图;

图 2 是根据本发明实施例的探测器元件 26 之一的示意电路图。图 2 中所示的传感电路 28 包含 N 沟道 MOSFET 晶体管和 N-on-P 光电二极管 38。或者,传感电路 28 也可以包含 P 沟道晶体管和 P-on-N 光电二极管。传感电路 28 的组件连接到电源电压 48,例如 1.5 V、1.2 V 或 1.0 V。在本设计中,无需将电压升压至高于电源电压或低于地电位。

传感电路 28 包含一个浮动扩散节点 (FD:floating diffusion) 42,该节点连接到光电二极管 38 的一个端子(在本例中连接到阴极,阳极连接到地 40)。横向溢流积分电容 (LO-FIC) 电路 44 耦合至浮动扩散节点 42,复位晶体管 (RST1) 46 耦合于 LOFIC 电路和复位电压(在图示示例中,该复位电压为电源电压 48)之间。

本示例中的 LOFIC 电路 44 包括两个电荷存储电容器 50 和 52,以及两个串联耦合至浮动扩散节点 42 的 LOFIC 晶体管 (LOFIC1 和 LOFIC2) 54 和 56。第一个 LOFIC 晶体管 (LOFIC1) 54 将浮动扩散节点连接到第一个电荷存储电容器 50 的电荷输入端,该电容器具有较小的电容,例如约为 20 fF。第二个 LOFIC 晶体管 56 将第一个电荷存储电容器 50 的电荷输入端连接到第二个电荷存储电容器 52 的电荷输入端,该电容器具有较大的电容,例如约为 500 fF。在该配置中,浮动扩散节点 42 本身将用于在弱光条件下存储和读出光电荷;电荷存储电容器 50 将用于在中等光照条件下存储和读出光电荷;电荷存储电容器 52 将用于在强光条件下存储和读出光电荷。该 LOFIC 配置使探测器元件 26 能够感测约 120 dB 动态范围内的光。或者,也可以使用其他 LOFIC 配置,其中电容器和晶体管的数量可以更少或更多。

源极跟随器晶体管 (SF:source follower transistor) 58 的栅极连接用于接收来自浮动扩散节点 42 的电荷输入,其漏极连接到输出端子 32,该输出端子与像素电路 30 的输入端子 34 连接。输入端子 34 连接到选择晶体管 (SEL) 60。当选择晶体管导通时,它会将来自探测器元件 26 的信号输出到位线 62,该位线为探测器元件阵列的列提供服务。如上所述,该位线将传感器芯片 22 中的探测器元件连接到逻辑芯片 24 中的列读出电路 64。在从探测器元件 26 读出数据期间,连接到输入端子 34 的偏置晶体管 (V3 Bias) 66 处于关闭状态,通常消耗约 1 uA 的电流。

为了实现噪声感测和消除,像素电路 30 包含一个电流存储电路 68,该电路包含一个 N 沟道读取晶体管 (RD:read transistor ) 70 和一个 P 沟道偏置晶体管 (V1 Bias) 72 并联。本例中的读取晶体管和偏置晶体管极性相反。因此,在图示的示例中,读取晶体管 70(以及像素电路 30 的其他组件)是 N 沟道器件,而 V1 Bias 晶体管 72 是 P 沟道器件。第二个偏置晶体管 (V2 Bias) 74 与 P 沟道偏置晶体管串联,当两个偏置晶体管导通时,会吸收偏置电流,例如约 100 nA。

采样线 36 连接到读取晶体管 70 和 V1 偏置晶体管 72 的漏极以及 V2 偏置晶体管 74 的源极。从检测器元件 26 流出的电流由一对采样电容器 76、78 采样,这对采样电容器连接在采样线 36 和地 40 之间。这些采样电容器 76、78 可以具有低电容,例如每个约为 4 fF,并且两个采样电容器之间存在大约 0.1 fF 的附加寄生耦合 80。

为了在感测电路复位期间对流经感测电路 28 的电流进行采样,一对采样晶体管(SMP1 和 SMP2)82、84 会短暂地同时导通。然后,晶体管 82(SMP1)关闭,接着晶体管 84(SMP2)也关闭。晶体管 82 对探测器元件 26 的 kTC 噪声进行采样,而晶体管 84 对晶体管 82 关闭后的残余误差进行采样。因此,kTC 噪声被采样,并通过流入和流出采样电容器 78 的电流进行补偿。

在从探测器元件 26 读出期间,采样的电流信号由选择晶体管 60 读出到位线 62。或者,电流存储电路 68 可以仅包含一个采样电容器,也可以包含更多数量的采样电容器,并相应地布置一个或多个采样晶体管。

图3是根据本发明实施例的时序图,示意性地示出了施加到图2中探测器元件晶体管的信号

图 3 为时序图,示意性地示出了根据本发明实施例的在单个图像帧 88 过程中施加到探测器元件 26 的晶体管 46、54、56、66、70、72、74、82 和 84 的信号。为了简化说明,施加到晶体管 72 的 V1 偏置信号显示为与其他信号具有相同的极性;但实际上,由于 V1 偏置晶体管 72 是 P 沟道器件,因此 V1 偏置信号的极性将与其他信号的极性相反。施加到晶体管 66 的 V3 偏置信号与 V2 偏置信号相同,因此为了简单起见,此处省略。

每个图像帧 88 包括曝光期 90,例如在 1-10 毫秒的范围内,在此期间,来自光电二极管的光电荷在浮动扩散节点 42 处收集,并且可能在 LOFIC 电荷存储电容器 50、52 中的一个或两个上收集,具体取决于入射光的强度。在曝光期 90 之前的预曝光复位期 92 中,复位晶体管 (RST1) 46 导通,以复位浮动扩散节点 42。LOFIC 晶体管 54、56 也与 RST1 一起导通,以复位 LOFIC 电荷存储电容器 50、52。此外,在曝光期之前的复位期内,像素电路 30 中的偏置晶体管 72、74、66(V1 Bias、V2 Bias 和 V3 Bias)均导通,采样晶体管 82、84(SMP1 和 SMP2)在 RST1 复位脉冲之后导通,然后依次关闭。

在曝光周期 90 之后,选择晶体管 60 和读取晶体管 70(SEL 和 RD)在读出周期 94 期间导通,同时三个偏置晶体管 72、74 和 66(V1 Bias、V2 Bias 和 V3 Bias)也导通,以将光电荷从浮动扩散节点 42 读出到位线 62。读出周期 94 包括高增益间隔 96、中增益间隔 98 和低增益间隔 100。当选择晶体管 60 导通时,浮动扩散节点 42 上的电荷首先在高增益间隔 96 期间被读出。然后,LOFIC 晶体管 54 和 56 依次在中增益间隔 98 和低增益间隔 100 期间导通,以将存储在 LOFIC 电荷存储电容器 50 和 52 中的光电荷读出到位线 62。

所有光电荷读出后,复位晶体管在曝光后复位周期 102 中,(RST1) 46 与两个 LOFIC 晶体管 54、56 再次导通,以复位浮动扩散节点 42 和 LOFIC 电荷存储电容器 54、56。像素电路 30 中的偏置晶体管 72、74、66(V1 Bias、V2 Bias 和 V3 Bias)再次全部导通,采样晶体管 82、84(SMP1 和 SMP2)在 RST1 复位脉冲后导通,然后依次关断,就像在复位周期 92 期间一样。

在这些复位之后,选择晶体管 60 和读取晶体管 70 在噪声读出周期 104 期间再次导通,以读出探测器元件 26 积累的噪声。噪声读出周期 104 包括高增益间隔 106、随后的中增益间隔 108 和低增益间隔 110。当选择晶体管 60 和读取晶体管 70 导通时,浮动扩散节点 42 上的电荷首先在高增益间隔 106 期间被读出。然后,LOFIC 晶体管 54 和 56 依次在中增益间隔 108 和低增益间隔 110 期间导通,以将 LOFIC 电荷存储电容器 52 和 54 中剩余的电荷读出到位线 62。

在噪声读出周期 104 期间,偏置晶体管 72、74 和 66 保持导通。电流存储电路 68 感测并输出指示探测器元件 26 中噪声水平的信号。逻辑芯片 24 中的 CDS 电路(未示出)从曝光周期后读出的光信号中减去在此第二读出周期读出的噪声信号,从而降低图像传感器 20 输出信号中的噪声影响。

应当理解,上述实施例仅作为示例引用,本发明不限于上述具体显示和描述的内容。相反,本发明的范围包括上述各种特征的组合和子组合,以及本领域技术人员在阅读前述说明后能够想到的、且在现有技术中未公开的变体和修改。

附:专利详细说明

本文来自微信公众号“半导体行业观察”(ID:icbank),作者:编辑部,36氪经授权发布。

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

苹果 图像传感器 动态范围 专利
相关文章