头图

光神经网络ONN:直接对光信号进行神经网络处理

出品人:Towhee 技术团队 张晨、顾梦佳

光学成像通常用于工业界和学术界的科学和技术应用。光学神经网络 (Optical neural networks,ONN) 提供了一个在模拟、光学领域处理数据的平台。 然而,基于 ONN 的传感器仅限于线性处理,但非线性是深度的先决条件,多层神经网络在许多任务上明显优于浅层神经网络。 目前的技术已经成功实现了用于图像传感的多层 ONN 预处理器,使用商业图像增强器作为并行光电、光到光非线性激活函数。 非线性 ONN 预处理器可以实现高达 800:1 的压缩比,同时仍然可以在多个具有代表性的计算机视觉任务中实现高精度,包括机器视觉基准测试、流式细胞术图像分类和真实物体识别场景。实验发现,ONN 的非线性和深度使其优于纯线性 ONN 编码器。 这些 ONN 传感器可以通过在空间、时间和/或光谱维度上预处理光学信息来超越传统传感器,可能具有相干和量子质量,所有这些都在光学域中进行。

图片

A multilayer optical-neural-network encoder as a frontend for image sensing

ONN 通过直接成像与光学编码进行图像传感。 在传统的图像传感中,图像由相机收集,并通常使用神经网络 (NN) 进行处理,以提取一小段相关信息,例如限速或标志文本。 光神经网络 (ONN) 编码器不是将场景的完整图像直接地再现到传感器阵列上,而是对图像进行预处理,仅压缩和提取其最终使用所需的图像信息,从而允许更小的(更少的像素)传感器阵列。

相关资料:


Milvus
我们的愿景是 reinvent data science ,重新定义数据科学。 成立于 2016 年,ZILLIZ 致力于将数据科学与...

Vector database for production ready AI

96 声望
803 粉丝
0 条评论
推荐阅读
视觉模型 ConvNeXt V2,结合纯卷积与MAE
近年来以 ConvNeXt 为代表的现代 ConvNets 在各种视觉场景中都表现出了强大的性能。虽然这些模型最初是为使用 ImageNet 标签进行监督学习而设计的,但它们也可能受益于自监督学习技术,例如掩码自动编码器 (MAE) ...

Zilliz阅读 859

封面图
视觉模型 ConvNeXt V2,结合纯卷积与MAE
近年来以 ConvNeXt 为代表的现代 ConvNets 在各种视觉场景中都表现出了强大的性能。虽然这些模型最初是为使用 ImageNet 标签进行监督学习而设计的,但它们也可能受益于自监督学习技术,例如掩码自动编码器 (MAE) ...

Zilliz阅读 859

封面图
世界杯来了,让 Towhee 带你多语言「以文搜球」!
四年一度的世界杯已正式拉开战幕,各小组比赛正如火如荼地进行中。在这样一场球迷的盛宴中,不如让 Towhee 带你「以文搜球」,一览绿茵场上足球战将们的风采吧~

Zilliz阅读 851

封面图
热加载技术:修改Python代码并实时查看结果 ⛵
本文讲解Python热加载技术,以及Reloading工具库的使用。暂停运行的代码,修改补充后重新运行,意味着训练了数个小时的模型参数被舍弃。热加载技术可以解决这个问题。

ShowMeAI阅读 519

ACM MM & ECCV 2022 | 美团视觉8篇论文揭秘内容领域的智能科技
人工智能技术正在成为内容领域的中台力量,其中视觉AI已经渗透到内容生产、内容审核、内容分发、用户互动、商业化变现等各个环节。美团视觉智能部以场景化的内容产品、智能化的内容工具助力产业,在内容的创作、...

美团技术团队阅读 402

封面图
程序员的未来职场选择;点击按钮发送验证码怎么显得水平高;自学 VUE ,可以直接做项目吗|极客观点
#极客观点 聚焦于技术方向、程序员职业发展、个人成长等主题,致力于发起有价值的讨论,输出有价值的观点。在本栏目中,我们将为大家推荐在 #极客观点 版块被热烈讨论的话题,甄选出有趣的观点为你呈现。期待我们...

Yan阅读 383

封面图
Hugging Face发布diffuser模型AI绘画库初尝鲜!
工具库 transformers 的开源方 Hugging Face 刚刚发布了一个用于构建 diffuser 模型的全新库。如果您不知道diffuser模型是什么,你可以查看 ShowMeAI 的另外一篇文章介绍 📘 你给文字描述, AI 艺术作画,精美无比...

ShowMeAI阅读 356

Vector database for production ready AI

96 声望
803 粉丝
宣传栏