IDS NXT malibu - 机内AI + 压缩 + 视频流!

彩色背景前的 IDS NXT 摄像机

新增:直接从相机获得图像质量完美的4K视频流

在推出了配备onsemi AR0521感光元件的IDS NXT malibu系列后,IDS现在进一步扩充产品范围:这款相机现在还可选配索尼Starvis 2感光元件IMX678,实现4K视频流!这样就可以获得更多细节和更好的图像质量,而且扩展了应用范围,尤其适合微光应用。

消费者技术与行业专业知识相结合:我们带来更多!

IDS和Ambarella的专业知识相结合,创造了一种全新智能工业相机。IDS NXT malibu结合了出色图像质量 + 机内AI + 视频压缩 + 流传输。可以直接在相机中执行全部流程并从相机输出结果。

IDS是第一家为工业应用提供这种特殊芯片的公司,这种芯片以前因运动相机闻名。集成ISP的自动功能可以非常方便地完成亮度、噪声和颜色校正,则提供出色的图像质量。这不仅带来令人印象深刻的图像和视频,还实现了更多功能。要详细了解IDS NXT malibu的新软件详细信息,请阅读Release 4.1参数表。

带人工智能和 RTSP 流图标的 IDS NXT malibu 摄像机 - 分析和可视化情况

AI和ISP携手共创未来:

相机可以作为“边缘设备”运行,可实现高速(> 25 fps)的全感光元件分辨率压缩视频流(H264),并通过RTSP协议在终端设备上输出。

此外,相机实时图像可以通过MJPEG流直接在任何网络浏览器中显示(无AI覆盖),用于可视化 - 通过HTTP即可实现,无需任何其他软件!

“通过IDS NXT malibu,我们开发了一种实时分析图像并可以直接集成结果的相机系列。“如果您需要AI叠加实时图像等应用,这款相机就是理想选择”,IDS产品创新经理Kai Hartmann表示。此型号已经形成相机系列。

智能工业相机为您带来哪些拓展应用的机会?技术领先的图像处理:探索IDS NXT系统的可能性。

IDS NXT 4.1全面支持IDS NXT malibu!

MJPEG是RTSP流媒体传输的替代方案

新的MJPEG流为您带来简单易用的全高清malibu型号可视化选项(感光元件:onsemi AR0521和Sony IMX678)。视频流使用HTTP,无需额外插件就可以在任何浏览器中实时显示。如果您也希望在实时图像中实现AI覆盖可视化,请选择通过RTSP进行视频流传输。这利用了整个感光元件分辨率 - 对于IMX678来说,这意味着以30 fps的速度生成4K分辨率的视频流!

使用用户训练的细胞神经网络分类检测对象和识别异常

随着IDS NXT 4.1软件发布,现在可以使用针对IDS NXT malibu相机系列的Ambarella SoC优化的IDS lighthouse AI vision studio来训练神经网络。现在,您还可以根据自己的规格为相机平台创建和执行Vision app,用于分类、物体识别和异常检测。

IDS NXT 3.2 - 引入新的项目视图优化用户指南

此次免费更新为 IDS lighthouse 加入新项目指南,并重新设计菜单,还简化了在模块化编辑器(Block-based Editor)中访问结果的方式,使用户使用更加方便。

带有所有阶段图标的工作流程视图

项目视图

新的用户界面可以在一个项目中管理相关的神经网络、图像数据集和 Vision app。工作流视图能够按顺序引导用户完成应用开发的所有阶段。

图标和提示反应状态变化,提高了所有流程步骤的透明度。因此,无论有些位置仍然需要用户交互还是已经成功配置各种组件,它始终可以让状态一目了然。

因此,IDS lighthouse 现在可以更好地支持用户创建自己的基于 AI 的应用。

您可以直接在IDS lighthouse中找到版本说明

IDS NXT 3.1 - 通过模块化编辑器(Block-based Editor)实现OCR和查找对象

此次更新进一步扩展了系统功能,引入了基于规则的图像处理,包括OCR功能和不训练CNN即可查找对象的功能。此外,OPC UA改进了工作流程,简化集成,大大方便了客户。

识别文本

此次更新在模块化编辑器(Block-based Editor)中加入了图像处理功能OCR(光学字符识别)。此功能可以在标签、名片和其他文件上找到并读取德语和英语字符、单词或整行文本。随后,可以检索某些具体值或属性。

不借助AI寻找对象

IDS NXT很早就加入了AI对象检测功能。但是,如果没有提前训练神经网络,该如何找到对象呢?这已经在模块化编辑器(Block-based Editor)中解决。现在可以通过亮度值来识别对象。然后,可以对它们进行过滤或分类。

通过注意力图实现更好的可视化

现在,您可以根据AI Vision Studio IDS lighthouse中的注意力图实现每个测试数据集的可视化。这使用户能够用自己的图像检查推理情况,直观重现人工智能决策,从而评估经过训练的神经网络的质量。

简化OPC-UA访问

除了标准化的机器视觉系统配套规范外,我们还提供了自己的信息模型,它更易于理解,可以通过OPC-UA访问IDS NXT。我们在IDS NXT 3.1中增加了这个功能,可以简化通过OPC-UA为工厂自动化等应用进行集成的流程。

IDS NXT 3.0 - 全新人工智能异常处理方法

在IDS NXT 3.0软件发布后,我们正在扩大一体式人工智能系统的应用范围,其中包括推出了一种深度学习方法,并提高了神经网络训练中的可追溯性。

异常检测

除了对象检测和分类外,您现在还可以使用IDS NXT相机进行异常检测。只需要少量的训练数据就可以可靠地识别已知和未知的过程偏差。这节省了创建和注释训练数据所需的时间和精力。

代码读取器

使用模块化编辑器中的新代码读取器功能,您可以快速轻松地启用IDS NXT相机来定位、识别和读取不同类型的代码和所需参数。

训练过程透明

早在IDS lighthouse的训练和测试过程中,注意力图就可以显示哪些图像区域对分类结果有影响。这意味着,在人工智能用于相机之前,可以在早期阶段检测并消除训练错误或偏差。这减少了开发过程中的审查和维护循环,加快了调试速度。

IDS NXT 2.6 - 轻松为相机创造应用!

这一软件版本的重点是简化应用创建。启动开发项目通常是实现项目的最大挑战之一。在IDS lighthouse中全新Use Case Assistant的帮助下,您只需按照指南操作,通过几步即可配置一个完整的Vision App,然后可以直接在IDS NXT相机上运行。另一项新功能是基于块的编辑器,它可以帮助您在没有任何编程知识的情况下,使用AI图像处理功能(如对象识别或分类)开发自己的程序序列。

Use Case Assistant

在Use Case Assistant中,选择适合项目的用例。借助查询和提示功能,向导可以指导您完成创建Vision App项目的过程,并创建程序代码,这就和当面进行指导一样。在这个过程中,它将现有的培训项目与Vision App项目联系起来,或者根据需要在IDS lighthouse中创建新的培训项目和数据集。

模块化编辑器(Block-based Editor)

有了模块化块和直观的用户界面,任何人不必了解具体编程语言的语法,就可以使用基于AI的图像处理(如目标检测或分类)以独立视觉应用的形式实现自己的项目。在这种情况下,您可以自己创建Vision App项目,并使用代码编辑器的预定义块以图形方式自己构建Vision App,包括循环和条件语句等过程。

混淆矩阵

在IDS lighthouse“Training”(培训)选项卡的“Training Sessions”(培训课程)区域中,可以显示从2.6版开始培训的分类网络的混淆矩阵。混淆矩阵适用于评估分类网络的性能,并显示测试或验证数据与指定标签相比的分类方式。

IDS NXT cockpit可以支持多台相机

现在,您可以在一个屏幕上监控多个相机的相机状态、图像和结果,并随时更新应用。此外,还可以保存登录信息等配置,方便快速访问。

IDS NXT 2.0 - 用于工厂自动化的人工智能

这一更新扩展了IDS NXT的人工智能功能和对象识别,引入了OPC UA接口,并引入了新的开发环境,确保可以为自定义图像处理任务生成Vision应用并在相机上执行。

专业人士的新开发环境

开发人员和人工智能专家可以通过“IDS NXT Vision App Creator”使用系统的更深层功能,创建独有Vision应用,从而使IDS NXT相机更好地适应自己的需求。这样就可以在一个设备中将分类或对象识别与经典图像处理(如测量)相结合。

通过OPC UA实现自动化

IDS NXT rio和rome相机现在可以用相同的语言与机器和控制器通信,并直接交换任务或结果。OPC UA的使用使这些智能相机能够直接集成到工厂自动化中,而无需额外的硬件或编程工作。标准化的通信也为新设备的“即插即用”奠定了基础。这尽可能缩短了机器视觉系统的调试时间。