图像数据的传输处理方法、装置、介质以及电子设备与流程 专利技术说明

电子通信装置的制造及其应用技术1.本公开涉及数据处理技术，尤其是涉及一种图像数据的传输处理方法、装置、介质以及电子设备。背景技术：2.在自动驾驶领域中，作为识别周边环境的“感官”角色，视觉感知是整个自动驾驶系统中的重要环节。为了更全面地感知车辆的外部环境，需要多个相机对多个角度进行协调拍摄，然后将拍摄得到的图像传输至车辆的自动驾驶域控制器（automated-driving control unit，acu）。在这个过程中，多台相机协调拍摄时产生的图像数据对传输带宽是一个巨大考验，当传输带宽不能满足图像数据的传输需求时，可能会导致数据堵塞，进而导致图像数据的传输具有较大的延时，从而无法实现对多个相机的图像数据的实时传输。技术实现要素：3.为了解决上述技术问题，提出了本公开。本公开的实施例提供了一种图像数据的传输处理方法、装置、介质以及电子设备。4.根据本公开实施例的一个方面，提供一种图像数据的传输处理方法，包括：从需要协同拍摄的n个相机中确定出m个相机组，并确定m个相机组的第一传输时间，每个相机组包括n-1个相机，其中，n、m均为大于1的正整数，第一传输时间为相机组中包括的n-1个相机的图像传输时间之和，图像传输时间表征相机传输片内存储的全部图像数据所需的时间；将m个第一传输时间中的最大值确定为最大传输时间，将n个相机中的各相机的图像缓存时间中的最小值确定为最小缓存时间，图像缓存时间表征相机存满片内存储所需的时间；基于最大传输时间和最小缓存时间，确定传输带宽是否满足n个相机的图像数据传输需求；当传输带宽不满足图像数据传输需求时，生成图像传输策略，图像传输策略用于使传输带宽满足图像数据传输需求；其中，图像传输策略包括以下至少一项：参数调整策略、n个相机分时传输图像数据时的传输次序；向n个相机发送图像传输策略，以便n个相机基于图像传输策略传输图像数据。5.在一些实施例中，当传输带宽不满足图像数据传输需求时，生成图像传输策略，包括：当传输带宽不满足图像数据传输需求时，确定n个相机中的一个或多个相机的参数调整方式，得到参数调整策略；确定n个相机分时传输图像数据时的传输次序；基于参数调整策略和n个相机分时传输图像数据时的传输次序，生成图像传输策略；在向n个相机发送图像传输策略之前，该方法还包括：向n个相机发送时间同步指令，以指示n个相机执行时间同步操作。6.在一些实施例中，当传输带宽不满足图像数据传输需求时，生成图像传输策略，包括：当传输带宽不满足图像数据传输需求时，从第一相机集合中确定出一个待调整相机，第一相机集合中的相机为n个相机中未确定参数调整方式的相机；基于待调整相机的图像分辨率和/或帧率，确定待调整相机的参数调整方式，并将待调整相机从第一相机集合添加至第二相机集合，待调整相机的参数调整方式包括以下至少一项：图像分辨率的调整方式、帧率的调整方式；第二相机集合中的相机为n个相机中已确定参数调整方式的相机；基于待调整相机的参数调整方式，更新图像数据传输需求；迭代执行确定待调整相机的操作、确定待调整相机的参数调整方式的操作、更新图像数据传输需求的操作，直至传输带宽满足更新后的图像数据传输需求或第一相机集合为空；基于第二相机集合中的各个相机的参数调整方式，确定参数调整策略；当传输带宽满足更新后的图像数据传输需求时，基于参数调整策略，生成图像传输策略。7.在一些实施例中，当传输带宽不满足图像数据传输需求时，生成图像传输策略，还包括：当传输带宽不满足更新后的图像数据传输需求时，确定n个相机分时传输图像数据时的传输次序；基于参数调整策略和n个相机分时传输图像数据时的传输次序，生成图像传输策略；在向n个相机发送图像传输策略之前，该方法还包括：向n个相机发送时间同步指令，以指示n个相机执行时间同步操作。8.在一些实施例中，确定m个相机组的第一传输时间之前，该方法还包括：获取所述n个相机中的各相机的片内存储容量、图像分辨率和帧率；基于n个相机中的各相机的片内存储容量、图像分辨率和帧率，确定n个相机中的各相机的图像缓存时间；基于 n个相机中的各相机的片内存储容量和传输带宽，确定n个相机中的各相机的图像传输时间；基于最大传输时间和最小缓存时间，确定传输带宽是否满足n个相机的图像数据传输需求，包括：若最小缓存时间小于最大传输时间，确定传输带宽不满足图像数据传输需求；若最小缓存时间不小于最大传输时间，确定传输带宽满足图像数据传输需求。9.在一些实施例中，获取n个相机中的各相机的片内存储容量、图像分辨率和帧率，包括：响应于预设条件被触发，获取n个相机中的各相机的片内存储容量、图像分辨率和帧率，预设条件至少包括以下之一：检测到n个相机中的一个或多个相机的标识信息变化、n个相机中的一个或多个相机的位置信息发生变化、n个相机的相机数量发生变化。10.在一些实施例中，当传输带宽不满足图像数据传输需求时，生成图像传输策略，还包括：当传输带宽不满足图像数据传输需求时，确定n个相机中的一个或多个相机的参数调整方式，以使最小缓存时间不小于最大传输时间，得到参数调整策略；基于参数调整策略和n个相机分时传输图像数据时的传输次序，生成图像传输策略；在向n个相机发送图像传输策略之前，该方法还包括：向n个相机发送时间同步指令，以指示n个相机执行时间同步操作。11.在一些实施例中，当传输带宽不满足图像数据传输需求时，确定n个相机中的一个或多个相机的参数调整方式，以使最小缓存时间不小于最大传输时间，得到参数调整策略，包括：基于预设的n个相机的第一优先级，将第一优先级最低的一个或多个相机的图像分辨率和/或帧率降低，得到第一优先级最低的一个或多个相机的参数调整方式，并将该一个或多个相机的第一优先级调整至最高；基于第一优先级最低的一个或多个相机的降低后的图像分辨率和/或帧率，更新最小缓存时间和最大传输时间；迭代执行降低第一优先级最低的相机的图像分辨率和/或帧率的操作、调整第一优先级的操作、更新最小缓存时间和最大传输时间的操作，直至最小缓存时间不小于最大传输时间；基于n个相机中的一个或多个相机的参数调整方式，确定参数调整策略。12.在一些实施例中，该方法还包括：当最小缓存时间不小于最大传输时间时，确定n个相机分时传输图像数据时的传输次序；基于n个相机分时传输图像数据时的传输次序，生成图像传输策略。13.在一些实施例中，参数调整策略包括：按照预设方式，从每n帧图像中抽取预设数量帧图像的方式降低相机的帧率，其中，n的取值为大于0的整数，且n的取值基于n个相机的第二优先级确定。14.在一些实施例中，确定n个相机分时传输图像时的传输次序，包括：获取n个相机当前的存储空间余量；基于n个相机当前的存储空间余量，确定n个相机的第三优先级；基于第三优先级，确定n个相机的传输次序。15.在一些实施例中，图像数据为脉冲序列信号，该方法还包括获取脉冲序列信息的步骤：采集监测区域中各局部空间位置的时空信号，并对局部空间位置的时空信号按照时间进行累积，得到信号累积强度值；对信号累积强度值进行变换，在变换结果超过特定阈值时输出脉冲信号；将局部空间位置对应的脉冲信号按照时间先后排列成序列，得到表达局部空间位置信号及其变化过程的脉冲序列；将所有局部空间位置的脉冲序列或所有局部空间位置的脉冲序列组成的阵列确定为脉冲序列信号。16.根据本公开实施例的又一个方面，提供一种用于自动驾驶的方法，其中，包括：利用上述任一实施例中的方法，获取车辆上协同拍摄的n个相机采集的图像数据；将n个相机采集的图像数据融合，得到融合后的图像数据；基于融合后的图像数据，确定车辆所处的环境信息和位姿信息；基于车辆所处的环境信息和位姿信息，确定自动驾驶策略。17.根据本公开实施例的又一个方面，提供一种图像数据的传输处理装置，包括：传输时间单元，被配置成从需要协同拍摄的n个相机中确定出m个相机组，并确定m个相机组的第一传输时间，每个相机组包括n-1个相机，其中，n、m均为大于1的正整数，第一传输时间为相机组中包括的n-1个相机的图像传输时间之和，图像传输时间表征相机传输片内存储的全部图像数据所需的时间；极值确定单元，被配置成将m个第一传输时间中的最大值确定为最大传输时间，将n个相机中的各相机的图像缓存时间中的最小值确定为最小缓存时间，图像缓存时间表征相机存满片内存储所需的时间；需求确定单元，被配置成基于最大传输时间和最小缓存时间，确定传输带宽是否满足n个相机的图像数据传输需求；策略生成单元，被配置成当传输带宽不满足图像数据传输需求时，生成图像传输策略，图像传输策略用于使传输带宽满足图像数据传输需求；其中，图像传输策略包括以下至少一项：参数调整策略，n个相机分时传输图像数据时的传输次序；策略发送单元，被配置成向n个相机发送图像传输策略，以便n个相机基于图像传输策略传输图像数据。18.根据本公开实施例的又一个方面，提供一种用于自动驾驶的装置，其中，包括：获取单元，被配置成利用上述任一实施例中的方法，获取车辆上预设的n个相机采集的图像数据；融合单元，被配置成将n个相机采集的图像数据融合，得到融合后的图像数据；感知单元，被配置成基于融合后的图像数据，确定车辆所处的环境信息和位姿信息；决策单元，被配置成基于车辆所处的环境信息和位姿信息，确定自动驾驶策略。19.根据本公开实施例的再一方面，提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序用于实现上述方法。20.根据本公开实施例的又一方面，提供了一种电子设备，该电子设备包括：处理器；用于存储所述处理器可执行指令的存储器；所述处理器，用于从所述存储器中读取所述可执行指令，并执行所述指令以实现上述方法。21.基于本公开上述实施例提供的一种图像数据的传输处理方法、装置、介质以及电子设备，可以基于n个相机对应的最大传输时间和最小缓存时间，准确地判断传输带宽是否满足图像传输需求；当传输带宽不满足图像数据传输需求时，生成图像传输策略，以使传输带宽满足图像数据传输需求；然后，将图像传输策略发送至n个相机，以便n个相机按照图像传输策略传输图像数据。基于n个相机对应的最大传输时间和最小缓存时间判断传输带宽是否满足图像传输需求，可以更准确地判断传输带宽与图像传输需求之间的匹配关系；当传输带宽不满足图像传输需求时，通过图像传输策略可以对图像数据传输需求进行自适应调整，可以利用有限的传输带宽实现多个相机的图像数据的实时传输，以此避免数据堵塞，有助于提高协同拍摄时传输带宽的利用率和图像数据的时效性。22.下面通过附图和实施例，对本公开的技术方案做进一步的详细描述。附图说明23.通过结合附图对本公开实施例进行更详细的描述，本公开的上述以及其他目的、特征以及优势将变得更加明显。附图用来提供对本公开实施例的进一步的理解，并且构成说明书的一部分，与本公开实施例一起用于解释本公开，并不构成对本公开的限制。在附图中，相同的参考标号通常代表相同部件或步骤：图1是本公开的图像数据的传输处理方法的一个场景示意图；图2为本公开的图像数据的传输处理方法的一个实施例的流程示意图；图3为本公开的图像数据的传输处理方法的又一个实施例的流程示意图；图4为本公开的图像数据的传输处理方法的一个实施例中生成图像传输策略的流程示意图；图5为本公开的图像数据的传输处理方法的一个实施例中确定传输带宽是否满足图像数据传输需求的流程示意图；图6为本公开的图像数据的传输处理方法的一个实施例中生成参数调整策略的流程示意图；图7为本公开的图像数据的传输处理方法的一个实施例中获取图像数据的流程示意图；图8为本公开的一种用于自动驾驶的方法所适用的一个系统架构的示意图；图9为本公开的一种用于自动驾驶的方法的一个实施例的流程图；图10为本公开的图像数据的传输处理装置的一个实施例的结构示意图；图11为本公开的一种用于自动驾驶的装置的一个实施例的结构示意图；图12为本公开一示例性实施例提供的电子设备的结构图；图13为本公开一实施例提供的一种脉冲相机的结构示意图。具体实施方式24.下面将参考附图详细地描述根据本公开的示例实施例。显然，所描述的实施例仅仅是本公开的一部分实施例，而不是本公开的全部实施例，应理解，本公开不受这里描述的示例实施例的限制。25.应注意到：除非另外具体说明，否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本公开的范围。26.本领域技术人员可以理解，本公开实施例中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等，既不代表任何特定技术含义，也不表示它们之间的必然逻辑顺序。27.还应理解，在本公开实施例中，“多个”可以指两个或两个以上，“至少一个”可以指一个、两个或两个以上。28.还应理解，对于本公开实施例中提及的任一部件、数据或结构，在没有明确限定或者在前后文给出相反启示的情况下，一般可以理解为一个或多个。29.另外，本公开中术语“和/或”，仅是一种描述关联对象的关联关系，表示可以存在三种关系，如a和/或b，可以表示：单独存在a，同时存在a和b，单独存在b这三种情况。另外，本公开中字符“/”，一般表示前后关联对象是一种“或”的关系。30.还应理解，本公开对各个实施例的描述着重强调各个实施例之间的不同之处，其相同或相似之处可以相互参考，为了简洁，不再一一赘述。31.同时，应当明白，为了便于描述，附图中所示出的各个部分的尺寸并不是按照实际的比例关系绘制的。32.以下对至少一个示例性实施例的描述实际上仅仅是说明性的，决不作为对本公开及其应用或使用的任何限制。33.对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论，但在适当情况下，所述技术、方法和设备应当被视为说明书的一部分。34.应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步讨论。35.本公开的实施例可以应用于终端设备、计算机系统、服务器等电子设备，其可与众多其它通用或者专用计算系统环境或配置一起操作。适于与终端设备、计算机系统或者服务器等电子设备一起使用的众所周知的终端设备、计算系统、环境和/或配置的例子包括但不限于：个人计算机系统、服务器计算机系统、瘦客户机、厚客户机、手持或膝上设备、基于微处理器的系统、机顶盒、可编程消费电子产品、网络个人电脑、小型计算机系统、大型计算机系统和包括上述任何系统的分布式云计算技术环境等等。36.终端设备、计算机系统、服务器等电子设备可以在由计算机系统执行的计算机系统可执行指令（诸如程序模块）的一般语境下描述。通常，程序模块可以包括例程、程序、目标程序、组件、逻辑、数据结构等等，它们执行特定的任务或者实现特定的抽象数据类型。计算机系统/服务器可以在分布式云计算环境中实施。在分布式云计算环境中，任务可以是由通过通信网络链接的远程处理设备执行的。在分布式云计算环境中，程序模块可以位于包括存储设备的本地或远程计算系统存储介质上。37.下面结合图1对本公开的图像数据的传输处理方法进行示例性说明。图1为本公开的图像数据的传输处理方法的一个场景示意图，在图1所示的自动驾驶场景中，车辆内置有自动驾驶域控制器100（acu-automated-driving control unit，acu），车身上分布设置有协同拍摄的相机110、相机120、相机130。三个相机可以分别采集不同区域的图像数据，并将采集到的图像数据传输到自动驾驶域控制器100，以便自动驾驶域控制器100根据协同拍摄得到的图像数据感知车辆所处的环境信息和位置信息，进而根据感知结果确定自动驾驶策略或辅助驾驶策略。38.本公开的图像数据的传输处理方法运行于自动驾驶域控制器100上。当车辆启动时，自动驾驶域控制器100可以指示各个相机将中的各相机的片内存储容量、图像分辨率和帧率上传至自动驾驶域控制器100，以便自动驾驶域控制器100确定各个相机的图像传输时间和图像缓存时间，并采用排列组合的方式确定出3个第一传输时间，进而确定出最大传输时间和最小缓存时间，并根据最大传输时间和最小缓存时间判断传输带宽是否满足图像数据传输需求。当传输带宽不满足图像数据传输需求时，自动驾驶域控制器100可以生成图像传输策略，例如可以包括参数调整策略和/或各个相机分时传输图像数据时的传输次序，以降低各个相机的图像数据传输需求，使得传输带宽满足降低后的图像数据传输需求。之后，自动驾驶域控制器100将图像传输策略下发至各个相机，以便各个相机按照图像传输策略向自动驾驶域控制器100上传采集的图像数据。再之后，自动驾驶域控制器100可以对各个相机上传的图像数据进行识别或感知处理，以生成自动驾驶策略。39.图2为本公开的图像数据的传输处理方法一个实施例的流程图。如图2所示，该流程包括以下步骤。40.步骤210、从需要协同拍摄的n个相机中确定出m个相机组，并确定m个相机组的第一传输时间。41.其中，每个相机组包括n-1个相机，n、m均为大于1的正整数，第一传输时间为相机组中包括的n-1个相机的图像传输时间之和，图像传输时间表征相机传输片内存储的全部图像数据所需的时间。42.实践中，多个相机的协同拍摄可以应用在各个场景，例如分布于大型场景中的多个监控摄像头，每个摄像头用于采集局部区域的图像数据；再例如，车辆的360°全景摄像系统，可以通过多个车载摄像头采集不同方位的图像。43.在本实施例中，需要协同拍摄的n个相机可以为同一种类型的相机，也可以包括多种类型的相机，例如红外相机、高清摄像头、高速相机等，可以根据实际应用场景选择匹配的相机。44.以自动驾驶场景为例，可以采用多个脉冲相机作为上述n个相机进行协同拍摄。通常，脉冲相机可以包括：前端传感器和fpga/asic电路。前端传感器通过将光强转换为脉冲数据，fpga/asic电路包括脉冲接收模块、图像重构模块、图像缓存模块、时间同步模块、图像通信模块。模组接收模块用于采集前端传感器输出的脉冲数据，图像重构模块用于将脉冲数据重构成图像数据，图像缓存模块用于缓存重构的图像数据，时间同步模块用于脉冲相机之间时间同步以及外部图像处理单元时间同步，图像通信模块用于脉冲相机与外部图像处理单元图像传输工作。通过脉冲相机的超高速连续成像，可以通过协同拍摄获取高速运动物体的图像数据，有助于提高自动驾驶的安全性。45.在本实施例中，协同拍摄的n个相机传输图像数据时，部分（例如可以是1个）相机处于图像缓存阶段，其余相机（例如可以是n-1个）则依次传输图像数据。当1个相机传输完成后，该相机进入图像缓存阶段，其余相机则继续依次传输图像数据。因而，可通过对比图像传输时间与图像缓存时间确定传输带宽是否满足图像数据传输需求。m的取值可以根据相机数量n以及实际需求、经验数据或实验数据进行设定，优选的，m的取值可以等于n。46.在本实施例的一个可选的实施方式中，可以采用排列组合的方式从n个相机中确定出m个相机组。作为示例，用于协同拍摄的相机包括相机0、相机1和相机2，其图像传输时间分别为1ms、2ms和3ms，即n=3。假设m=n，执行主体可以确定出3个相机组，分别为：相机0和相机1；相机1和相机2；相机0和相机2，其第一传输时间分别为3ms，5ms和4ms。47.步骤220、将m个第一传输时间中的最大值确定为最大传输时间，将n个相机中的各相机的图像缓存时间中的最小值确定为最小缓存时间。48.其中，图像缓存时间表征相机存满片内存储所需的时间。49.继续结合步骤210中的示例进行说明，最大传输时间为第一传输时间中的最大值4ms。假设相机0、相机1和相机2的图像缓存时间依次为1.5ms、2ms和4ms，则最小缓存时间为1.5ms。50.步骤230、基于最大传输时间和最小缓存时间，确定传输带宽是否满足n个相机的图像数据传输需求。51.在本实施例中，图像数据传输需求可以表示在n个相机在一个数据传输周期内传输图像数据所需要满足的条件。52.最大传输时间表示一个数据传输周期内任意n-1个相机传输图像所需的最大时间，最小缓存时间表示n个相机中的各个相机存满片内存储存满所需时间的最小值。作为示例，当最大传输时间与最小缓存时间的比值不小于预设比例阈值时，确定传输带宽满足传输需求，当最大传输时间与最小缓存时间的比值小于预设比例阈值时，确定传输带宽不满足传输需求。比例阈值可以根据实际需求或经验设定为大于或等于1的任意数值。优选的，可以将比例阈值设置为大于1的数值，使得传输带宽相对于图像传输需求保持一定的余量，避免因意外情况导致的数据突增，有助于提高传输图像数据的可靠性。53.再例如，当最大传输时间与最小缓存时间的差值不小于预设的差值阈值时，确定传输带宽满足图像传输需求；当最大传输时间与最小缓存时间的差值小于预设的差值阈值时，确定传输带宽不满足图像传输需求。差值阈值可以根据实际需求或经验设定为任意大于或等于0的数值。54.步骤240、当传输带宽不满足图像数据传输需求时，生成图像传输策略。55.其中，图像传输策略用于使传输带宽满足n个相机的图像数据传输需求，图像传输策略包括以下至少一项：参数调整策略、n个相机分时传输图像数据时的传输次序。56.在本实施例中，图像传输策略用于自适应调节n个相机的图像数据传输需求，以使传输带宽满足图像数据传输需求。其中，参数调整策略用于指示相机调整自身的图像参数，例如图像分辨率、帧率。分时传输图像数据则用于指示n个相机串行传输图像数据，与并行传输图像数据相比，分时传输图像数据对于传输带宽的需求更低，因而可以降低图像数据传输需求。57.在本实施例中，图像传输策略可以通过以下三种方式对图像数据传输需求进行自适应调节：通过参数调整策略指示相机调整自身的图像参数，例如可以降低图像分辨率和/或降低帧率，以降低图像数据量的获取速度，进而降低图像数据的传输需求；采用n个相机分时传输图像数据的方式，降低图像数据传输需求；通过参数调整策略指示相机调整自身的图像参数，并采用分时传输的方式。58.在本实施例的一些可选的实施方式中，不同的相机可以采用不同的参数调整方式，例如n个相机中的部分相机可以对图像分辨率进行调整，另外部分相机可以对帧率进行调整，还有部分相机可以同时对图像分辨率和帧率进行调整。59.进一步的，采用同一种参数调整方式的多个相机可以采用不同的调整幅度，例如相机a和相机b均是对帧率进行调整，其中相机a可以将帧率降低10%，相机b可以将帧率降低20%。再例如，相机a和相机b均是对帧率进行调整，相机a可以采用均匀抽取图像帧的方式降低帧率，相机b可以采用随机抽取图像帧的方式降低帧率。60.步骤250、向n个相机发送图像传输策略，以便n个相机基于图像传输策略传输图像数据。61.本实施例提供的图像数据的传输处理方法，基于n个相机对应的最大传输时间和最小缓存时间，可以准确地判断传输带宽是否满足图像传输需求；当传输带宽不满足图像传输需求时；当传输带宽不满足图像数据传输需求时，生成图像传输策略，以使传输带宽满足图像数据传输需求；然后，将图像传输策略发送至n个相机，以便n个相机按照图像传输策略传输图像数据。通过图像传输策略可以对图像数据传输需求进行自适应调整，可以利用有限的传输带宽实现多个相机的图像数据传输，以此避免数据堵塞，有助于提高协同拍摄时传输带宽的利用率和图像数据的时效性。62.接着参考图3，图3示出了本公开的图像数据的传输处理方法的又一个实施例的流程图，如图3所示，上述步骤240可以进一步包括以下步骤。63.步骤310、当传输带宽不满足图像数据传输需求时，确定n个相机中的一个或多个相机的参数调整方式，得到参数调整策略。64.在本实施例中，参数调整方式表示单个相机调整自身图像参数的方式，例如可以包括图像分辨率和/或帧率的调整方式。65.步骤320、确定n个相机分时传输图像数据时的传输次序。66.作为示例，执行主体可以根据预设的优先级确定n个相机的传输次序，优先级越高，传输次序越靠前。67.再例如，执行主体还可以根据相机片内存储的存储状态确定传输次序，片内存储的剩余空间越小，传输次序越靠前。68.步骤330、基于参数调整策略和n个相机分时传输图像数据时的传输次序，生成图像传输策略。69.作为示例，执行主体可以根据片内存储容量和传输带宽，确定各相机所需的传输时间，再结合传输次序确定各个相机传输图像数据的起始时刻和终止时刻。然后执行主体可以建立相机标识与起始时刻、终止时刻、参数调整方式的对应关系，作为图像传输策略。例如，n的取值为3，相机标识可以是相机的编号：001、002和003，则图像传输策略可以包括以下内容：相机001的参数调整方式为将图像分辨率调整至400×800，起始时刻为0ms，终止时刻为0.4ms；相机002的参数调整方式为将图像分辨率调整至400×600、将帧率调整至10帧/秒，起始时刻为0.4ms，终止时刻为0.7ms；相机003的参数调方式略每隔5帧抽取1帧存入片内存储，起始时刻为0.7ms，终止时刻为1.0ms。如此一来，3个相机接收到图像传输策略之后，可以根据对应的参数调整策略调整对应的参数，并且，在[0，0.4）的时间区间内由相机001传输图像数据，在[0.4，0.7）的时间区间内由相机002传输图像数据，在[0.7，1.0]的时间区间内由相机003传输图像数据。[0070]在另一个示例中，执行主体可以根据传输次序确定每个相机对应的下一个传输图像数据的相机，由此得到的图像传输策略可以包括相机标识与参数调整方式、下一个相机的相机标识的对应关系。每个相机传输图像数据完成时，可以向下一个相机发送传输指令，以便下一个相机开启图像数据传输，从而实现n个相机的分时传输。继续结合上述示例中的相机001、002、003进行说明，图像传输方式可以包括以下内容：相机001的参数调整方式为将图像分辨率调整至400×800，其对应的下一个相机未相机002；相机002的参数调整方式为将图像分辨率调整至400×600、将帧率调整至10帧/秒，其对应的下一个相机为相机003；相机003的参数调整策略每隔5帧抽取1帧存入片内存储，其对应的下一个相机为相机001。[0071]步骤340、向n个相机发送时间同步指令，以指示n个相机执行时间同步操作。[0072]在本实施例中，n个相机执行时间同步之后，再结合传输次序，可以实现n个相机的分时传输。[0073]在一个具体的示例中，执行主体为图1所示的自动驾驶域控制器100，其中预设有时间同步模块，n个相机均为脉冲相机。执行主体向n个相机发送时间同步指令之后，n个相机中的时间同步模块分别与执行主体中的时间同步模块通信，以此实现n个相机的时间同步。[0074]步骤350、向n个相机发送图像传输策略，以便n个相机基于图像传输策略传输图像数据。[0075]在本实施例中，n个相机接收到图像传输策略之后，其中的一个或多个相机可以根据对应的参数调整方式对自身的图像参数进行调整，并按照传输次序进行分时传输，可以从图像参数和传输方式两个维度对图像数据传输需求进行自适应调节，可以进一步缓解传输带宽对图像数据传输的限制。[0076]接着参考图4，图4示出了本公开的图像数据的传输处理方法的一个实施例中生成图像传输策略的流程图，如图4所示，上述步骤240可以进一步包括以下步骤。[0077]步骤410、当传输带宽不满足图像数据传输需求时，从第一相机集合中确定出一个待调整相机。[0078]其中，第一相机集合中的相机为n个相机中未确定参数调整方式的相机。[0079]在本实施例中，执行主体可以根据是否确定参数调整方式，将n个相机分为第一相机集合和第二相机集合，每个集合中存储有对应相机的相机标识（例如可以是相机编号），之后可以根据后续步骤对两个集合中的相机进行动态调整。待调整相机表示当前需要确定参数调整方式的相机。[0080]作为示例，执行主体确定传输带宽不满足图像数据传输需求时，可以从第一相机集合中随机选取一个相机作为待调整相机，也可以根据第一相机集合中各个相机的优先级，选取优先级最高或最低的相机作为待调整相机。[0081]步骤420、基于待调整相机的图像分辨率和/或帧率，确定待调整相机的参数调整方式，并将待调整相机从第一相机集合添加至第二相机集合。[0082]其中，待调整相机的参数调整方式包括以下至少一项：图像分辨率的调整方式、帧率的调整方式，第二相机集合中的相机为n个相机中已确定参数调整方式的相机。[0083]作为示例，图像分辨率的调整方式可以是目标图像分辨率，以此指示相机将图像分辨率调整至目标分辨率；还可以图像分辨率的调整幅度，以此指示相机根据图像分辨率和调整幅度，对图像分辨率进行调整。帧率的调整方式可以是目标帧率，以此指示相机将帧率调整至目标帧率；还可以是帧率的调整幅度。[0084]执行主体确定待调整相机的参数调整方式后，可以将待调整相机的相机标识从第一相机集合转移至第二相机集合，以此实现对第一相机集合和第二相机集合的动态更新。[0085]步骤430、基于待调整相机的参数调整方式，更新图像数据传输需求。[0086]在本实施例中，可以根据待调整相机的参数调整方式，确定待调整相机的调整后的图像参数，然后根据待调整相机的调整后的图像参数，重新计算n个相机的图像数据传输需求。[0087]步骤440、迭代执行确定待调整相机的操作、确定待调整相机的参数调整方式的操作、更新图像数据传输需求的操作，直至传输带宽满足更新后的图像数据传输需求或第一相机集合为空。[0088]在本实施例中，为了在满足图像数据传输需求的前提下，充分利用传输带宽，可以采用迭代执行步骤410至步骤430的方式，每确定一个相机的参数调整方式，就对图像数据传输需求进行一次更新和判断的操作。当传输带宽满足更新后的图像数据传输需求时，无需再对第一相机集合中的相机的图像参数进行调整，既可以保证传输带宽满足图像数据传输需求，又可以充分利用传输带宽。当第一相机集合为空时，表示n个相机均已确定参数调整方式。[0089]步骤450、基于第二相机集合中的各个相机的参数调整方式，确定参数调整策略。[0090]在本实施例中，执行主体可以确定相机与其参数调整方式的对应关系，从而得到参数调整策略。[0091]步骤460、当传输带宽满足更新后的图像数据传输需求时，基于参数调整策略，生成图像传输策略。[0092]作为示例，n的取值为5，经步骤410至步骤450之后，传输带宽满足更新后的图像数据传输需求，此时第二相机集合中包括相机a和相机b，则执行主体可以根据相机a和相机b的参数调整方式，生成图像传输策略。例如可以包括：相机a的参数调整方式是降低图像分辨率，相机b的参数调整方式是降低帧率。[0093]在本实施例中，图像传输策略可以包括第二相机集合中的各个相机分别对应的参数调整方式，以便对应的相机可以根据其参数调整方式调整自身的图像参数。[0094]图4所示的实施例体现了通过迭代方式逐个确定相机的参数调整方式，进而生成图像传输策略的步骤，一方面可以确保传输带宽满足图像数据传输需求，另一方面可以充分利用传输带宽，获取质量更高、数量更多的图像数据。[0095]在本实施例的一些可选的实现方式中，当传输带宽不满足更新后的图像数据传输需求时，确定n个相机分时传输图像数据时的传输次序；基于参数调整策略和n个相机分时传输图像数据时的传输次序，生成图像传输策略；以及，在向n个相机发送图像传输策略之前，方法还包括：向n个相机发送时间同步指令，以指示n个相机执行时间同步操作。[0096]在本实施方式中，当调整相机的图像参数不能使得传输带宽满足图像数据传输需求时，可以结合分时传输的方式，基于参数调整策略和传输次序生成图像传输策略，可以进一步缓解传输带宽对图像数据传输的限制。[0097]在实施本公开的过程中，发明人还发现，相关技术中对于图像数据传输需求的计算方式不够准确，尤其是分时传输图像数据时，往往会造成传输带宽过剩，导致传输带宽的利用率较低。[0098]为了解决上述问题，本公开的图像数据的传输处理方法的一个实施例可以采用图5所示的流程确定传输带宽是否满足图像数据传输需求，如图5所示，该流程包括以下步骤。[0099]步骤510、获取n个相机中的各相机的片内存储容量、图像分辨率和帧率。[0100]在本实施例中，片内存储容量表示相机本地存储空间的大小，通常用于缓存采集到的图像数据。图像分辨率表示相机采集和存储的图像的分辨率。帧率则表示相机单位时间内采集并存入片内存储空间的图像的帧数。[0101]作为示例，执行主体首次获取需要协同拍摄的n个相机的参数时，可以向n个相机发送参数上传指令，以指示n个相机将中的各相机的片内存储容量、图像分辨率和帧率上传至执行主体。之后，执行主体可以将n个相机将各自的片内存储容量、图像分辨率和帧率存储在本地存储空间，后续应用时，只需从本地存储空间中调取数据即可。在本实施例的一些可选的实施方式中，步骤510可以进一步包括：响应于预设条件被触发，获取n个相机中的各相机的片内存储容量、图像分辨率和帧率，预设条件至少包括以下之一：检测到n个相机中的一个或多个相机的标识信息变化、n个相机中的一个或多个相机的位置信息发生变化、n个相机的相机数量发生变化。[0102]在本实施方式中，预设条件被触发表示协同拍摄的多个相机发生变动，执行主体可以获取变动后的各个相机的参数，以通过后续步骤重新确定传输带宽是否满足图像数据传输需求，可以避免相机变动可能导致的图像数据无法正常传输，有助于提高协同拍摄的图像数据传输的可靠性。[0103]步骤520、基于n个相机中的各相机的片内存储容量、图像分辨率和帧率，确定n个相机中的各相机的图像缓存时间。[0104]其中，图像缓存时间表征相机存满片内存储所需的时间。[0105]在本实施例中，执行主体可以首先基于图像分辨率和图像的色彩度确定单帧图像的数据量，然后基于单张图像的数据量与帧率，确定相机在单位时间内需要缓存的图像数据量，再根据片内存储容量与相机在单位时间内需要缓存的图像数据量，确定相机的图像缓存时间。[0106]上述计算过程可以通过如下公式（1）、（2）实现：ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ（1）ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ（2）其中，pic为相机i采集的单帧图像的数据量，fps为相机i的帧率， 为相机i在单位时间内需要缓存的数据量， 表示相机i的缓存时间，表示相机i的片内存储容量。[0107]步骤530、基于 n个相机中的各相机的片内存储容量和传输带宽，确定n个相机中的各相机的图像传输时间。[0108]图像传输时间表征相机传输片内存储的全部图像数据所需的时间。[0109]在本实施例中，可以通过如下公式（3）确定相机的图像传输时间。[0110]ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ（3）其中， 表示相机i的图像传输时间，b表示传输带宽。[0111]步骤540、从n个相机中确定出m个相机组，并确定m个相机组的第一传输时间。[0112]其中，每个相机组包括n-1个相机，第一传输时间为相机组中包括的n-1个相机的图像传输时间之和。[0113]步骤550、将m个第一传输时间中的最大值确定为最大传输时间，将n个相机中的各相机的图像缓存时间中的最小值确定为最小缓存时间。[0114]需要说明的是，步骤540、步骤550与前述步骤210、步骤220相对应，此处不再赘述。[0115]步骤560、若最小缓存时间小于最大传输时间，确定传输带宽不满足图像数据传输需求。[0116]在本实施例中，若最小缓存时间小于最大传输时间，则最小缓存时间对应的相机将片内存储存满时，其余相机尚未完成图像传输，最小缓存时间对应的相机的片内存储的数据会溢出，此时可以确定传输带宽不满足图像传输需求，以免数据溢出导致的数据丢失。[0117]步骤570、若最小缓存时间不小于最大传输时间，确定传输带宽满足图像数据传输需求。[0118]图5所示的实施例体现了通过对比缓存时间与传输时间确定传输带宽是否满足图像数据传输需求的步骤，以此，可以更准确地判断传输带宽与图像数据传输需求之间的匹配关系，尤其适用于分时传输，有助于提高协同拍摄时图像数据传输的可靠性，并提高传输带宽的利用率。[0119]在图5所示的实施例的基础上，还可以采用如下方式生成图像传输策略：当传输带宽不满足图像数据传输需求时，确定n个相机中的一个或多个相机的参数调整方式，以使最小缓存时间不小于最大传输时间，得到参数调整策略；基于参数调整策略和n个相机分时传输图像数据时的传输次序，生成图像传输策略。在向n个相机发送图像传输策略之前，方法还包括：向n个相机发送时间同步指令，以指示n个相机执行时间同步操作。[0120]在本实施方式中，在对比缓存时间与传输时间确定传输带宽是否满足图像数据传输需求的基础上，将最小缓存时间和最大传输时间之间的关系作为约束，确定参数调整策略，进而结合传输次序确定图像传输策略，以便各个相机再调整自身的图像参数之后，按照传输次序进行图像数据的传输。通过分时传输可以在确保图像数据传输可行的前提下，获取低延时的图像数据。[0121]在本实施例的一些可选的实现方式中，图5所示的实施例还可以进一步包括以下步骤：当最小缓存时间不小于最大传输时间时，确定n个相机分时传输图像数据时的传输次序；基于n个相机分时传输图像数据时的传输次序，生成图像传输策略。[0122]如此一来，可以结合参数调整策略和传输次序，确定分时传输的图像传输策略，通过复用传输带宽，可以进一步提高传输带宽的利用率。[0123]在图5的基础上进一步参考图6，图6示出了本公开的图像数据的传输处理方法的一个实施例中生成参数调整策略的流程图，如图6所示，该流程包括以下步骤。[0124]步骤610、基于预设的n个相机的第一优先级，将第一优先级最低的一个或多个相机的图像分辨率和/或帧率降低，得到第一优先级最低的一个或多个相机的参数调整方式，并将该一个或多个相机的第一优先级调整至最高。[0125]在本实施例中，第一优先级可以表示相机的重要程度，第一优先级越高，表示相机越重要，则优先确保该相机的图像数据的完整性。作为示例，第一优先级可以根据相机的位置或性能设定。[0126]在一个具体的示例中，第一优先级由高到低的顺序为相机a、相机b、相机c，则执行主体首选确定相机c的参数调整方式，例如可以包括降低图像分辨率或降低帧率或同时降低帧率和图像分辨。然后将相机c的第一优先级调整至最高，更新后的第一优先级由高到低依次为相机c、相机a和相机b。[0127]步骤620、基于第一优先级最低的一个或多个相机的降低后的图像分辨率和/或帧率，更新最小缓存时间和最大传输时间。[0128]步骤630、迭代执行降低第一优先级最低的相机的图像分辨率和/或帧率的操作、调整第一优先级的操作、更新最小缓存时间和最大传输时间的操作，直至最小缓存时间不小于最大传输时间。[0129]在本实施例中，可以通过迭代执行步骤610至步骤620，对图像数据传输需求进行自适应调整，直至最小缓存时间不小于最大传输时间，表示传输带宽满足自适应调整后的图像数据传输需求。[0130]步骤640、基于n个相机中的一个或多个相机的参数调整方式，确定参数调整策略。[0131]图6所示的实施例，体现了根据相机的优先级确定相机的参数调整方式，进而通过迭代的方式确定参数调整策略的步骤，可以保证优先级高的相机的图像数据的完整性，有助于提高协同拍摄获取的图像数据的整体质量。[0132]在上述多个实施例的一些可选的实施方式中，参数调整策略可以包括：按照预设方式，从每n帧图像中抽取预设数量帧图像的方式降低相机的帧率，其中，n的取值为大于0的整数，且n的取值基于n个相机的第二优先级确定。[0133]例如，可以从每n帧图像中随机抽取预设数量帧图像，预设数量可以是大于0且小于n的任意正整数。再例如，还可以从每n帧图像中抽取固定位置的图像帧，具体的，可以从每n帧图像中固定抽取第m（m的取值为1至n-1中的任意一个）帧图像，即均匀抽帧。其中，抽取出的图像帧可以存入相机的片内存储，也可以丢弃，并将剩余的图像帧存入片内存储。[0134]在本实施方式中，第二优先级可以表示相机的重要程度。当抽取出的图像帧存入相机的片内存储时，优先级越高的相机，n的取值越接近0；当抽取出的图像帧被丢弃时，优先级越高的相机，n的取值越大。以此可以优先保证重要相机的图像数据的完整程度，并且可以确保图像数据的连续性。[0135]在上述多个实施例的一些可选的实施方式中，还可以采用如下方式确定n个相机分时传输图像时的传输次序：获取n个相机当前的存储空间余量；基于n个相机当前的存储空间余量，确定n个相机的第三优先级；基于第三优先级，确定n个相机的传输次序。[0136]在本实施方式中，可以根据相机当前的存储状态确定第三优先级，存储空间余量越小，第三优先级越高，相应地，传输次序越靠前。可以根据相机的存储状态，对各个相机进行动态排序，从而避免图像数据溢出导致的数据丢失，有助于提高协同拍摄的可靠性。[0137]在上述多个实施例的一些可选地实现方式中，图像数据为脉冲序列信号，还可以采用图7所示的流程获取图像数据，如图7所示，该流程包括以下步骤。[0138]步骤710、采集监测区域中各局部空间位置的时空信号，并对局部空间位置的时空信号按照时间进行累积，得到信号累积强度值。[0139]在本实施例中，图像数据为脉冲序列信号，通过图像重构处理，可以基于脉冲序列信号生成图像。[0140]作为示例，可以通过相机中的信号采集器从指定的局部空间位置采集时空信号，生成脉冲序列，完成时域采样；多个信号采集器排列成阵列，互相配合覆盖整个监测区域，可以完成对监测区域的空域采样。其中，时空信号可以时光信号。信号采集器可以是光敏器件，用于实现光电转换，其输出端的电信号强度与采集的光强正相关；每个光敏器件负责一个小正方形局部区域，所有器件可以按照行列排列成整齐的方阵。每个信号采集器本身就标识了所输出的光信号的局部空间位置。将信号采集器与信号累加器链接，可以将信号采集器采集的时空信号累积，得到信号累积强度值。[0141]步骤720、对信号累积强度值进行变换，在变换结果超过特定阈值时输出脉冲信号。[0142]作为示例，可以利用滤波器对信号累积强度值进行变换，滤波器可以按照预先设定的滤波函数对输入的累计强度值进行变换，并在变换结果超过特定阈值时输出脉冲信号，如此，可以实现对可以得到各个局部空间位置对应的累积信号强度值的时域特性的编码。不同的局部空间位置对应的滤波器的输出可以是不同步的。[0143]实践中，利用滤波器对信号累积强度值进行变换得到的脉冲信号可以只携带一个比特的信息，即0（无脉冲输出）或1（有脉冲输出）。[0144]步骤730、将局部空间位置对应的脉冲信号按照时间先后排列成序列，得到表达局部空间位置信号及其变化过程的脉冲序列。[0145]步骤740、将所有局部空间位置的脉冲序列或所有局部空间位置的脉冲序列组成的阵列确定为脉冲序列信号。[0146]作为示例，可以按照空间位置关系，将各个局部空间位置的脉冲序列形成阵列，并将该阵列作为脉冲序列信号。[0147]再例如，由于步骤710中采集的时空信号中已经标识了局部空间位置，因而可以直接将各个局部空间位置对应的脉冲序列确定为脉冲序列信号。[0148]在图7所示的实施例中，可以基于采集的时空信号生成脉冲序列信号，由此得到的脉冲序列信号可以充分保留时域和空域信息，不仅可以充够任意时刻的静态图像，而且保留了高速运动场景的精细运动过程。对于一些不需要重构图像的应用场景，例如自动驾驶场景，可以将脉冲序列信号作为图像数据并进行图像数据的传输或分析处理，有助于拓展本公开的图像数据的传输处理方法的应用范围。[0149]接着参考图8，图8示出了对本公开的图像数据的传输处理方法所适用的一个系统架构图，如图8所示，设置于车辆上的n个脉冲相机（图中仅示例性地示出了脉冲相机810和脉冲相机830）用于协同拍摄，下面以脉冲相机810为例进行说明。脉冲相机810可以通过图像通信模块811与自动驾驶域控制器820中内置的图像通信模块821进行数据交互，以接收自动驾驶域控制器820下发的指令（例如参数上传指令、图像传输策略），并将片内存储的图像数据传输至自动驾驶域控制器820。具体的，当车辆启动后，脉冲相机810可以通过前端传感器813将捕捉到的光信号转化为脉冲数据，通过脉冲接收模块812接收前端传感器813输出的脉冲数据，由图像重构模块814将脉冲数据重构为图像数据，由图像缓存模块815将图像数据缓存入片内存储。[0150]当脉冲相机810通过图像通信模块811接收到自动驾驶域控制器820下发的参数上传指令时，可以通过图像通信模块811将自身的片内存储容量、图像分辨率和帧率上传至自动驾驶域控制器820，以便自动驾驶域控制器820确定传输带宽是否满足图像数据传输需求。当传输带宽不满足图像数据传输需求时，自动驾驶域控制器820可以生成图像传输策略，并通过自动驾驶域控制器820中内置的图像通信模块821将图像传输策略发送至各个脉冲相机。当图像传输策略中包括传输次序时，自动驾驶域控制器820可以在下发图像传输策略之前，先通过内置的时间同步模块822向脉冲相机810发送时间同步指令，以便脉冲相机810可以通过时间同步模块816与其他脉冲相机的时间同步模块进行交互，以实现各个脉冲相机的时间同步，此外，脉冲相机810可以通过时间同步模块816与自动驾驶域控制器820中内置的时间同步模块822进行交互，以实现脉冲相机810与自动驾驶域控制器820之间的时间同步。之后，脉冲相机810可以按照图像传输策略，通过图像通信模块811将片内存储的图像数据传输至自动驾驶域控制器820。自动驾驶域控制器820接收到n个脉冲相机传输的图像数据后，可以对图像数据进行融合、感知等处理，进而根据感知结果生成自动驾驶策略。[0151]下面参考图9，图9示出了本公开的一种用于自动驾驶的方法的一个实施例的流程图，如图9所示，该流程包括以下步骤。[0152]步骤910、获取车辆上协同拍摄的n个相机采集的图像数据。[0153]在本实施例中，车辆中内置的自动驾驶域控制器可以采用上述任一实施例中的图像数据的传输处理方法获取n个相机采集的图像数据。[0154]可选的，本实施例中的图像数据可以是脉冲序列信号。[0155]步骤920、将n个相机采集的图像数据融合，得到融合后的图像数据。[0156]步骤930、基于融合后的图像数据，确定车辆所处的环境信息和位姿信息。[0157]在本实施例中，自动驾驶域控制器可以对融合后的图像数据进行识别，以预测车辆的环境信息和位姿信息，环境信息例如可以包括道路流量、车辆与其他车辆的相对位置等等。[0158]步骤940、基于车辆所处的环境信息和位姿信息，确定自动驾驶策略。[0159]本实施例提供用于自动驾驶的方法，可以在有限的传输带宽下高效、可靠地获取协同拍摄的多个相机的图像数据，图像数据可以是获取的脉冲序列信号，可以将脉冲序列信号作为图像数据进行图像数据的传输或分析处理，可以为自动驾驶策略提高质量更高、更可靠的数据支持，有助于提高自动驾驶的可靠性和安全性。[0160]图10为本公开的图像数据的传输处理装置的一个实施例的结构示意图，图10所示，该装置包括：传输时间单元1010，被配置成被配置成从需要协同拍摄的n个相机中确定出m个相机组，并确定m个相机组的第一传输时间，每个相机组包括n-1个相机，其中，n、m均为大于1的正整数，第一传输时间为相机组中包括的n-1个相机的图像传输时间之和，图像传输时间表征相机传输片内存储的全部图像数据所需的时间；极值确定单元1020，被配置成将m个第一传输时间中的最大值确定为最大传输时间，将n个相机中的各相机的图像缓存时间中的最小值确定为最小缓存时间，图像缓存时间表征相机存满片内存储所需的时间；需求确定单元1030，被配置成基于最大传输时间和最小缓存时间，确定传输带宽是否满足n个相机的图像数据传输需求；策略生成单元1040，被配置成当传输带宽不满足图像数据传输需求时，生成图像传输策略，图像传输策略用于使传输带宽满足图像数据传输需求；其中，图像传输策略包括以下至少一项：参数调整策略，n个相机分时传输图像数据时的传输次序；策略发送单元1050，被配置成向n个相机发送图像传输策略，以便n个相机基于图像传输策略传输图像数据。[0161]在其中一个实施方式中，策略生成单元1040被进一步配置成：当传输带宽不满足图像数据传输需求时，确定n个相机中的一个或多个相机的参数调整方式，得到参数调整策略；确定n个相机分时传输图像数据时的传输次序；基于参数调整策略和n个相机分时传输图像数据时的传输次序，生成图像传输策略；在向n个相机发送图像传输策略之前，向n个相机发送时间同步指令，以指示n个相机执行时间同步操作。[0162]在其中一个实施方式中，策略生成单元1040被进一步配置成：当传输带宽不满足图像数据传输需求时，从第一相机集合中确定出一个待调整相机，第一相机集合中的相机为n个相机中未确定参数调整方式的相机；基于待调整相机的图像分辨率和/或帧率，确定待调整相机的参数调整方式，并将待调整相机从第一相机集合添加至第二相机集合，待调整相机的参数调整方式包括以下至少一项：图像分辨率的调整方式、帧率的调整方式；第二相机集合中的相机为n个相机中已确定参数调整方式的相机；基于待调整相机的参数调整方式，更新图像数据传输需求；迭代执行确定待调整相机的操作、确定待调整相机的参数调整方式的操作、更新图像数据传输需求的操作，直至传输带宽满足更新后的图像数据传输需求或第一相机集合为空；基于第二相机集合中的各个相机的参数调整方式，确定参数调整策略；当传输带宽满足更新后的图像数据传输需求时，基于参数调整策略，生成图像传输策略。[0163]在其中一个实施方式中，策略生成单元1040还被配置成：当传输带宽不满足更新后的图像数据传输需求时，确定n个相机分时传输图像数据时的传输次序；基于参数调整策略和n个相机分时传输图像数据时的传输次序，生成图像传输策略；在向n个相机发送图像传输策略之前，向n个相机发送时间同步指令，以指示n个相机执行时间同步操作。[0164]在其中一个实施方式中，策略生成单元1040进一步包括：参数获取模块，被配置成获取所述n个相机中各相机的片内存储容量、图像分辨率和帧率；第一计算模块，被配置成基于n个相机中的各相机的片内存储容量、图像分辨率和帧率，确定n个相机中的各相机的图像缓存时间；第二计算模块，被配置成基于 n个相机中的各相机的片内存储容量和传输带宽，确定n个相机中的各相机的图像传输时间；需求确定单元930进一步包括：第一判断模块，被配置成若最小缓存时间小于最大传输时间，确定传输带宽不满足图像数据传输需求；第二判断模块，被配置成若最小缓存时间不小于最大传输时间，确定传输带宽满足图像数据传输需求。[0165]在其中一个实施方式中，参数获取模块被进一步配置成：响应于预设条件被触发，获取n个相机中的各相机的片内存储容量、图像分辨率和帧率，预设条件至少包括以下之一：检测到n个相机中的一个或多个相机的标识信息变化、n个相机中的一个或多个相机的位置信息发生变化、n个相机的相机数量发生变化。[0166]在其中一个实施方式中，策略生成单元1040还包括：参数调整模块，被配置成当传输带宽不满足图像数据传输需求时，确定n个相机中的一个或多个相机的参数调整方式，以使最小缓存时间不小于最大传输时间，得到参数调整策略；次序确定模块，被配置成基于参数调整策略和n个相机分时传输图像数据时的传输次序，生成图像传输策略；时间同步模块，被配置成向n个相机发送时间同步指令，以指示n个相机执行时间同步操作。[0167]在其中一个实施方式中，参数调整模块被进一步配置成：基于预设的n个相机的第一优先级，将第一优先级最低的一个或多个相机的图像分辨率和/或帧率降低，得到第一优先级最低的一个或多个相机的参数调整方式，并将该一个或多个相机的第一优先级调整至最高；基于第一优先级最低的一个或多个相机的降低后的图像分辨率和/或帧率，更新最小缓存时间和最大传输时间；迭代执行降低第一优先级最低的相机的图像分辨率和/或帧率的操作、调整第一优先级的操作、更新最小缓存时间和最大传输时间的操作，直至最小缓存时间不小于最大传输时间；基于n个相机中的一个或多个相机的参数调整方式，确定参数调整策略。[0168]在其中一个实施方式中，策略生成单元1040还被配置成：当最小缓存时间不小于最大传输时间时，确定n个相机分时传输图像数据时的传输次序；基于n个相机分时传输图像数据时的传输次序，生成图像传输策略。[0169]在其中一个实施方式中，参数调整策略包括：采用每隔n帧抽取一帧图像的均匀抽帧方式降低相机的帧率，其中，n的取值为大于0的整数，且n的取值基于n个相机的第二优先级确定。[0170]在其中一个实施方式中，策略生成单元1040还被配置成通过如下方式确定n个相机分时传输图像时的传输次序：获取n个相机当前的存储空间余量；基于n个相机当前的存储空间余量，确定n个相机的第三优先级；基于第三优先级，确定n个相机的传输次序。[0171]在其中一个实施方式中，图像数据为脉冲序列信号，该装置还包括信号获取单元，被配置成：采集监测区域中各局部空间位置的时空信号，并对局部空间位置的时空信号按照时间进行累积，得到信号累积强度值；对信号累积强度值进行变换，在变换结果超过特定阈值时输出脉冲信号；将局部空间位置对应的脉冲信号按照时间先后排列成序列，得到表达局部空间位置信号及其变化过程的脉冲序列；将所有局部空间位置的脉冲序列或所有局部空间位置的脉冲序列组成的阵列确定为脉冲序列信号。[0172]图11为本公开的一种用于自动驾驶的装置的一个实施例的结构示意图，如图11所示，该装置包括：获取单元1110，被配置成利用上述任一实施例中的方法，获取车辆上预设的n个相机采集的图像数据；融合单元1120，被配置成将n个相机采集的图像数据融合，得到融合后的图像数据；感知单元1130，被配置成基于融合后的图像数据，确定车辆所处的环境信息和位姿信息；决策单元1140，被配置成基于车辆所处的环境信息和位姿信息，确定自动驾驶策略。[0173]下面参考图12来描述根据本公开实施例的电子设备。图12示出了根据本公开实施例的电子设备的框图。如图12所示，电子设备1200包括一个或多个处理器1210和存储器1220。[0174]处理器1210可以是中央处理单元（cpu）或者具有数据处理能力和/或指令执行能力的其他形式的处理单元，并且可以控制电子设备1200中的其他组件以执行期望的功能。[0175]存储器1220可以包括一个或多个计算机程序产品，所述计算机程序产品可以包括各种形式的计算机可读存储介质，例如易失性存储器和/或非易失性存储器。所述易失性存储器，例如，可以包括：随机存取存储器（ram）和/或高速缓冲存储器（cache）等。所述非易失性存储器，例如，可以包括：只读存储器（rom）、硬盘以及闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序指令，处理器可以运行所述程序指令，以实现上文所述的本公开的各个实施例的图像数据的传输处理方法以及/或者用于自动驾驶的方法以及/或者其他期望的功能。在所述计算机可读存储介质中还可以存储诸如输入信号、信号分量、噪声分量等各种内容。[0176]在一个示例中，电子设备1200还可以包括：输入装置1230以及输出装置1240等，这些组件通过总线系统和/或其他形式的连接机构（未示出）互连。此外，该输入设备1230还可以包括例如键盘、鼠标等等。该输出装置1240可以向外部输出各种信息。该输出设备1240可以包括例如显示器、扬声器、打印机、以及通信网络及其所连接的远程输出设备等等。[0177]当然，为了简化，图12中仅示出了该电子设备1200中与本公开有关的组件中的一些，省略了诸如总线、输入/输出接口等等的组件。除此之外，根据具体应用情况，电子设备1200还可以包括任何其他适当的组件。[0178]在本技术的另一个实施例中，电子设备1200可以包括的脉冲信号读出电路，和/或包括像素单元阵列电路，和/或具有上述的像素单元阵列电路的芯片。[0179]具体地说，所述设备至少包括如下之一者：相机、摄像头、音/视频播放器、导航设备、固定位置终端、娱乐设备、智能手机、通信设备、移动设备、交通工具或设施、工业设备、医疗设备、安防设备、飞行设备、家电设备。[0180]在本技术实施例中，相机包括但不限于脉冲相机、高速相机、工业检测相机等。摄像头包括但不限于：车载摄像头、手机摄像头、交通摄像头、安装在可飞行物体上的摄像头、医疗摄像头、安防摄像头或家电摄像头。[0181]以脉冲相机为例，对本技术实施例提供的设备进行详细说明。图13为本技术实施例提供的一种脉冲相机的结构示意图。如图13所示，该脉冲相机包括：透镜1301、脉冲信号电路1302、数据处理电路1303、非易失性存储器1304、电源电路1305、易失性存储器1306、控制电路1307和i/o接口1308。[0182]其中，透镜1301，用于接收来自被摄物体的入射光，即光信号。[0183]脉冲信号电路1302，用于将通过透镜1301接收的光信号转换为电信号，根据电信号生成脉冲信号。该脉冲信号电路1302例如包括上述的脉冲信号读出电路，和/或上述的像素单元阵列电路，和/或具有上述的像素单元阵列电路的芯片。[0184]数据处理电路1303，用于对脉冲信号读出过程进行控制，数据处理电路1303例如包括：运算处理单元（例如，cpu）和/或图像处理单元（gpu），例如，对脉冲信号读出电路的脉冲信号读出过程进行控制，控制其中的读出行选择器发送行读出信号，复位行选择器发送列复位信号等。[0185]1306为易失性存储器，例如随机存取存储器（ram），1304为非易失性存储器件，例如固态硬盘（solid state disk，ssd）、混合硬盘（hybrid hard disk，hhd）、安全数码（secure digital，sd）卡、mini sd卡等。[0186]在本发明一实施例中，该脉冲相机还进一步包括：显示单元，用于对脉冲信号/图像信息进行实时/回放显示。本发明实施例所述的脉冲相机还可以进一步包括至少如下之一者：有线/无线传输接口，例如wifi接口、蓝牙接口、usb接口、rj45接口，移动产业处理器接口（mipi）接口，低电压差分信号（lvds）接口及其他具有有线或无线传输功能的接口。[0187]本发明实施例提供的脉冲相机能够用于对可见光、红外光、紫外光、x射线等进行检测，并可应用于各种场景，常用的场景包括但不限于：可用作车载摄像头安装在各类交通工具或设施中，例如用于车路协同、智慧交通、自动驾驶的信息获取及控制。举例而言，安装在高铁等轨道交通工具中或轨道交通线上，作为高铁行车记录仪；还可以安装在自动驾驶车辆或安装有高级驾驶辅助系统（adas）的车辆中，例如进行车辆、行人、车道、驾驶员等信息的检测和报警。[0188]可用作交通摄像头安装在交通信号杆上，进行城市道路、高速公路上车辆和行人的拍摄、预警、及协同控制等。[0189]可用作工业检测相机，例如安装在高铁轨道交通线上用于高铁巡线，以及用于高铁安全的检测；还可以用于煤矿输送带断裂检测、变电站电弧检测、风力发电叶片的实时检测、高速轮机不停机检测等特定工业场景的检测、预警等。[0190]安装在可飞行物体上，例如，安装在飞机、卫星等物体上，用作物体在高速飞行、甚至高速旋转场景下的高清晰成像。[0191]工业（智能制造中的机器视觉等）、民用（司法取证、体育判罚等）和消费电子（相机、影视媒体等）。[0192]可用作医疗摄像头，在医疗、美容、保健等临床诊疗中进行高清晰的医疗成像。[0193]可用作运动相机或可穿戴式相机，例如，头戴式相机或嵌入在腕表中的相机，可进行各类体育竞技赛场、日常休闲运动等场景的拍摄。[0194]还可用作安防摄像头、手机摄像头或家电摄像头等。[0195]除了上述方法和设备以外，本公开的实施例还可以是计算机程序产品，其包括计算机程序指令，所述计算机程序指令在被处理器运行时使得所述处理器执行本说明书上述“示例性方法”部分中描述的根据本公开各种实施例的图像数据的传输处理方法或用于自动驾驶的方法中的步骤。[0196]所述计算机程序产品可以以一种或多种程序设计语言的任意组合来编写用于执行本公开实施例操作的程序代码，所述程序设计语言包括面向对象的程序设计语言，诸如java、c++等，还包括常规的过程式程序设计语言，诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。[0197]此外，本公开的实施例还可以是计算机可读存储介质，其上存储有计算机程序指令，所述计算机程序指令在被处理器运行时使得所述处理器执行本说明书上述“示例性方法”部分中描述的根据本公开各种实施例的图像数据的传输处理方法或用于自动驾驶的方法中的步骤。[0198]所述计算机可读存储介质可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以包括但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子（非穷举的列举）可以包括：具有一个或者多个导线的电连接、便携式盘、硬盘、随机存取存储器（ram）、只读存储器（rom）、可擦式可编程只读存储器（eprom或闪存）、光纤、便携式紧凑盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。[0199]以上结合具体实施例描述了本公开的基本原理，但是，需要指出的是，在本公开中提及的优点、优势、效果等仅是示例而非限制，不能认为这些优点、优势以及效果等是本公开的各个实施例必须具备的。另外，上述公开的具体细节仅是为了示例的作用和便于理解的作用，而非限制，上述细节并不限制本公开为必须采用上述具体的细节来实现。[0200]本说明书中各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似的部分相互参见即可。对于系统实施例而言，由于其与方法实施例基本对应，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。[0201]本公开中涉及的器件、装置、设备、系统的方框图仅作为例示性的例子并且不意图要求或暗示必须按照方框图示出的方式进行连接、布置、配置。如本领域技术人员将认识到的，可以按任意方式连接、布置、配置这些器件、装置、设备以及系统。诸如“包括”、“包含、“具有”等等的词语是开放性词汇，指“包括但不限于”，且可与其互换使用。这里所使用的词汇“或”和“和”指词汇“和/或”，且可与其互换使用，除非上下文明确指示不是如此。这里所使用的词汇“诸如”指词组“诸如但不限于”，且可与其互换使用。[0202]可能以许多方式来实现本公开的方法和装置。例如，可通过软件、硬件、固件或者软件、硬件、固件的任何组合来实现本公开的方法和装置。用于所述方法的步骤的上述顺序仅是为了进行说明，本公开的方法的步骤不限于以上具体描述的顺序，除非以其它方式特别说明。此外，在其中一个实施方式中，还可将本公开实施为记录在记录介质中的程序，这些程序包括用于实现根据本公开的方法的机器可读指令。因而，本公开还覆盖存储用于执行根据本公开的方法的程序的记录介质。[0203]还需要指出的是，在本公开的装置、设备和方法中，各部件或各步骤是可以分解和/或重新组合的。这些分解和/或重新组合应视为本公开的等效方案。[0204]提供所公开的方面的以上描述，以使本领域的任何技术人员能够做出或者使用本公开。对这些方面的各种修改等对于本领域技术人员而言，是非常显而易见的，并且在此定义的一般原理可以应用于其他方面，而不脱离本公开的范围。因此，本公开不意图被限制到在此示出的方面，而是按照与在此公开的原理和新颖的特征一致的最宽范围。[0205]为了例示和描述的目的已经给出了以上描述。此外，此描述不意图将本公开的实施例限制到在此公开的形式中。尽管以上已经讨论了多个示例方面以及实施例，但是本领域技术人员将认识到其某些变型、修改、改变、添加和子组合。









图片声明：本站部分配图来自人工智能系统AI生成,觅知网授权图片,PxHere摄影无版权图库。本站只作为美观性配图使用,无任何非法侵犯第三方意图,一切解释权归图片著作权方,本站不承担任何责任。如有恶意碰瓷者,必当奉陪到底严惩不贷!




内容声明：本文中引用的各种信息及资料（包括但不限于文字、数据、图表及超链接等）均来源于该信息及资料的相关主体（包括但不限于公司、媒体、协会等机构）的官方网站或公开发表的信息。部分内容参考包括:(百度百科,百度知道,头条百科,中国民法典,刑法,牛津词典,新华词典,汉语词典,国家院校,科普平台)等数据,内容仅供参考使用,不准确地方联系删除处理！本站为非盈利性质站点,发布内容不收取任何费用也不接任何广告!




免责声明：我们致力于保护作者版权，注重分享，被刊用文章因无法核实真实出处，未能及时与作者取得联系，或有版权异议的，请联系管理员，我们会立即处理，本文部分文字与图片资源来自于网络，部分文章是来自自研大数据AI进行生成,内容摘自(百度百科,百度知道,头条百科,中国民法典,刑法,牛津词典,新华词典,汉语词典,国家院校,科普平台)等数据,内容仅供学习参考,不准确地方联系删除处理!的,若有来源标注错误或侵犯了您的合法权益，请立即通知我们，情况属实，我们会第一时间予以删除，并同时向您表示歉意,谢谢!