处理数据的方法、装置、芯片和摄像头-复审决定


发明创造名称:处理数据的方法、装置、芯片和摄像头
外观设计名称:
决定号:190191
决定日:2019-09-08
委内编号:1F278805
优先权日:
申请(专利)号:201680003476.8
申请日:2016-10-13
复审请求人:深圳市大疆创新科技有限公司
无效请求人:
授权公告日:
审定公告日:
专利权人:
主审员:曹文才
合议组组长:吴恂恂
参审员:孙一凡
国际分类号:H04N5/232,H04N5/367
外观设计分类号:
法律依据:专利法第22条第3款
决定要点:如果一项权利要求与作为最接近现有技术的对比文件相比存在区别特征,但所述区别特征为本领域惯用手段,则该权利要求相对于所述对比文件和本领域惯用手段的结合不具有突出的实质性特点和显著的进步,因而不具备创造性。
全文:
本复审请求审查决定涉及申请号为201680003476.8,名称为“处理数据的方法、装置、芯片和摄像头”的发明专利申请(下称本申请)。申请人为深圳市大疆创新科技有限公司。本申请的申请日为2016年10月13日,进入中国国家阶段日为2017年05月08日,公开日为2017年08月01日。
经实质审查,国家知识产权局实质审查部门于2019年01月07日发出驳回决定,驳回了本申请,其理由是:权利要求1-53不符合专利法第22条第3款的规定。驳回决定所依据的文本为:2017年05月02日提交的原始国际申请文件的中文译文的说明书第0001-0203段(即第1-25页),说明书附图第1-8页,说明书摘要及摘要附图;2018年09月18日提交的权利要求第1-53项。驳回决定所针对的权利要求书内容如下:
“1. 一种处理数据的方法,其特征在于,包括:
获取图像传感器的合并属性信息,以及所述图像传感器输入的像素数据,所述合并属性信息包含与所述图像传感器的像素点一一对应的元素,且所述合并属性信息中的与所述图像传感器的至少一个像素点对应的元素包含所述至少一个像素点的N种属性信息,所述N种属性信息包括第一属性信息和第二属性信息,所述第一属性信息用于指示一个像素点是否为坏点,所述第二属性信息用于指示一个像素点是否为相位对焦点,N为大于或等于2的整数;
根据所述合并属性信息,对所述图像传感器输入的像素数据进行处理;
其中,所述获取图像传感器的合并属性信息,包括:
获取包含所述合并属性信息的压缩数据,所述压缩数据是基于游程编码的方式进行压缩后得到的数据;
以游程解码的方式对所述压缩数据进行解压,以恢复所述合并属性信息。
2. 如权利要求1所述的方法,其特征在于,所述以游程解码的方式对所述压缩数据进行解压,以恢复所述合并属性信息,包括:
以游程解码的方式对所述压缩数据进行解压,得到游程编码前的原始符号序列,所述原始符号序列中的每个原始符号包含所述合并属性信息中的K个元素,K为大于1的整数;
对所述原始符号序列中的每个原始符合所包含的所述K个元素进行拆分,以恢复所述合并属性信息。
3. 如权利要求2所述的方法,其特征在于,K大于或等于所述图像传感器在一个时钟周期内向图像处理芯片输入的像素数据所对应的像素点的个数。
4. 如权利要求1-3中任一项所述的方法,其特征在于,所述获取图像传感器的合并属性信息,以及所述图像传感器输入的像素数据,包括:
在第一时钟周期获取所述图像传感器输入的M个像素点的像素数据,其中,M为大于或等于1的整数;
在所述第一时钟周期之前或在所述第一时钟周期,获取所述合并属性信息中的与所述M个像素点对应的元素;
所述根据所述合并属性信息,对所述图像传感器输入的像素数据进行处 理,包括:
将所述M个像素点对应的元素与所述M个像素点的像素数据进行同步处理。
5. 如权利要求4所述的方法,其特征在于,所述将所述M个像素点对应的元素与所述M个像素点的像素数据进行同步处理,包括:
根据所述M个像素点中的第一像素点对应的元素,确定所述第一像素点的N种属性信息;
根据所述第一像素点的N种属性信息,处理所述第一像素点的像素数据。
6. 如权利要求5所述的方法,其特征在于,所述根据所述M个像素点中的第一像素点对应的元素,确定所述第一像素点的N种属性信息,包括:
从所述第一像素点对应的元素的N个字段中获取所述第一像素点的N种属性信息,其中,所述N个字段中的每个字段包括至少一个比特,所述N个字段分别用于记录所述第一像素点的N种属性信息。
7. 如权利要求5所述的方法,其特征在于,所述根据所述M个像素点中的第一像素点对应的元素,确定所述第一像素点的N种属性信息,包括:
根据所述第一像素点对应的元素的目标字段的取值,确定所述第一像素点的N种属性信息,其中,所述目标字段的不同取值对应所述N种属性信息的不同组合。
8. 如权利要求5-7中任一项所述的方法,其特征在于,所述根据所述第一像素点的N种属性信息,处理所述第一像素点的像素数据,包括:
在所述第一像素点的第一属性信息指示所述第一像素点为坏点,且所述第一像素点的第二属性信息指示所述第一像素点为相位对焦点的情况下,仅对所述第一像素点的像素数据进行坏点处理。
9. 如权利要求1-3中任一项所述的方法,其特征在于,所述合并属性信息为表格信息或数组信息。
10. 如权利要求1-3中任一项所述的方法,其特征在于,所述合并属性信息中的每个元素用于指示所述每个元素的对应像素点的N种属性信息。
11. 一种处理数据的方法,其特征在于,包括:
获取图像传感器的至少一个像素点的N种属性信息,所述N种属性信息包括第一属性信息和第二属性信息,所述第一属性信息用于指示一个像素点是否为坏点,所述第二属性信息用于指示一个像素点是否为相位对焦点,N 为大于或等于2的整数;
根据所述N种属性信息,生成所述图像传感器的合并属性信息,所述合并属性信息包含与所述图像传感器的像素点一一对应的元素,且所述合并属性信息中的与所述至少一个像素点对应的元素包含所述至少一个像素点的N种属性信息;
以游程编码的方式对所述合并属性信息进行压缩,得到压缩数据。
12. 如权利要求11所述的方法,其特征在于,所述以游程编码的方式对所述合并属性信息进行压缩,得到所述压缩数据,包括:
对所述合并属性信息进行分组,得到待编码的原始符号序列,所述原始符号序列中的每个原始符号包含所述合并属性信息中的K个元素,K为大于1的整数;
对所述原始符号序列进行游程编码,得到所述压缩数据。
13. 如权利要求12所述的方法,其特征在于,K大于或等于所述图像传感器在一个时钟周期内向图像处理芯片输入的像素数据所对应的像素点的个数。
14. 如权利要求11-13中任一项所述的方法,其特征在于,所述根据所述N种属性信息,生成所述图像传感器的合并属性信息,包括:
根据所述图像传感器的第一像素点的N种属性,确定所述合并属性信息中的与所述第一像素点对应的N个字段的取值,其中,所述N个字段中的每个字段包括至少一个比特,所述N个字段分别用于记录所述第一像素点的N种属性信息。
15. 如权利要求11-13中任一项所述的方法,其特征在于,所述根据所述N种属性信息,生成所述图像传感器的合并属性信息,包括:
根据所述图像传感器的第一像素点的N种属性,确定所述合并属性信息中的与所述第一像素点对应的元素的目标字段的取值,其中,所述目标字段具有多种取值,所述目标字段的不同取值对应所述N种属性信息的不同组合。
16. 如权利要求11-13中任一项所述的方法,其特征在于,所述方法还包括:
将包含所述合并属性信息的数据存入内存中,以便所述图像处理芯片从所述内存中获取所述合并属性信息,并基于所述合并属性信息处理所述图像传感器输入的像素数据。
17. 如权利要求11-13中任一项所述的方法,其特征在于,所述合并属性信息为表格信息或数组信息。
18. 一种处理数据的装置,其特征在于,包括:
获取模块,用于获取图像传感器的合并属性信息,以及所述图像传感器输入的像素数据,所述合并属性信息包含与所述图像传感器的像素点一一对应的元素,且所述合并属性信息中的与所述图像传感器的至少一个像素点对应的元素包含所述至少一个像素点的N种属性信息,所述N种属性信息包括第一属性信息和第二属性信息,所述第一属性信息用于指示一个像素点是否为坏点,所述第二属性信息用于指示一个像素点是否为相位对焦点,N为大于或等于2的整数;
处理模块,用于根据所述合并属性信息,对所述图像传感器输入的像素数据进行处理;
其中,所述获取模块具体用于获取包含所述合并属性信息的压缩数据,其中,所述压缩数据是基于游程编码的方式进行压缩后得到的数据;
以游程解码的方式对所述压缩数据进行解压,以恢复所述合并属性信息。
19. 如权利要求18所述的装置,其特征在于,所述获取模块具体用于以游程解码的方式对所述压缩数据进行解压,得到游程编码前的原始符号序列,所述原始符号序列中的每个原始符号包含所述合并属性信息中的K个元素,K为大于1的整数;对所述原始符号序列中的每个原始符合所包含的所述K个元素进行拆分,以恢复所述合并属性信息。
20. 如权利要求19所述的装置,其特征在于,K大于或等于所述图像传感器在一个时钟周期内向图像处理芯片输入的像素数据所对应的像素点的个数。
21. 如权利要求18-20中任一项所述的装置,其特征在于,所述获取模块具体用于在第一时钟周期获取所述图像传感器输入的M个像素点的像素数据,其中,M为大于或等于1的整数;在所述第一时钟周期之前或在所述第一时钟周期,获取所述合并属性信息中的与所述M个像素点对应的元素;所述处理模块具体用于将所述M个像素点对应的元素与所述M个像素点的像素数据进行同步处理。
22. 如权利要求21所述的装置,其特征在于,所述处理模块具体用于根据所述M个像素点中的第一像素点对应的元素,确定所述第一像素点的N种 属性信息;根据所述第一像素点的N种属性信息,处理所述第一像素点的像素数据。
23. 如权利要求22所述的装置,其特征在于,所述处理模块具体用于从所述第一像素点对应的元素的N个字段中获取所述第一像素点的N种属性信息,其中,所述N个字段中的每个字段包括至少一个比特,所述N个字段分别用于记录所述第一像素点的N种属性信息。
24. 如权利要求22所述的装置,其特征在于,所述处理模块具体用于根据所述第一像素点对应的元素的目标字段的取值,确定所述第一像素点的N种属性信息,其中,所述目标字段的不同取值对应所述N种属性信息的不同组合。
25. 如权利要求22-24中任一项所述的装置,其特征在于,所述处理模块具体用于在所述第一像素点的第一属性信息指示所述第一像素点为坏点,且所述第一像素点的第二属性信息指示所述第一像素点为相位对焦点的情况下,仅对所述第一像素点的像素数据进行坏点处理。
26. 如权利要求18-20中任一项所述的装置,其特征在于,所述合并属性信息为表格信息或数组信息。
27. 如权利要求18-20中任一项所述的装置,其特征在于,所述合并属性信息中的每个元素用于指示所述每个元素的对应像素点的N种属性信息。
28. 一种处理数据的装置,其特征在于,包括:
获取模块,用于获取图像传感器的至少一个像素点的N种属性信息,所述N种属性信息包括第一属性信息和第二属性信息,所述第一属性信息用于指示一个像素点是否为坏点,所述第二属性信息用于指示一个像素点是否为相位对焦点,N为大于或等于2的整数;
第一生成模块,用于根据所述N种属性信息,生成所述图像传感器的合并属性信息,所述合并属性信息包含与所述图像传感器的像素点一一对应的元素,且所述合并属性信息中的与所述至少一个像素点对应的元素包含所述至少一个像素点的N种属性信息;
第二生成模块,用于以游程编码的方式对所述合并属性信息进行压缩,得到压缩数据。
29. 如权利要求28所述的装置,其特征在于,所述第二生成模块具体用于对所述合并属性信息进行分组,得到待编码的原始符号序列,所述原始符 号序列中的每个原始符号包含所述合并属性信息中的K个元素,K为大于1的整数;对所述原始符号序列进行游程编码,得到所述压缩数据。
30. 如权利要求29所述的装置,其特征在于,K大于或等于所述图像传感器在一个时钟周期内向图像处理芯片输入的像素数据所对应的像素点的个数。
31. 如权利要求28-30中任一项所述的装置,其特征在于,所述第一生成模块具体用于根据所述图像传感器的第一像素点的N种属性,确定所述合并属性信息中的与所述第一像素点对应的N个字段的取值,其中,所述N个字段中的每个字段包括至少一个比特,所述N个字段分别用于记录所述第一像素点的N种属性信息。
32. 如权利要求28-30中任一项所述的装置,其特征在于,所述第一生成模块具体用于根据所述图像传感器的第一像素点的N种属性,确定所述合并属性信息中的与所述第一像素点对应的元素的目标字段的取值,其中,所述目标字段具有多种取值,所述目标字段的不同取值对应所述N种属性信息的不同组合。
33. 如权利要求28-30中任一项所述的装置,其特征在于,所述装置还包括:
存取单元,用于将包含所述合并属性信息的数据存入内存中,以便所述图像处理芯片从所述内存中获取所述合并属性信息,并基于所述合并属性信息处理所述图像传感器输入的像素数据。
34. 如权利要求28-30中任一项所述的装置,其特征在于,所述合并属性信息为表格信息或数组信息。
35. 一种芯片,其特征在于,包括:
存储器,用于存储程序;
处理器,用于执行所述存储器存储的程序,当所述程序被执行时,所述处理器获取图像传感器的合并属性信息,以及所述图像传感器输入的像素数据,所述合并属性信息包含与所述图像传感器的像素点一一对应的元素,且所述合并属性信息中的与所述图像传感器的至少一个像素点对应的元素包含所述至少一个像素点的N种属性信息,所述N种属性信息包括第一属性信息和第二属性信息,所述第一属性信息用于指示一个像素点是否为坏点,所述第二属性信息用于指示一个像素点是否为相位对焦点,N为大于或等于2的 整数;根据所述合并属性信息,对所述图像传感器输入的像素数据进行处理;
其中,所述处理器具体用于获取包含所述合并属性信息的压缩数据,所述压缩数据是基于游程编码的方式进行压缩后得到的数据;以游程解码的方式对所述压缩数据进行解压,以恢复所述合并属性信息。
36. 如权利要求35所述的芯片,其特征在于,所述处理器具体用于以游程解码的方式对所述压缩数据进行解压,得到游程编码前的原始符号序列,所述原始符号序列中的每个原始符号包含所述合并属性信息中的K个元素,K为大于1的整数;对所述原始符号序列中的每个原始符合所包含的所述K个元素进行拆分,以恢复所述合并属性信息。
37. 如权利要求36所述的芯片,其特征在于,K大于或等于所述图像传感器在一个时钟周期内向所述芯片输入的像素数据所对应的像素点的个数。
38. 如权利要求35-37中任一项所述的芯片,其特征在于,所述处理器具体用于在第一时钟周期获取所述图像传感器输入的M个像素点的像素数据,其中,M为大于或等于1的整数;在所述第一时钟周期之前或在所述第一时钟周期,获取所述合并属性信息中的与所述M个像素点对应的元素;将所述M个像素点对应的元素与所述M个像素点的像素数据进行同步处理。
39. 如权利要求38所述的芯片,其特征在于,所述处理器具体用于根据所述M个像素点中的第一像素点对应的元素,确定所述第一像素点的N种属性信息;根据所述第一像素点的N种属性信息,处理所述第一像素点的像素数据。
40. 如权利要求39所述的芯片,其特征在于,所述处理器具体用于从所述第一像素点对应的元素的N个字段中获取所述第一像素点的N种属性信息,其中,所述N个字段中的每个字段包括至少一个比特,所述N个字段分别用于记录所述第一像素点的N种属性信息。
41. 如权利要求39所述的芯片,其特征在于,所述处理器具体用于根据所述第一像素点对应的元素的目标字段的取值,确定所述第一像素点的N种属性信息,其中,所述目标字段的不同取值对应所述N种属性信息的不同组合。
42. 如权利要求39-41中任一项所述的芯片,其特征在于,所述处理器具体用于在所述第一像素点的第一属性信息指示所述第一像素点为坏点,且所述第一像素点的第二属性信息指示所述第一像素点为相位对焦点的情况 下,仅对所述第一像素点的像素数据进行坏点处理。
43. 如权利要求35-37中任一项所述的芯片,其特征在于,所述合并属性信息为表格信息或数组信息。
44. 如权利要求35-37中任一项所述的芯片,其特征在于,所述合并属性信息中的每个元素用于指示所述每个元素的对应像素点的N种属性信息。
45. 一种芯片,其特征在于,包括:
存储器,用于存储程序;
处理器,用于执行所述存储器存储的程序,当所述程序被执行时,所述处理器获取图像传感器的至少一个像素点的N种属性信息,所述N种属性信息包括第一属性信息和第二属性信息,所述第一属性信息用于指示一个像素点是否为坏点,所述第二属性信息用于指示一个像素点是否为相位对焦点,N为大于或等于2的整数;根据所述N种属性信息,生成所述图像传感器的合并属性信息,所述合并属性信息包含与所述图像传感器的像素点一一对应的元素,且所述合并属性信息中的与所述至少一个像素点对应的元素包含所述至少一个像素点的N种属性信息;以游程编码的方式对所述合并属性信息进行压缩,得到压缩数据。
46. 如权利要求45所述的芯片,其特征在于,所述处理器具体用于对所述合并属性信息进行分组,得到待编码的原始符号序列,所述原始符号序列中的每个原始符号包含所述合并属性信息中的K个元素,K为大于1的整数;对所述原始符号序列进行游程编码,得到所述压缩数据。
47. 如权利要求46所述的芯片,其特征在于,K大于或等于所述图像传感器在一个时钟周期内向图像处理芯片输入的像素数据所对应的像素点的个数。
48. 如权利要求45-47中任一项所述的芯片,其特征在于,所述处理器具体用于根据所述图像传感器的第一像素点的N种属性,确定所述合并属性信息中的与所述第一像素点对应的N个字段的取值,其中,所述N个字段中的每个字段包括至少一个比特,所述N个字段分别用于记录所述第一像素点的N种属性信息。
49. 如权利要求45-47中任一项所述的芯片,其特征在于,所述处理器具体用于根据所述图像传感器的第一像素点的N种属性,确定所述合并属性信息中的与所述第一像素点对应的元素的目标字段的取值,其中,所述目标 字段具有多种取值,所述目标字段的不同取值对应所述N种属性信息的不同组合。
50. 如权利要求45-47中任一项所述的芯片,其特征在于,所述处理器还用于将包含所述合并属性信息的数据存入内存中,以便所述图像处理芯片从所述内存中获取所述合并属性信息,并基于所述合并属性信息处理所述图像传感器输入的像素数据。
51. 如权利要求45-47中任一项所述的芯片,其特征在于,所述合并属性信息为表格信息或数组信息。
52. 一种摄像头,其特征在于,所述摄像头包括镜头、图像传感器以及如权利要求35-44中任一项所述的芯片。
53. 如权利要求52所述的摄像头,其特征在于,所述摄像头还包括如权利要求45-51中任一项所述的芯片。”
驳回决定中引用了一篇对比文件,即:
对比文件1:US8675101B1,公开日为2014年03月18日。
驳回决定主要指出:权利要求1-53相对于对比文件1和本领域惯用手段的结合不具有创造性。
申请人(下称复审请求人)对上述驳回决定不服,于2019年04月10日向国家知识产权局提出了复审请求,未修改权利要求书。复审请求人认为:(1)对比文件1是对“像素的校正信息”进行处理,像素的校正信息本身并没有稀疏性,本申请希望处理的是具有稀疏性的像素属性信息,如果将对比文件1的处理对象替换成本申请的处理对象,将导致对比文件1无法实现其原本要实现的功能。(2)坏点信息和相位对焦点信息均具有稀疏性,二者合并在一起之后得到的合并属性信息仍然保留稀疏性,合并属性信息的类型和压缩方式的选取之间是紧密相互关联的,共同达到高压缩比的效果,对于逻辑上紧密关联的多个区别特征应当整体考虑,不应强行拆分。
经形式审查合格,国家知识产权局于2019年04月22日依法受理了该复审请求,并将其转送至实质审查部门进行前置审查。
实质审查部门在前置审查意见书中坚持驳回决定。
随后,国家知识产权局成立合议组对本案进行审理。
合议组于2019年07月30 日向复审请求人发出复审通知书,该复审通知书所针对的审查文本与驳回针对的审查文本相同,所引用的对比文件与驳回决定引用的对比文件相同,即对比文件1。复审通知书中指出:权利要求1-53相对于对比文件1和本领域惯用手段的结合不具备专利法第22条第3款规定的创造性。同时,对于复审请求人的意见也给予了针对性回复。
复审请求人于2019年08月21日提交了意见陈述书,但未修改申请文件。复审请求人认为:本申请的多个区别特征之间紧密关联、相互依存,产生了关联的技术效果(即超高的压缩比)。修改后的独立权利要求不是对任意属性信息的处理,而是对具有稀疏性的属性信息的处理,对比文件1的核心方案提供一种更好的处理噪音信息的方式,而这种信息是与像素的位置相关联的,因此是不具备稀疏性的,而当前的独立权利要求是对具有稀疏性的属性信息的处理,因而对比文件1不适合用于评价修改后的独立权利要求,本申请具备创造性。
在上述程序的基础上,合议组认为本案事实已经清楚,可以作出审查决定。
二、决定的理由
1、审查文本的认定
复审请求人在复审阶段未对申请文件进行修改。因此,本复审请求审查决定所针对的审查文本与驳回决定和复审通知书针对的审查文本相同,为:2017年05月02日提交的原始国际申请文件的中文译文的说明书第1-25页,说明书附图第1-8页,说明书摘要及摘要附图;2018年09月18日提交的权利要求第1-53项。
2、具体理由的阐述
专利法第22条第3款规定:创造性,是指与现有技术相比,该发明具有突出的实质性特点和显著的进步,该实用新型具有实质性特点和进步。
本复审请求审查决定所引用的对比文件与驳回决定和复审通知书所引用的对比文件相同,即:
对比文件1:US8675101B1,公开日为2014年03月18日。
(1)权利要求1请求保护一种处理数据的方法。对比文件1公开了一种像素校正方法和装置,其中(参见说明书第2栏第66行-第6栏第10行,附图2-4)具体公开了:装置100可以为一数字摄像机,包括透镜102、快门103、电路104、电路106、电路108、电路110、电路112;电路104为一包括像素阵列的光电传感器;电路110为一存储器电路,其存储了电路104中像素的一个映射表,映射表中的每个索引包括一多位索引值,其与像素为一一对应关系,索引值以INDEX信号形式呈现给电路112;电路112为解压缩电路,其对通过信号INDEX接收的压缩校正模型进行解压缩;如图4,从电路110存储的数据解压得到的表格140通常包括用INDEX信号中的索引值寻址的增益值和偏移值阵列,表格140具有2B个条目来存储模型的多个增益/偏移对;电路106为校正器电路,其通过使用从112接收的信号模型信息对从传感器104接收的数据(即从图像传感器输入的像素数据)进行调整,所述调整用于校正固定像素噪音和/或坏点像素(相当于根据合并属性信息,对图像传感器输入的像素数据进行处理);对每个像素值同时应用增益和偏移会改进现有像素校正的性能。本发明的第二方面使用压缩来减少固定模式噪音模型的大小,通过压缩能够限制增益和偏移值组合的可能数量;在第二压缩实施例中,固定模式噪音模型可以与每像素坏点信息同时压缩,例如类似于140的表格可同时存储压缩的固定模式噪音信息和坏点像素信息(相当于图像传感器的合并属性信息,所述合并属性信息包含与图像传感器的像素点一一对应的元素,所述元素包含至少一个像素点的N种属性信息,所述N种属性信息包含第一属性信息和第二属性信息,所述第一属性信息用于指示一个像素点是否为坏点);使用压缩/解压缩能够减少消耗的存储空间和用于从电路110加载模型信息的带宽,还可避免由于校正产生的延迟。可见,对比文件1公开了将图像传感器像素的多个属性信息进行合并压缩存储并根据合并属性信息对从图像传感器输入的像素数据进行处理的方案。
权利要求1与对比文件1的区别特征为:(1)合并属性信息包括的第二属性信息用于指示一个像素点是否为相位对焦点;(2)所述压缩数据是基于游程编码的方式进行压缩后得到的数据,并以游程解码的方式对所述压缩数据进行解压,以恢复所述合并属性信息。基于上述区别,权利要求1实际要解决的技术问题是:采用图像传感器的何种属性信息对图像数据进行处理,以及采用何种方式对数据进行压缩和解压。
对于上述区别(1),对比文件1已经公开了可基于对图像传感器的多种属性信息同时进行压缩存储来对像素数据进行处理,以此来提高处理数据的性能,避免延迟。而相位对焦点是图像传感器常见的属性信息,因此,本领域技术人员自然可以想到将相位对焦点与像素坏点信息同时进行压缩存储,进而对像素数据进行处理。
对于上述区别(2),对比文件1已经公开压缩通常会限制增益值和偏移值可能组合的数量,通过压缩/解压缩技术能够减少存储空间和存储器带宽。同时本领域技术人员可以灵活选用现有的方式来压缩/解压缩数据,游程编码是一种常见的压缩工具,根据数据性质选用游程编码/解码的方式来压缩/解压缩数据对于本领域技术人员来说是惯用手段。
因此,在对比文件1的基础上结合本领域惯用手段得到权利要求1的技术方案对于本领域技术人员来说是显而易见的,权利要求1不具有突出的实质性特点和显著的进步,因而不具有专利法第22条第3款规定的创造性。
(2)权利要求2引用权利要求1,权利要求3引用权利要求2。为了提高编码效率,以游程编码的方式通过分组对合并属性信息进行压缩/解压缩属于本领域惯用手段,同时为了与像素数据进行同步处理,本领域技术人员容易想到使得每组中的元素数大于等于图像传感器在一个时钟周期内向图像处理芯片输入的像素数据所对应的像素点个数,即从属权利要求2和3的附加技术特征属于本领域惯用手段,在其引用的权利要求不具备创造性时,权利要求2和3也不具备专利法第22条第3款规定的创造性。
(3)权利要求4引用权利要求1-3。为了将合并属性信息与像素数据进行同步处理,本领域技术人员容易想到在获取像素数据的时钟周期之前获取合并属性信息,即权利要求4的附加技术特征是本领域按照系统时钟获取数据的惯用手段。因此,在其引用的权利要求不具备创造性时,权利要求4也不具备专利法第22条第3款规定的创造性。
(4)权利要求5引用权利要求4,权利要求6和7分别引用权利要求5。对比文件1(参见说明书第2栏第66行-第6栏第10行,附图2-4)已经公开了:电路110存储了电路104中像素的一个映射表,映射表中的每个索引包括一多位索引值(像素点对应的元素的目标字段),其与像素为一一对应关系,索引值以INDEX信号形式呈现给电路112;电路112为解压缩电路,其对通过信号INDEX接收的压缩校正模型进行解压缩;如图4,从电路110存储的数据解压得到的表格140通常包括用INDEX信号中的索引值寻址的增益值和偏移值阵列,表格140具有2B个条目来存储模型的多个增益/偏移对;所述索引值可由较小的多比特值表示(相当于从所述第一像素点对应的元素的N个字段中获取所述第一像素点的N种属性信息,其中,所述N个字段中的每个字段包括至少一个比特,所述N个字段分别用于记录所述第一像素点的N种属性信息;以及根据像素点对应的元素的目标字段的取值,确定像素点的N种属性信息,其中目标字段的不同取值对应所述N种属性信息的不同组合)。可见,从属权利要求5-7的附加技术特征已经被对比文件1公开,在其引用的权利要求不具备创造性时,权利要求5-7也不具备专利法第22条第3款规定的创造性。
(5)权利要求8引用权利要求5-7。其附加特征属于本领域按照属性进行像素处理的惯用手段。因此,当其引用的权利要求不具备创造性时,该权利要求也不具备专利法第22条第3款规定的创造性。
(6)权利要求9和10分别引用权利要求1-3。其附加技术特征已经被对比文件1(参见说明书第2栏第66行-第6栏第10行,附图2-4)公开:固定模式噪音模型与像素坏点信息可以采用如图4所示表格的形式压缩存储;电路110为一存储器电路,其存储了电路104中像素的一个映射表,映射表中的每个索引包括一多位索引值,其与像素为一一对应关系,索引值以INDEX信号形式呈现给电路112;电路112为解压缩电路,其对通过信号INDEX接收的压缩校正模型进行解压缩;如图4,从电路110存储的数据解压得到的表格140通常包括用INDEX信号中的索引值寻址的增益值和偏移值阵列(相当于所述合并属性信息中的每个元素用于指示所述每个元素的对应像素点的N种属性信息)。因此,当其引用的权利要求不具备创造性时,权利要求9和10也不具备专利法第22条第3款规定的创造性。
(7)权利要求11请求保护一种处理数据的方法。对比文件1公开了一种像素校正方法和装置,其中(参见说明书第2栏第66行-第6栏第10行,附图2-4)具体公开了:装置100可以为一数字摄像机,包括透镜102、快门103、电路104、电路106、电路108、电路110、电路112,电路104为一包括像素阵列的光电传感器;电路110为一存储器电路,其存储了电路104中像素的一个映射表,映射表中的每个索引包括一多位索引值,其与像素为一一对应关系,索引值以INDEX信号形式呈现给电路112;电路112为解压缩电路,其对通过信号INDEX接收的压缩校正模型进行解压缩;如图4,从电路110存储的数据解压得到的表格140通常包括用INDEX信号中的索引值寻址的增益值和偏移值阵列,表格140具有2B个条目来存储模型的多个增益/偏移对;电路106为校正器电路,其通过使用从112接收的信号模型信息对从传感器104接收的数据进行调整,所述调整用于校正固定像素噪音和/或坏点像素;对每个像素值同时应用增益和偏移会改进现有像素校正的性能。本发明的第二方面使用压缩来减少固定模式噪音模型的大小,通过压缩能够限制增益和偏移值组合的可能数量;在第二压缩实施例中,固定模式噪音模型可以与每像素坏点信息同时压缩,例如类似于140的表格可同时存储压缩的固定模式噪音信息和坏点像素信息(相当于获取图像传感器的至少一个像素点的N种属性信息,所述N种属性信息包含第一属性信息和第二属性信息,所述第一属性信息用于指示一个像素点是否为坏点;以及根据所述N种属性信息,生成所述图像传感器的合并属性信息,所述合并属性信息包含与图像传感器的像素点一一对应的元素,且所述元素包含至少一个像素点的N种属性信息);使用压缩/解压缩能够减少消耗的存储空间和用于从电路110加载模型信息的带宽,还可避免由于校正产生的延迟。可见,对比文件1公开了将图像传感器像素的多个属性信息进行合并压缩存储的方案。
权利要求11与对比文件1的区别特征为:(1)第二属性信息用于指示一个像素点是否为相位对焦点;(2)以游程编码的方式对所述合并属性信息进行压缩,得到压缩数据。基于上述区别,权利要求11实际要解决的技术问题是:采用图像传感器的何种属性信息对图像数据进行处理,以及采用何种方式对数据进行压缩。
对于上述区别(1),对比文件1已经公开了可基于对图像传感器的多种属性信息同时进行压缩存储来对像素数据进行处理,以此来提高处理数据的性能,避免延迟。而相位对焦点是图像传感器常见的属性信息,因此,本领域技术人员自然可以想到将相位对焦点与像素坏点信息同时进行压缩存储,进而对像素数据进行处理。
对于上述区别(2),对比文件1已经公开压缩通常会限制增益值和偏移值可能组合的数量,通过压缩技术能够减少存储空间和存储器带宽。同时本领域技术人员可以灵活选用现有的方式来压缩数据,游程编码是一种常见的压缩工具,根据数据性质选用游程编码的方式来压缩数据对于本领域技术人员来说是惯用手段。
因此,在对比文件1的基础上结合本领域惯用手段得到权利要求11的技术方案对于本领域技术人员来说是显而易见的,权利要求11不具有突出的实质性特点和显著的进步,因而不具有专利法第22条第3款规定的创造性。
(8)权利要求12引用权利要求11,权利要求13引用权利要求12。为了提高编码效率,以游程编码的方式通过分组对合并属性信息进行压缩属于本领域惯用手段,同时为了与像素数据进行同步处理,本领域技术人员容易想到使得每组中的元素数大于等于图像传感器在一个时钟周期内向图像处理芯片输入的像素数据所对应的像素点个数,即从属权利要求12和13的附加技术特征属于本领域惯用手段,在其引用的权利要求不具备创造性时,权利要求12和13也不具备专利法第22条第3款规定的创造性。
(9)权利要求14和15分别引用权利要求11-13,其附加特征是和权利要求6和7所述的读取属性信息方式对应的生成属性信息的方式,参见对权利要求6和7的评述,由于对比文件1已经公开了权利要求6和7的附加技术特征,对比文件1也相当于公开了生成这种属性信息的方式,即公开了权利要求14和15的附加技术特征。因此,当其引用的权利要求不具备创造性时,权利要求14和15也不具备专利法第22条第3款规定的创造性。
(10)权利要求16和17分别引用权利要求11-13。对比文件1(参见说明书第2栏第66行-第6栏第10行,附图2-4)同时公开了:电路110为一存储器电路,其存储了电路104中像素的一个映射表,映射表中的每个索引包括一多位索引值,其与像素为一一对应关系,索引值以INDEX信号形式呈现给电路112;电路112为解压缩电路,其对通过信号INDEX接收的压缩校正模型进行解压缩,如图4,从电路110存储的数据解压得到的表格140通常包括用INDEX信号中的索引值寻址的增益值和偏移值阵列;电路106为校正器电路,其通过使用从112接收的信号模型信息对从传感器104接收的数据进行调整,所述调整用于校正固定像素噪音和/或坏点像素。可见,从属权利要求16和17的附加技术特征已经被对比文件1公开了,在其引用的权利要求不具备创造性时,权利要求16和17也不具备专利法第22条第3款规定的创造性。
(11)权利要求18-27、28-34请求保护的分别是与权利要求1-10、11-17所述方法对应的装置,由于采用模块来执行所述方法步骤属于本领域惯用手段,因此与对权利要求1-10、11-17的评述相同的理由,权利要求18-27、28-34也不具备专利法第22条第3款规定的创造性。
(12)权利要求35-44、45-51请求保护的分别是与权利要求1-10、11-17所述方法对应的芯片,包括用于存储程序的存储器和用于执行程序的处理器,由于制造包括存储器和处理器的芯片属于本领域惯用手段,因此与对权利要求1-10、11-17的评述类似的理由,权利要求35-44、45-51也不具备专利法第22条第3款规定的创造性。
(13)权利要求52请求保护一种包括镜头、图像传感器和如权利要求35-44中任一项所述芯片的摄像头;权利要求53引用权利要求52,其还包括如权利要求45-51中任一项所述的芯片。对比文件1已经公开了摄像机包括镜头、图像传感器,而将芯片应用于摄像头属于本领域惯用手段。因此,基于对权利要求35-51的评述相同的理由,权利要求52、53也不具备专利法第22条第3款规定的创造性。
3、对复审请求人相关意见的回复
对于复审请求人在答复复审通知书时提交的陈述意见,合议组认为:(1)如本申请背景技术中所述,本申请所要解决的技术问题是,现有技术中,图像传感器的多种属性信息是相互分离的,多种属性信息与像素数据的同步处理过程也是分开进行的,因此,图像传感器每输入一次像素数据,仅能与一种属性信息进行同步处理,导致系统的数据处理效率低。本申请利用合并属性信息,图像处理芯片能够一次性完成至少一个像素点的像素数据和该至少一个像素点的N种属性信息的同步处理。而对于这样的技术问题和解决方案,对比文件1也公开了通过将图像传感器的多种属性信息合并存储来对像素数据进行处理,同样能够提高数据处理效率。另外,不可否认的,相位对焦点是像素的常见属性信息,在对比文件1的基础上,为了提高数据处理效率,本领域技术人员自然能够想到将常见的相位对焦点信息与像素的坏点信息等进行合并存储来处理像素数据。再者,对比文件1已经公开了对像素数据的调整处理通常是用于校正固定像素噪音和/或坏点像素,即可以对固定像素噪音或坏点像素进行单独校正,也可以进行合并校正,那么在此基础上,根据需求不同,本领域技术人员可以将图像传感器的不同属性信息进行合并存储,例如将像素的坏点信息与相位对焦点信息进行合并存储同样可以实现对像素进行校正的目的。(2)对权利要求1的评述并非是将区别特征碎片化。复审请求人指出,本申请说明书第0065段记载了“……因此,本发明实施例在图像传感器的合并属性信息的基础上,进一步以游程编码的方式对合并属性信息进行压缩,并将压缩后的数据存入内存中。……,这样可以很大程度上降低图像处理芯片读取图像传感器的合成属性信息时所需的带宽”。可见,本申请是在对图像传感器的属性信息进行合并存储的基础上,进一步发现图像传感器的属性信息中具有大量的0元素,采用游程编码的方式对这种类型的信息进行压缩将会获得较高的压缩率,即采用游程编码的方式可进一步取得压缩的效果。而如上所述,并且复审请求人也认可在对比文件1的基础上可以得到将图像传感器的多种属性信息合并存储来对像素数据进行处理的方案,同时对比文件1还公开了通过压缩技术能够减少数据大小并降低对存储器的带宽要求;那么本领域技术人员根据数据性质不同可以灵活选用已知的数据压缩方式,而游程编/解码是一种常见的压缩/解压缩工具,在此情况下,本领域技术人员容易想到可以选用游程编/解码的方式对具有稀疏性的数据进行压缩/解压缩,从而进一步提高数据处理的效率。
综上,对于复审请求人的意见,合议组不予支持,并作出如下决定。
三、决定
维持国家知识产权局于2019年01月07 日对本申请作出的驳回决定。
如对本复审请求审查决定不服,根据专利法第41条第2款的规定,复审请求人自收到本决定之日起三个月内向北京知识产权法院起诉。


郑重声明:本文版权归原作者所有,转载文章仅为传播更多信息之目的,如作者信息标记有误,请第一时间联系我们修改或删除,多谢。

留言与评论(共有 0 条评论)
   
验证码: