CN105893472A - 信息处理方法及电子设备 - Google Patents
信息处理方法及电子设备 Download PDFInfo
- Publication number
- CN105893472A CN105893472A CN201610184572.9A CN201610184572A CN105893472A CN 105893472 A CN105893472 A CN 105893472A CN 201610184572 A CN201610184572 A CN 201610184572A CN 105893472 A CN105893472 A CN 105893472A
- Authority
- CN
- China
- Prior art keywords
- information
- target area
- electronic device
- user
- electronic equipment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 23
- 238000003672 processing method Methods 0.000 title claims abstract description 23
- 238000004891 communication Methods 0.000 claims description 19
- 239000000284 extract Substances 0.000 claims description 15
- 230000004424 eye movement Effects 0.000 claims description 8
- 238000000034 method Methods 0.000 abstract description 10
- 238000010586 diagram Methods 0.000 description 9
- 238000002372 labelling Methods 0.000 description 9
- 230000000694 effects Effects 0.000 description 6
- 239000004984 smart glass Substances 0.000 description 5
- 230000006870 function Effects 0.000 description 3
- 230000010267 cellular communication Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/951—Indexing; Web crawling techniques
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种信息处理方法及电子设备;方法包括:第一电子设备确定在对象中的目标区域;对所述目标区域进行识别,从所述目标区域提取出第一信息;获取所述第一电子设备用户针对所述目标区域包括的信息所标注的第二信息,基于所述第二信息与所述第一信息形成关联关系;基于所述关联关系以及所述第二信息,响应针对所述对象中的信息的查询。实施本发明,能够以高效的方式支持用户对任意类型书籍中的内容添加标注信息,并支持对标注信息的快速查找。
Description
技术领域
本发明涉及数字阅读技术,尤其涉及一种信息处理方法及电子设备。
背景技术
用户在阅读书籍(电子书或纸质书)的过程中,经常需要在书籍对部分内容进行标注(对该部分的内容添加批注等信息),或者摘抄书籍中的部分内容并与用户针对部分内容批注的信息共同存储以便于后续的查阅。
对于电子书来说,往往只有专门的电子阅读设备支持对电子书中的内容进行标注,并且部分电子书因格式的限制不支持编辑操作,这就导致用户不能对电子书中的任意部分进行标注,而是需要人工摘抄相关内容(如用笔抄写或在电子设备手动输入相关的内容)并进行标注,操作费时,并且在一些情况下难以实现(如用户需要标注的信息为相关的网页地址或添加指向网络中内容如多媒体的超链接),后续查看标注的信息也相当不便。
对于纸质书来说,需要部分内容进行标注时,需要采用人工的方式在内容相应的位置添加标注,操作费时,同样也存在并且在一些情况下难以实现(如用户需要标注相关的网页地址或添加指向任意内容如多媒体的超链接)且后续查找不便的问题。
综上所述,采用高效的方式支持用户针对任意类型书籍中的内容标注信息,并支持对标注信息的快速查找,相关技术尚无有效解决方案。
发明内容
本发明实施例提供一种信息处理方法及电子设备,能够以高效的方式支持用户对任意类型书籍中的内容添加标注信息,并支持对标注信息的快速查找。
本发明实施例的技术方案是这样实现的:
第一方面,本发明实施例提供一种信息处理方法,所述信息处理方法包括:
第一电子设备确定在对象中的目标区域;
对所述目标区域进行识别,从所述目标区域提取出第一信息;
获取所述第一电子设备用户针对所述目标区域包括的信息所标注的第二信息,基于所述第二信息与所述第一信息形成关联关系;
基于所述关联关系以及所述第二信息,响应针对所述对象中的信息的查询。
优选地,所述第一电子设备确定在对象中的目标区域,包括:
解析所采集的所述用户的眼部动作数据,基于所述眼部动作数据分析出所述用户的视线在所述对象上的落点,确定所述落点所对应的区域中包括有字符的区域;或者,
在所述第一电子设备的图像采集范围内对所述对象进行图像采集,识别出所采集到的图像中包括有字符的区域。
优选地,所述对目标区域进行识别,从所述目标区域提取出第一信息,包括:
对所述目标区域进行字符识别,提取出所述目标区域包括的信息;或者,
对所述目标区域进行标识识别,提取出所述目标区域包括的信息的标识,所述标识用于表征所述目标区域包括的信息。
优选地,所述对目标区域进行识别,从所述目标区域提取出第一信息,包括:
对所述目标区域进行标识识别;
检测是否从所述目标区域中提取出所述目标区域包括的内容的标识;
未识别出所述标识时,对所述目标区域进行字符识别,提取出所述目标区域包括的字符。
优选地,所述基于所述第二信息与所述第一信息形成关联关系,包括:
在所述第一电子设备本地或云端服务器存储所述第二信息与所述第一信息的关联关系、以及所述第二信息;或者,
在所述第一电子设备本地或云端服务器存储所述第二信息与所述第一信息的标识的关联关系、以及所述第二信息;或者,
与第二电子设备建立通信连接,将所述第二信息与所述第一信息的关联关系、以及所述第二信息发送至第二电子设备存储;或者,
与第二电子设备建立通信连接,将所述第二信息与所述第一信息的标识的关联关系、以及所述第二信息发送至所述第二电子设备存储。
优选地,所述基于所述关联关系以及所述第二信息,响应针对所述对象中的信息的查询,包括:
基于所述关联关系以及所述第二信息,响应针对所述对象中的信息的查询,查询得到以下信息至少之一:
所述第一电子设备用户针对所述目标区域包括的信息所标注的信息;
至少一个第二电子设备用户针对所述目标区域包括的信息所标注的信息;
第三方针对所述目标区域包括的信息所标注的信息。
第二方面,本发明实施例提供一种第一电子设备,所述第一电子设备包括:
图像采集单元,用于确定在对象中的目标区域;
所述处理单元,还用于基于所述图像采集单元对所述目标区域进行识别,从所述目标区域提取出第一信息;
所述处理单元,还用于获取所述第一电子设备用户针对所述目标区域包括的信息所标注的第二信息,基于所述第二信息与所述第一信息形成关联关系;
所述处理单元,还用于基于所述关联关系以及所述第二信息,响应针对所述对象中的信息的查询。
优选地,所述图像采集单元,还用于解析所采集的所述用户的眼部动作数据,基于所述眼部动作数据分析出所述用户的视线在所述对象上的落点,确定所述落点所对应的区域中包括有字符的区域;或者,
所述处理单元,还用于在所述第一电子设备的图像采集范围内对所述对象进行图像采集,识别出所采集到的图像中包括有字符的区域。
优选地,所述处理单元,还用于对所述目标区域进行字符识别,提取出所述目标区域包括的信息;或者,
对所述目标区域进行标识识别,提取出所述目标区域包括的信息的标识,所述标识用于表征所述目标区域包括的信息。
优选地,所述处理单元,还用于对所述目标区域进行标识识别;
所述处理单元,还用于检测是否从所述目标区域中提取出所述目标区域包括的内容的标识;
所述处理单元,还用于未识别出所述标识时,对所述目标区域进行字符识别,提取出所述目标区域包括的字符。
优选地,所述处理单元,还用于:
在所述第一电子设备的存储单元或云端服务器存储所述第二信息与所述第一信息的关联关系、以及所述第二信息;或者,
在所述第一电子设备的存储单元或云端服务器存储所述第二信息与所述第一信息的标识的关联关系、以及所述第二信息;或者,
与第二电子设备建立通信连接,将所述第二信息与所述第一信息的关联关系、以及所述第二信息发送至第二电子设备存储;或者,
与第二电子设备建立通信连接,将所述第二信息与所述第一信息的标识的关联关系、以及所述第二信息发送至所述第二电子设备存储。
优选地,所述处理单元,还用于基于所述关联关系以及所述第二信息,响应针对所述对象中的信息的查询,查询得到以下信息至少之一:
所述第一电子设备用户针对所述目标区域包括的信息所标注的信息;
至少一个第二电子设备用户针对所述目标区域包括的信息所标注的信息;
第三方针对所述目标区域包括的信息所标注的信息。
本发明实施例中,对书籍等对象中的目标区域的识别,以及将提取出的第一信息与用户标注的第二信息关联都可以由第一电子设备完成,克服了部分电子书不支持编辑的问题;节省用户人工摘抄信息的步骤,处理效率高,且不受对象的具体类型的限制,适用多种对象类型象如纸质书、电子书、报纸等他类型的印刷品、以及任意包括有信息的物体(如具有文字包装的商品)等,具有广泛的应用场景。
附图说明
图1为本发明实施例中信息处理方法的实现流程示意图一;
图2a为本发明实施例中信息处理方法的实现流程示意图二;
图2b为本发明实施例中信息处理方法的实现流程示意图三;
图3为本发明实施例中信息处理方法的场景示意图一;
图4为本发明实施例中信息处理方法的场景示意图二;
图5为本发明实施例中信息处理方法的实现流程示意图四;
图6为本发明实施例中信息处理方法的场景示意图三;
图7为本发明实施例中第一电子设备的结构示意图。
具体实施方式
下面结合附图和具体实施例对本发明作进一步详细说明。
针对相关技术没有通用的解决方案以支持用户针对任意类型书籍中内容进行标注,并支持对标注信息的快速查找的问题,参见图1示出的本发明实施例提供的一种信息处理方法的可选的流程示意图,在步骤101中,第一电子设备确定在对象(如电子书、纸质书或具有文字、图像等任意形式信息的物体)中的目标区域;在步骤102中,对目标区域进行识别,从目标区域提取出第一信息;在步骤103中,获取第一电子设备用户针对目标区域包括的信息所标注的第二信息,基于第二信息与第一信息形成关联关系;在步骤104中,基于关联的第一信息与第二信息,响应针对对象中的信息的查询。
对书籍等对象中的目标区域的识别,以及将提取出的第一信息与用户标注的第二信息关联都可以由第一电子设备完成,如果对象是纸质书,则不需要人工对目标区域中的第一信息进行摘抄,以及人工在纸质书的目标区域录入需要标注的第二信息;如果对象是电子书,则不论是何种类型的电子书,都能够将电子书中目标区域提取的第一信息与用户需要标注的第二信息进行标注,克服了部分电子书不支持编辑的问题;并且都能够节省用户人工摘抄信息的步骤。
本发明实施例提供的提取第一信息、以及将第一信息与标注的第二信息关联的方案,不受对象类型限制,因此能够适用与所有对象如纸质书、电子书、报纸等他类型的印刷品、以及任意包括有信息的物体(如具有文字包装的商品)等,应用场景具有极高的普适性。
本发明各实施例记载的第一电子设备可以采用多种形式来实施,如实施为智能手机、平板电脑、笔记本电脑等电子设备,还可以是智能眼镜等穿戴式的电子设备,当然,还可以实施为智能手写笔等智能输入设备,以下各具体实施例结合第一电子设备的不同实施形式进行说明。
实施例一
本实施例以第一电子设备实施为对象为书籍为例进行说明,对于其他类型的对象(如书籍以外的印刷品、以及包括有信息的任意物品),可以参照本实施例而实施。本实施例记载的第一电子设备至少具有图像采集以及数据处理功能,当然,还可以支持多种方式的通信,如无线相容性认证(WiFi)通信、蓝牙通信以及蜂窝通信(如2G/3G/4G等)。
参见图2a示出的本发明实施例提供的信息处理方法的一个可选的流程示意图,包括以下步骤:
步骤201,在第一电子设备的图像采集范围内对书籍进行图像采集,识别出所采集到的图像中包括有字符(如文字、符号)的区域为目标区域。
对于纸质书来说,第一电子设备(在用户的操作下)对用户需要进行标注的信息所处的区域(目标区域)进行图像采集,在所采集的图像中识别出包括有字符(文字或符号等)的区域作为目标区域。
对于电子书来说:1)如果电子书是由第一电子设备运行,则第一电子设备(在用户的操作下)调用屏幕的快照功能对屏幕当前显示的界面(包括有用户需要标注的信息)截取图像,在所采集的图像中识别出包括有字符(文字或符号等)的区域作为目标区域;2)如果电子书是由第二电子设备运行,则第一电子设备(在用户的操作下)对第二电子设备显示的信息中需要进行标注的信息所处的区域(目标区域)进行图像采集,在所采集的图像中识别出包括有字符(文字或符号等)的区域作为目标区域。
前述的步骤201是第一电子设备实施为智能手机、笔记本电脑时识别目标区域以及第一信息的处理,当第一电子设备为智能眼镜时,步骤201可以替换为:解析所采集的用户的眼部动作数据,基于眼部动作数据分析出用户的视线在对象上的落点,确定落点所对应的区域中包括有字符的区域作为目标区域。
步骤202a,对目标区域进行标识识别,提取出目标区域包括的信息的标识作为从目标区域提出的第一信息。
标识用于表征目标区域包括的信息,可以为以下形式的标识至少之一:书籍的名称(如书籍的名称,书籍的书号)、页的编码、二维码(用于表征段落的编号或页码)。
如图2b所示,作为步骤202a的替换步骤,步骤202a可以采用以下步骤202b替代:对目标区域进行字符识别,提取出目标区域包括的信息(如文字、符号等)作为从目标区域提取出的第一信息。也就是说,在步骤202a中,提取出的第一信息是目标区域中所包括的信息的标识,而在步骤202b中,提取出的第一信息是目标区域中所包括的原始的信息。
步骤202b与步骤202a的区别在于,将目标区域的信息替代目标区域的信息的标识与标注的信息(第二信息)进行关联,在目标区域的信息占用的存储空间较大时,将目标区域包括的信息的标识与标注的信息进行关联(也就是执行步骤202a),由于不需要存储目标区域包括的原始信息,而仅需要存储对应的标识,因此,较将目标区域包括的信息与标注信息进行关联(也就是执行步骤202b),将显著节省存储空间。作为一种可选方案,对于能够提取出目标区域包括的信息对应的标识时,优先将目标区域包括的信息的标识与标注的信息进行关联(也就是执行步骤202a),对于无法从目标区域中提取出标识时,才将目标区域包括的信息与标注的信息关联,从而达到最大程度节省存储空间的目的。
步骤203,获取第一电子设备用户针对目标区域包括的信息所标注的第二信息。
如果书籍是纸质书,对于在书籍的目标区域中的信息,第一电子设备基于用户输入的关键字查询,或基于采集的目标区域的图像进行查询到用户需要标注的信息(第二信息),如文字、图像、链接等;或者,第一电子设备直接获取用户在第一电子设备录入的需要标注的信息。
如果书籍是电子书且由第一电子设备运行,则第一电子设备可以根据用户所标定(如采用特定手势标定)的区域(也就是目标区域)包括的信息(例如全部信息,信息中的关键词)查询备选的可供标注的信息,或者,根据用户目标区域标定的关键词查询备选的可供标注的信息。
如果书籍是电子书且由第二电子设备运行,则第一电子设备(在用户的操作下)对第二电子设备显示进行图像采集,根据用户所标定(如采用特定手势标定)的区域(也就是目标区域)包括的信息(例如全部信息、从信息提取的关键词)自动查询备选的可供标注的信息,或者,根据用户在目标区域标定的关键词查询备选的可供标注的信息。
步骤204a,在第一电子设备本地或云端服务器存储第二信息与第一信息的标识的关联关系、以及第二信息。
步骤204b,与第二电子设备建立通信连接,将第二信息与第一信息的标识的关联关系、以及第二信息发送至第二电子设备存储。
步骤204a和步骤204b为可以全部执行或择一执行,区别在于维护关联关系以及第二信息的设备不同,在步骤204a中关联关系以及第二信息由第一电子设备存储,在步骤204b中关联关系以及第二信息由第二电子设备存储。
如图2b所示,当前述的步骤202a替换实施为步骤202b时,步骤204a和步骤204b可以替换实施为以下的步骤204c和步骤204d:
步骤204c,在第一电子设备本地或云端服务器存储第二信息与第一信息的关联关系、以及第二信息。
步骤204d,与第二电子设备建立通信连接,将第二信息与第一信息关联关系、以及第二信息发送至第二电子设备存储。
步骤204c和步骤204d为可以全部执行或择一执行,区别在于维护关联关系以及第二信息的设备不同,在步骤204c中关联关系以及第二信息由第一电子设备存储,在步骤204d中关联关系以及第二信息由第二电子设备存储。
步骤205,基于关联关系以及第二信息,响应针对书籍中的信息的查询。
在前述步骤中形成了两种关联关系:目标区域所包括的信息的标识与标注信息(第二信息)的关联关系;目标区域所包括的信息与标注信息(第二信息)的关联关系,以下对基于上述两种不同的关联关系响应查询进行说明。
1)利用目标区域包括的信息的标识与第二信息的关联关系响应查询。
对于用户曾经对其中的部分信息进行标注的书籍,如果用户之后再次阅读至该部分信息并期望阅读曾经针对该部分信息所标识的信息时,第一电子设备响应用户的指令对书籍中包括有该部分内容的区域(目标区域)进行识别,提取出该部分区域包括的信息的标识,基于信息的标识在第一信息的标识与第二信息的关联关系(通过前述的步骤202a形成)查找用户针对该部分信息曾经所标注的信息(第二信息),作为查询结果呈现给用户。
2)利用目标区域包括的信息的标识与第二信息的关联关系无法查询到标注的信息,利用利用目标区域包括的信息与第二信息的关联关系响应查询。
可能存在这种情况,第一电子设备无法无法提取出该部分区域包括的信息的标识,则第一电子设备提取出该部分区域包括的信息,以及所提取的信息在第一信息和第二信息的关联关系(通过步骤202b形成)查找用户针对该部分信息曾经所标注的信息(第二信息),作为查询结果呈现给用户。
3)利用目标区域包括的信息与第二信息的关联关系响应查询。
对于用户曾经对其中的部分信息进行标注的书籍,如果用户之后再次阅读至该部分信息并期望阅读曾经针对该部分信息所标识的信息时,第一电子设备响应用户的指令对书籍中包括有该部分内容的区域(目标区域)进行识别,提取出该部分区域包括的信息,基于信息的标识在第一信息的标识与第二信息的关联关系(通过前述的步骤202b形成)查找用户针对该部分信息曾经所标注的信息(第二信息),作为查询结果呈现给用户。
在上述的三种查询方式中,能够查询得到以下类型信息至少之一:
1)第一电子设备用户针对目标区域包括的信息所标注的信息;
2)至少一个第二电子设备用户针对目标区域包括的信息所标注的信息;
3)第三方针对目标区域包括的信息所标注的信息,例如新闻评论等。
实际应用中对于上述三种类型的标注信息可以采用1)、2)、3)顺序的优先级,即能够查询到第一电子设备用户曾经标注的信息时优先将第一电子设备用户的标注信息作为查询结果。
如果将2)、3)类型的信息作为查询结果作为第一电子设备用户的查询结果,实质上实现了将第二电子设备用户针对目标区域包括的信息所标注的信息进行分享的效果,当然,在第一电子设备将第一信息与第二信息的关联关系以及第二信息上传至云端服务器(前述步骤204b)或者当第一电子设备将第一信息的标识与第二信息的关联关系以及第二信息上传至云端服务器之后(前述步骤204c),云端服务器可以利用上述两种关联关系以及第二信息响应第二电子设备的查询,或者主动将第一电子设备用户标注的信息(第二信息)推送至第二电子设备,从而实现将第一电子设备用户标注的信息进行分享的效果。
一个具体示例如图3所示,用户阅读纸质书时,发现需要对当前页进行标注,使用智能手机查询与当前页相关的信息,例如使用智能手机对书籍对应的区域(目标区域)进行扫描,使智能手机基于扫描并识别出的信息(如字符、图像)进行搜索,查询备选的信息供用户选择可以用于标注的信息(第二信息),当然,智能手机可以基于用户手动录入的关键词进行搜索,查询备选的信息供用户选择可以用于标注的信息;同时,智能手机还从书籍所处的区域提取出书籍当前页的标识(第一信息),如书籍的书目、书号、当前页所处的章节、当前页的页码、当前页的页码二维码等,作为当前页的标识。
智能手机在本地存储该页的标识与用户针对该页标注信息的对应关系以及用户所标注的信息,后续,智能手机通过再次扫描该页时可以查询到用户之前所标注的信息;该页的标识与用户针对该页标注信息的对应关系以及用户所标注的信息也可以存储在云端服务器,这样用户可以通过其他设备如笔记本电脑对该页扫描从而查询到之前所标注的信息。当用户智能手机或笔记本电脑基于该页的标识在云端服务器进行查询时,云端服务器可以将其他用户针对该页的标注信息、以及第三方标注的信息(如新闻评论)、发送至用户的笔记本电脑以实现标注信息共享的效果。
一个具体示例如图4所示,用户佩戴智能眼镜阅读纸质书时,发现需要对当前页进行标注,通过特定的眼部动作标定当前页发送当前页至智能手机,智能手机查询与当前页相关的信息,例如使用智能手机对书籍对应的区域(目标区域)进行扫描,使智能手机基于扫描并识别出的信息(如字符、图像)进行搜索,查询备选的信息供用户选择可以用于标注的信息(第二信息),当然,智能手机可以基于用户手动录入的关键词进行搜索,查询备选的信息供用户选择可以用于标注的信息;同时,智能手机还从书籍所处的区域提取出书籍当前页的标识(第一信息),如书籍的书目、书号、当前页所处的章节、当前页的页码、当前页的页码二维码等,作为当前页的标识。
智能手机在本地存储该页的标识与用户针对该页标注信息的对应关系以及用户所标注的信息,后续,用户佩戴智能眼镜再次标定该页时可以在智能手机查询到用户之前所标注的信息;该页的标识与用户针对该页标注信息的对应关系以及用户所标注的信息也可以存储在云端服务器,这样用户可以通过其他设备如笔记本电脑对该页扫描从而查询到之前所标注的信息。当用户智能手机或笔记本电脑基于该页的标识在云端服务器进行查询时,云端服务器可以将其他用户针对该页的标注信息、以及第三方标注的信息(如新闻评论)、发送至用户的笔记本电脑以实现标注信息共享的效果。
实施例二
本实施例以第一电子设备实施为智能笔、对象为书籍为例进行说明,对于其他类型的对象(如书籍以外的印刷品、以及包括有信息的任意物品),可以参照本实施例而实施。智能笔至少具有图像采集、识别、以及数据处理功能,当然,还可以支持多种方式的通信,如WiFi通信、蓝牙通信以及蜂窝通信(如2G/3G/4G等)以与智能手机、平板电脑等电子设备连接。
参见图5示出的本发明实施例提供的信息处理方法的一个可选的流程示意图,包括以下步骤:
步骤301,在第一电子设备的图像采集范围内对书籍进行图像采集,识别出所采集到的图像中包括有字符(如文字、符号)的区域为目标区域。
对于纸质书来说,第一电子设备(在用户的操作下)对用户需要进行标注的信息所处的区域(目标区域)进行图像采集,在所采集的图像中识别出包括有字符(文字或符号等)的区域作为目标区域。
步骤302,对目标区域进行字符识别,提取出目标区域包括的信息(如文字、符号等)作为从目标区域提取出的第一信息。
也就是说,在步骤302b提取出的第一信息是目标区域中所包括的原始的信息。
步骤303,获取第一电子设备用户针对目标区域包括的信息所标注的第二信息。
对于在书籍的目标区域中的信息,第一电子设备基于用户输入的关键字查询,或基于采集的目标区域的图像进行查询到用户需要标注的信息(第二信息),如文字、图像、链接等;或者,第一电子设备直接获取用户在第一电子设备录入的需要标注的信息。
步骤304a,在第一电子设备本地或云端服务器存储第二信息与第一信息关联关系、以及第一信息、第二信息。
步骤304b,与第二电子设备建立通信连接,将第二信息与第一信息关联关系、以及第一信息、第二信息发送至第二电子设备存储。
步骤304a和步骤304b为可以全部执行或择一执行,区别在于维护关联关系以及第二信息的设备不同,在步骤304a中关联关系以及第二信息由第一电子设备存储,在步骤304b中关联关系以及第二信息由第二电子设备存储。
步骤305,基于关联关系以及第二信息,响应针对书籍中的信息的查询,响应针对书籍中的信息的查询。
对于用户曾经对其中的部分信息进行标注的书籍,如果用户之后再次阅读至该部分信息并期望阅读曾经针对该部分信息所标识的信息时,第一电子设备响应用户的指令对书籍中包括有该部分内容的区域(目标区域)进行识别,提取出该部分区域包括的信息,基于信息在第一信息与第二信息的关联查找用户针对该部分信息曾经所标注的信息(第二信息),作为查询结果呈现给用户。
在上述的三种查询方式中,能够查询得到以下类型信息至少之一:
1)第一电子设备用户针对目标区域包括的信息所标注的信息;
2)至少一个第二电子设备用户针对目标区域包括的信息所标注的信息;
3)第三方针对目标区域包括的信息所标注的信息,例如新闻评论等。
实际应用中对于上述三种类型的信息可以采用1)、2)、3)顺序的优先级,即能够查询到第一电子设备用户曾经标注的信息时优先将第一电子设备用户的标注信息作为查询结果。
如果将2)、3)类型的信息作为查询结果作为第一电子设备用户的查询结果,实质上实现了将第二电子设备用户针对目标区域包括的信息所标注的信息进行分享的效果,当然,在第一电子设备将第一信息与第二信息的关联关系以及第一信息、第二信息上传至云端服务器,云端服务器可以利用关联关系以及第二信息响应第二电子设备的查询,或者主动将第一电子设备用户标注的信息(第二信息)推送至第二电子设备,从而实现将第一电子设备用户标注的信息进行分享的效果。
一个具体示例如图6所示,用户阅读纸质书时,发现需要对当前页进行标注,使用智能笔扫描当前页识别出当前页中的字符(包括文字和符号等),作为从当前页的识别出的内容。智能笔在本地存储从该页识别出的内容与用户针对识别出的内容所输入的笔记(标注信息),识别出的内容与用户针对识别出的信息所输入的笔记也可以发送到智能手机存储;后续,智能笔通过再次扫描该页时,基于所识别出的内容可以查询到用户之前所作的笔记。
实施例三
本实施例对前述实施例记载的第一电子设备的结构进行说明,参见图7,第一电子设备包括图像采集单元100、处理单元200和存储单元300。
图像采集单元100确定在对象中的目标区域,第一电子设备实施为智能眼镜时,解析所采集的用户的眼部动作数据,基于眼部动作数据分析出用户的视线在对象上的落点,确定落点所对应的区域中包括有字符的区域;第一电子设备实施为智能手机、平板电脑、笔记本电脑等电子设备时,在第一电子设备的图像采集范围内对对象进行图像采集,识别出所采集到的图像中包括有字符的区域。
处理单元200基于图像采集单元100对目标区域进行识别,从目标区域提取出第一信息:1)对目标区域进行字符识别,提取出目标区域包括的信息作为第一信息;2)对目标区域进行标识识别,识别出用于表征目标区域包括的信息的标识。将提取出目标区域包括的信息的标识作为第一信息。实际应用中,处理单元200对目标区域进行标识识别;检测是否从目标区域中提取出目标区域包括的内容的标识;识别出标识是,将识别出的标识则作为第一信息,未识别出标识时,对目标区域进行字符识别,提取出目标区域包括的字符作为第一信息,以节省存储空间。
处理单元200获取第一电子设备用户针对目标区域包括的信息所标注的第二信息,基于第二信息与第一信息形成关联关系:包括以下几种方式:1)在第一电子设备本地的存储单元300或云端服务器存储第二信息与第一信息的关联关系、以及第二信息:2)在第一电子设备本地的存储单元300或云端服务器存储第二信息与第一信息的标识的关联关系、以及第二信息;3)与第二电子设备建立通信连接,将第二信息与第一信息的关联关系、以及第二信息发送至第二电子设备存储:4)与第二电子设备建立通信连接,将第二信息与第一信息的标识的关联关系、以及第二信息发送至第二电子设备存储。
处理单元200基于关联关系以及第二信息,响应针对对象中的信息的查询,例如,基于关联关系以及第二信息,响应针对对象中的信息的查询,查询得到以下信息至少之一:第一电子设备用户针对目标区域包括的信息所标注的信息;至少一个第二电子设备用户针对目标区域包括的信息所标注的信息;第三方针对目标区域包括的信息所标注的信息。对于上述三种类型的标注信息可以采用1)、2)、3)顺序的优先级,即能够查询到第一电子设备用户曾经标注的信息时优先将第一电子设备用户的标注信息作为查询结果。
实际应用中,处理单元200可以采用处理器、微处理器(MCU)、专用集成电路(ASIC)或逻辑可编程门阵列(FPGA)实现。
综上,本发明实施例中,对书籍等对象中的目标区域的识别,以及将提取出的第一信息与用户标注的第二信息关联都可以由第一电子设备完成,克服了部分电子书不支持编辑的问题;节省用户人工摘抄信息的步骤,处理效率高,且不受对象的具体类型的限制,适用多种对象类型象如纸质书、电子书、报纸等他类型的印刷品、以及任意包括有信息的物体(如具有文字包装的商品)等,具有广泛的应用场景。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序命令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干命令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。
Claims (12)
1.一种信息处理方法,其特征在于,所述信息处理方法包括:
第一电子设备确定在对象中的目标区域;
对所述目标区域进行识别,从所述目标区域提取出第一信息;
获取所述第一电子设备用户针对所述目标区域包括的信息所标注的第二信息,基于所述第二信息与所述第一信息形成关联关系;
基于所述关联关系以及所述第二信息,响应针对所述对象中的信息的查询。
2.如权利要求1所述的信息处理方法,其特征在于,所述第一电子设备确定在对象中的目标区域,包括:
解析所采集的所述用户的眼部动作数据,基于所述眼部动作数据分析出所述用户的视线在所述对象上的落点,确定所述落点所对应的区域中包括有字符的区域;或者,
在所述第一电子设备的图像采集范围内对所述对象进行图像采集,识别出所采集到的图像中包括有字符的区域。
3.如权利要求1所述的信息处理方法,其特征在于,所述对目标区域进行识别,从所述目标区域提取出第一信息,包括:
对所述目标区域进行字符识别,提取出所述目标区域包括的信息;或者,
对所述目标区域进行标识识别,提取出所述目标区域包括的信息的标识,所述标识用于表征所述目标区域包括的信息。
4.如权利要求1所述的信息处理方法,其特征在于,所述对目标区域进行识别,从所述目标区域提取出第一信息,包括:
对所述目标区域进行标识识别;
检测是否从所述目标区域中提取出所述目标区域包括的内容的标识;
未识别出所述标识时,对所述目标区域进行字符识别,提取出所述目标区域包括的字符。
5.如权利要求1所述的信息处理方法,其特征在于,所述基于所述第二信息与所述第一信息形成关联关系,包括:
在所述第一电子设备本地或云端服务器存储所述第二信息与所述第一信息的关联关系、以及所述第二信息;或者,
在所述第一电子设备本地或所述云端服务器存储所述第二信息与所述第一信息的标识的关联关系、以及所述第二信息;或者,
与第二电子设备建立通信连接,将所述第二信息与所述第一信息的关联关系、以及所述第二信息发送至第二电子设备存储;或者,
与所述第二电子设备建立通信连接,将所述第二信息与所述第一信息的标识的关联关系、以及所述第二信息发送至所述第二电子设备存储。
6.如权利要求1所述的信息处理方法,其特征在于,所述基于所述关联关系以及所述第二信息,响应针对所述对象中的信息的查询,包括:
基于所述关联关系以及所述第二信息,响应针对所述对象中的信息的查询,查询得到以下信息至少之一:
所述第一电子设备用户针对所述目标区域包括的信息所标注的信息;
至少一个第二电子设备用户针对所述目标区域包括的信息所标注的信息。
7.一种第一电子设备,其特征在于,所述第一电子设备包括:
图像采集单元,用于确定在对象中的目标区域;
处理单元,用于基于所述图像采集单元对所述目标区域进行识别,从所述目标区域提取出第一信息;
所述处理单元,还用于获取所述第一电子设备用户针对所述目标区域包括的信息所标注的第二信息,基于所述第二信息与所述第一信息形成关联关系;
所述处理单元,还用于基于所述关联关系以及所述第二信息,响应针对所述对象中的信息的查询。
8.如权利要求7所述的第一电子设备,其特征在于,
所述图像采集单元,还用于解析所采集的所述用户的眼部动作数据,基于所述眼部动作数据分析出所述用户的视线在所述对象上的落点,确定所述落点所对应的区域中包括有字符的区域;
所述图像采集单元,还用于在所述第一电子设备的图像采集范围内对所述对象进行图像采集,识别出所采集到的图像中包括有字符的区域。
9.如权利要求7所述的第一电子设备,其特征在于,
所述处理单元,还用于对所述目标区域进行字符识别,提取出所述目标区域包括的信息;或者,
对所述目标区域进行标识识别,提取出所述目标区域包括的信息的标识,所述标识用于表征所述目标区域包括的信息。
10.如权利要求7所述的第一电子设备,其特征在于,
所述处理单元,还用于对所述目标区域进行标识识别;
所述处理单元,还用于检测是否从所述目标区域中提取出所述目标区域包括的内容的标识;
所述处理单元,还用于未识别出所述标识时,对所述目标区域进行字符识别,提取出所述目标区域包括的字符。
11.如权利要求7所述的第一电子设备,其特征在于,所述第一电子设备还包括存储单元;
所述处理单元,还用于:
在所述第一电子设备的存储单元或云端服务器存储所述第二信息与所述第一信息的关联关系、以及所述第二信息;或者,
在所述第一电子设备的所述存储单元或云端服务器存储所述第二信息与所述第一信息的标识的关联关系、以及所述第二信息;或者,
与第二电子设备建立通信连接,将所述第二信息与所述第一信息的关联关系、以及所述第二信息发送至第二电子设备存储;或者,
与所述第二电子设备建立通信连接,将所述第二信息与所述第一信息的标识的关联关系、以及所述第二信息发送至所述第二电子设备存储。
12.如权利要求7所述的第一电子设备,其特征在于,
所述处理单元,还用于基于所述关联关系以及所述第二信息,响应针对所述对象中的信息的查询,查询得到以下信息至少之一:
所述第一电子设备用户针对所述目标区域包括的信息所标注的信息;
至少一个第二电子设备用户针对所述目标区域包括的信息所标注的信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610184572.9A CN105893472A (zh) | 2016-03-28 | 2016-03-28 | 信息处理方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610184572.9A CN105893472A (zh) | 2016-03-28 | 2016-03-28 | 信息处理方法及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105893472A true CN105893472A (zh) | 2016-08-24 |
Family
ID=57014281
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610184572.9A Pending CN105893472A (zh) | 2016-03-28 | 2016-03-28 | 信息处理方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105893472A (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102915301A (zh) * | 2011-08-01 | 2013-02-06 | 联想(北京)有限公司 | 一种标注列表生成方法及电子设备 |
US20130042171A1 (en) * | 2011-08-12 | 2013-02-14 | Korea Advanced Institute Of Science And Technology | Method and system for generating and managing annotation in electronic book |
CN103002054A (zh) * | 2012-12-25 | 2013-03-27 | 北京百度网讯科技有限公司 | 基于网络的笔记共享方法、系统和云端服务器 |
CN103166982A (zh) * | 2011-12-09 | 2013-06-19 | 腾讯科技(深圳)有限公司 | 一种电子书注释信息的分享方法和设备 |
WO2014051976A1 (en) * | 2012-09-27 | 2014-04-03 | Google Inc. | Synchronizing book annotations with social networks |
CN103869946A (zh) * | 2012-12-14 | 2014-06-18 | 联想(北京)有限公司 | 一种显示控制方法和电子设备 |
CN104104576A (zh) * | 2013-04-03 | 2014-10-15 | 中国移动通信集团广东有限公司 | 一种读书笔记的共享方法、系统及终端 |
CN104978577A (zh) * | 2014-04-04 | 2015-10-14 | 联想(北京)有限公司 | 信息处理方法、装置及电子设备 |
-
2016
- 2016-03-28 CN CN201610184572.9A patent/CN105893472A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102915301A (zh) * | 2011-08-01 | 2013-02-06 | 联想(北京)有限公司 | 一种标注列表生成方法及电子设备 |
US20130042171A1 (en) * | 2011-08-12 | 2013-02-14 | Korea Advanced Institute Of Science And Technology | Method and system for generating and managing annotation in electronic book |
CN103166982A (zh) * | 2011-12-09 | 2013-06-19 | 腾讯科技(深圳)有限公司 | 一种电子书注释信息的分享方法和设备 |
WO2014051976A1 (en) * | 2012-09-27 | 2014-04-03 | Google Inc. | Synchronizing book annotations with social networks |
CN103869946A (zh) * | 2012-12-14 | 2014-06-18 | 联想(北京)有限公司 | 一种显示控制方法和电子设备 |
CN103002054A (zh) * | 2012-12-25 | 2013-03-27 | 北京百度网讯科技有限公司 | 基于网络的笔记共享方法、系统和云端服务器 |
CN104104576A (zh) * | 2013-04-03 | 2014-10-15 | 中国移动通信集团广东有限公司 | 一种读书笔记的共享方法、系统及终端 |
CN104978577A (zh) * | 2014-04-04 | 2015-10-14 | 联想(北京)有限公司 | 信息处理方法、装置及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8892990B2 (en) | Automatic creation of a table and query tools | |
US10013624B2 (en) | Text entity recognition | |
KR102001218B1 (ko) | 객체와 관련된 정보 제공 방법 및 이를 위한 디바이스 | |
CN104685501B (zh) | 响应于可视化查询标识文本词汇 | |
US20180107876A1 (en) | Method and system for providing augmented reality contents by using user editing image | |
US10929461B2 (en) | Automatic detection and transfer of relevant image data to content collections | |
WO2013159722A1 (en) | Systems and methods for obtaining information based on an image | |
JP5863962B2 (ja) | 追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法 | |
WO2014032419A1 (zh) | 一种基于图片获得咨询信息的方法和系统 | |
CN105631051A (zh) | 基于文字识别的移动增强现实阅读方法及其阅读系统 | |
CN102855298A (zh) | 图像检索方法及系统 | |
WO2017166236A1 (zh) | 信息关联方法、电子书签及信息关联系统 | |
CN104090869B (zh) | 一种翻译网络信息的方法及翻译系统 | |
CN109902687B (zh) | 一种图像识别方法及用户终端 | |
CN111753608A (zh) | 信息处理方法及装置、电子设备及存储介质 | |
KR20160118198A (ko) | 실시간 자동번역 시스템 및 방법, 실시간 자동번역이 가능한 단말기 | |
CN101373403B (zh) | 一种通过名片识别技术在地址簿中自动生成并添加图标的方法 | |
WO2014086266A1 (zh) | 一种方便电子化的专业笔记本及其电子缩略图显示方法 | |
KR101477642B1 (ko) | 오프라인 노트를 이용한 전자책 서비스 방법 | |
CN105791503A (zh) | 一种将名片信息存储到通讯录的方法及装置 | |
CN105893472A (zh) | 信息处理方法及电子设备 | |
RU2587406C2 (ru) | Способ обработки визуального объекта и электронное устройство, используемое в нем | |
CN105975621B (zh) | 识别浏览器页面中的搜索引擎的方法及装置 | |
KR20120133149A (ko) | 데이터 태깅 장치, 그의 데이터 태깅 방법 및 데이터 검색 방법 | |
KR102103277B1 (ko) | 이미지를 관리하는 방법 및 그 전자 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20160824 |
|
RJ01 | Rejection of invention patent application after publication |