电子文件标记方法及装置制造方法及图纸

本发明专利技术提供一种电子文件标记方法及装置。通过取像单元来获取使用者的图像序列，并对图像序列执行眼动追踪程序、点头检测程序与眨眼检测程序。取得使用者在产生第一特定动作时的视线落在电子文件的第一位置，并执行标记动作，以从第一位置开始并随着眼球的移动轨迹而在电子文件上进行标记，取得使用者在产生第二特定动作时的视线落在电子文件的第二位置，并于第二位置结束标记动作。

【技术实现步骤摘要】
电子文件标记方法及装置
本专利技术涉及一种浏览电子文件的方法及装置，尤其涉及一种电子文件标记方法及装置。
技术介绍
随着信息的数字化，越来越多传统信息界面被电子产品所取代。例如，数字相框和数码相机取代了传统的相片和底片，而例如个人数字助理（PersonalDigitalAssistant，PDA）、智能手机、阅读器等的电子产品，则成为了新一代的文件阅读平台。使用者可以通过在同一台携带型电子产品中存放多个电子书等电子文件，改善了传统携带纸本书籍的不便性。并且，通过携带型电子产品可随时来观看其中的电子书。而目前也对应发展出几种针对电子书的控制方法。例如，美国专利号US7429108提出一种利用眼球追踪技术（gaze-trackingapplications）的电子阅读记录器，能帮助使用者寻找上次阅读的段落。
技术实现思路
本专利技术提供一种电子文件标记方法及装置，通过点头动作或眨眼动作，并随着眼球的移动轨迹在电子文件上进行标记。本专利技术的电子文件标记方法，包括：在显示单元显示电子文件；通过取像单元来获取使用者的图像序列；对图像序列执行眼动追踪程序、点头检测程序与眨眼检测程序，其中通过眼动追踪程序追踪使用者的眼球的移动轨迹，并通过点头检测程序与眨眼检测程序来检测使用者是否产生第一特定动作或第二特定动作；在检测到使用者产生第一特定动作时，通过眼动追踪程序取得使用者当下的视线落在电子文件的第一位置；执行标记动作，以从第一位置开始并随着眼球的移动轨迹而在电子文件上进行标记；在检测到使用者产生第二特定动作时，通过眼动追踪程序取得使用者当下的视线落在电子文件的第二位置；以及于在第二位置结束标记动作。本专利技术的电子文件标记装置，包括：显示单元、取像单元、存储单元以及处理单元。显示单元用以显示电子文件。取像单元用以获取使用者的图像序列。存储单元用以存储电子文件与图像序列。处理单元耦接至显示单元、取像单元以及存储单元，其用以执行眼动追踪模块、点头检测模块与眨眼检测模块来分析图像序列。通过眼动追踪模块来追踪使用者的眼球的移动轨迹，并通过点头检测模块与眨眼检测模块来检测使用者是否产生第一特定动作或第二特定动作。在检测到使用者产生第一特定动作时，眼动追踪模块取得使用者当下的视线落在电子文件的第一位置，并且处理单元启动标记模块来执行标记动作，而自从第一位置开始并随着眼球的移动轨迹而在电子文件上进行标记。在检测到使用者产生第二特定动作时，眼动追踪模块取得使用者当下的视线落在电子文件的第二位置，并且标记模块于在第二位置结束标记动作。在本专利技术的一实施例中，上述装置还包括：校正模块。校正模块依序接收多个校正图像，其中上述校正图像分别为使用者观看显示单元的多个校正点所获得。并且，校正模块依据各校正图像中的眼部区域的两个亮点位置，获得基准校正参数，其中上述两个亮点位置是在取像单元获取各校正图像时所形成。进而，校正模块基于上述校正图像而通过透视转换法来产生坐标转换矩阵，其中坐标转换矩阵是用以将眼部区域的坐标位置转换为显示单元的坐标位置。在本专利技术的一实施例中，上述眼动追踪模块检测图像序列中的目前图像的该眼部区域，以获得在目前图像中的瞳孔位置；依据目前图像的眼部区域的两个亮点位置，获得比对校正参数；依据基准校正参数与比对校正参数，获得动态补正参数；依据目前图像中的上述两个亮点位置其中之一、瞳孔位置以及动态补正参数，计算眼球移动坐标；利用坐标转换矩阵，转换眼球移动坐标为对应于显示单元的视线落点坐标；以及记录视线落点坐标。在本专利技术的一实施例中，上述第一特定动作与第二特定动作各自包括点头动作与眨眼动作至少其中之一，而第二特定动作与第一特定作动为相同或不相同。上述标记动作包括调整亮度、添加底线及添加底色至少其中之一。在本专利技术的一实施例中，上述电子文件包括多个片段，而标记模块可依据各片段的观看频率，对各片段执行对应的标记动作。基于上述，通过点头动作或眨眼动作，并随着眼球的移动轨迹在电子文件上进行标记。据此，利用眼动追踪，使用者不需手动即可进行对应的操作，相当便利。为让本专利技术的上述特征和优点能更明显易懂，下文特举实施例，并配合附图详细说明如下。附图说明图1是依照本专利技术一实施例的电子文件标记装置的方块图；图2是依照本专利技术一实施例的存储单元的方块图；图3是依照本专利技术一实施例的眼部区域的示意图；图4是依照本专利技术一实施例的眼部物件的示意图；图5是依照本专利技术一实施例的电子文件标记方法的流程图；图6是依照本专利技术一实施例的电子文件标记装置的示意图。附图标记说明：100：电子文件标记装置；110：取像单元；120：显示单元；130：存储单元；140：处理单元；201：眼动追踪模块；202：点头检测模块；203：眨眼检测模块；204：标记模块；205：校正模块；410：眼部物件；601：第一位置；602：第二位置；610：电子文件；620：标记范围；G1、G2：亮点位置；S505～S545：电子文件标记方法各步骤。具体实施方式图1是依照本专利技术一实施例的电子文件标记装置的方块图。请参照图1，电子文件标记装置100包括取像单元110、显示单元120、存储单元130以及处理单元140。其中，处理单元140耦接至取像单元110、显示单元120及存储单元130。取像单元110例如为摄像机或照相机，其具有电荷耦合元件（Chargecoupleddevice，CCD）镜头、互补式金氧半导体（Complementarymetaloxidesemiconductortransistors，CMOS）镜头、或红外线镜头。取像单元110用以获取使用者的图像序列。显示单元120例如为液晶显示器（Liquid-CrystalDisplay，LCD）、等离子显示器、真空荧光显示器、发光二极管（Light-EmittingDiode，LED）显示器、场发射显示器（FieldEmissionDisplay，FED）及/或其他合适种类的显示器，在此并不限制其种类。存储单元130例如是任意形式的固定式或可移动式随机存取存储器（RandomAccessMemory，RAM）、只读存储器（Read-OnlyMemory，ROM）、闪存（Flashmemory）、硬盘或其他类似装置或这些装置的组合。存储单元130中包括了多份电子文件，并且可暂存由取像单元110所获取的图像序列。处理单元140例如是中央处理单元（CentralProcessingUnit，CPU），或是其他可编程的一般用途或特殊用途的微处理器（Microprocessor）、数字信号处理器（DigitalSignalProcessor，DSP）、可编程的控制器、特殊应用集成电路（ApplicationSpecificIntegratedCircuits，ASIC）、可编程逻辑装置（ProgrammableLogicDevice，PLD）或其他类似装置或这些装置的组合。上述电子文件标记装置100例如为智能手机、阅读器、平板电脑、个人电脑等电子装置。取像单元110（例如，前置相机）例如设置在显示单元120（例如为触控荧幕）侧，藉此当显示单元120中显示有电子文件时，可通过取像单元110来获取正在观看电子文件的使用者的图像序列。之后，由处理单元140对所获取的图本文档来自技高网...

【技术保护点】
一种电子文件标记方法，其特征在于，包括：在显示单元显示电子文件；通过取像单元来获取使用者的图像序列；对该图像序列执行眼动追踪程序、点头检测程序与眨眼检测程序，其中通过该眼动追踪程序追踪该使用者的眼球的移动轨迹，并通过该点头检测程序与该眨眼检测程序来检测该使用者是否产生第一特定动作或第二特定动作；在检测到该使用者产生该第一特定动作时，通过该眼动追踪程序取得该使用者当下的视线落在该电子文件的第一位置；执行标记动作，以从该第一位置开始并随着该眼球的移动轨迹而在该电子文件上进行标记；在检测到该使用者产生第二特定动作时，通过该眼动追踪程序取得该使用者当下的视线落在该电子文件的第二位置；以及在该第二位置结束该标记动作。

【技术特征摘要】
2013.10.25 TW 1021387551.一种电子文件标记方法，其特征在于，包括：执行校正程序，包括：依序接收多个校正图像；依据每一上述校正图像中的眼部区域的两个亮点位置，获得基准校正参数；以及基于上述校正图像来产生坐标转换矩阵，其中该坐标转换矩阵是用以将该眼部区域的坐标位置转换为显示单元的坐标位置；在该显示单元显示电子文件；通过取像单元来获取使用者的图像序列；对该图像序列执行眼动追踪程序、点头检测程序与眨眼检测程序，其中通过该眼动追踪程序追踪该使用者的眼球的移动轨迹，并通过该点头检测程序与该眨眼检测程序来检测该使用者是否产生第一特定动作或第二特定动作；在检测到该使用者产生该第一特定动作时，通过该眼动追踪程序取得该使用者当下的视线落在该电子文件的第一位置；执行标记动作，以从该第一位置开始并随着该眼球的移动轨迹而在该电子文件上进行标记；在检测到该使用者产生第二特定动作时，通过该眼动追踪程序取得该使用者当下的视线落在该电子文件的第二位置；以及在该第二位置结束该标记动作。2.根据权利要求1所述的方法，其特征在于，上述校正图像分别为该使用者观看该显示单元的多个校正点所获得；上述两个亮点位置是在该取像单元获取每一上述校正图像时所形成；而基于上述校正图像来产生坐标转换矩阵的步骤包括：基于上述校正图像而通过透视转换法来产生坐标转换矩阵。3.根据权利要求1所述的方法，其特征在于，追踪该使用者的该眼球的该移动轨迹的步骤包括：检测该图像序列中的目前图像的该眼部区域，以获得在该目前图像中的瞳孔位置；依据该目前图像的该眼部区域的两个亮点位置，获得比对校正参数；依据该基准校正参数与该比对校正参数，获得动态补正参数；依据该目前图像中的上述两个亮点位置其中之一、该瞳孔位置以及该动态补正参数，计算眼球移动坐标；利用该坐标转换矩阵，转换该眼球移动坐标为对应于该显示单元的视线落点坐标；以及记录该视线落点坐标。4.根据权利要求1所述的方法，其特征在于，该第一特定动作与该第二特定动作各自包括点头动作与眨眼动作至少其中之一，而该第二特定动作与该第一特定作动为相同或不相同。5.根据权利要求1所述的方法，其特征在于，该标记动作包括调整亮度、添加底线及添加底色至少其中之一。6.根据权利要求1所述的方法，其特征在于，该电子文件包括多个片段，该方法还包括：依据每一上述片段的观看频率，对每一上述片段执行对应的该标记动作。7.一种电子文件标记装置...

【专利技术属性】
技术研发人员：邹嘉骏，林伯聪，高嘉文，
申请(专利权)人：由田新技股份有限公司，
类型：发明
国别省市：中国台湾;71