基于草图交互的视频摘要方法及认知分析

doi:10.1360/112013-1

	基于草图交互的视频摘要方法及认知分析
其他题名	Video sketch summarization, interaction and cognition analysis
	马翠霞 1; 刘永进 2; 付秋芳3 ; 刘烨3 ; 傅小兰3 ; 戴国忠 1; 王宏安 1,4
第一作者	马翠霞
通讯作者邮箱	liuyongjin@tsinghua.edu.cn
心理所单位排序	3
摘要	视频是一类重要的视觉媒体,也是人们进行信息交流的重要载体.面向视频数据的高效内容表达,以及自然便捷的用户浏览和搜索等交互操作,本文提出了一种面向视频内容的草图摘要及交互方法.首先提出了面向视频语义的草图化表征方式,利用草图抽象性和概括性等特点,提出语义草图概念,支持对视频内容的语义草图注释,同时提出了草图摘要的优化布局算法.在此基础上,提出了基于草图摘要的草图交互技术,以及支持交互式视频浏览的自然手势操作,并进一步从认知心理学的角度分析了用于视频摘要的草图表征,以及草图交互中各认知单元的作用及相互关系.最后用户评估的实验结果表明,本文所提出的草图摘要以及草图交互方式提高了获取视频主要内容方面的用户效率,减轻了用户的认知负荷.
其他摘要	Video, as one typical digital media, is important for message communication. For efficient video content visualization and natural interaction such as video browsing and searching, we propose a sketch-based video summarization with fluent sketch interaction in this paper. Firstly, we present the sketch representation for video semantics, which takes the advantages of abstractness and generality of sketches. The concept of semantic sketch is proposed, which supports annotating video contents with sketches. Furthermore, an optimized layout algorithm for sketch summarization is presented. Secondly, we present the interaction techniques for sketch summarization and natural sketch gesture operations. From the viewpoint of cognitive psychology, we analyze the sketch representation, as well as the effects and relations of cognitive units in sketch interaction. Finally, user studies show that the proposed sketch summarization and sketch interaction improve user efficiency in terms of acquiring the main video content and reduce users’ cognitive load.
关键词	视频摘要草图布局手势交互认知分析
其他关键词	video summarization;sketch layout;gesture operations;cognitive analysis
学科领域	工业与组织心理学
	2013-08-20
语种	中文
DOI	10.1360/112013-1
发表期刊	中国科学：信息科学
ISSN	1674-7267
卷号	43 期号:8 页码:1012-1023
期刊论文类型	期刊论文
URL	查看原文
收录类别	中文核心期刊要目总览 ; CSCD
CSCD记录号	CSCD:4922065
取样对象	人类
性别	男 ; 女
年龄组	青年（18岁-29岁） ; 三十多岁（30岁-39岁）
被试数量	14
国家或地区	中国
测试或任务	视频预处理;CLD算法;生成算法;视频评价;草图交互
因变量指标	用户体验满意度;任务完成时间
实验仪器	Toshiba平板电脑
统计方法	重复测量方差分析
资助机构	国家重点基础研究发展计划（批准号：2011CB302205） ; 国家自然科学基金（批准号：61232013,61173058,61272228） ; 国家高技术研究发展计划（批准号：2012AA02A608,2012AA011801） ; 新世纪优秀人才支持计划（批准号：NCET-11-0273） ; 清华信息科学与技术国家实验室（筹）资助
引用统计	被引频次：2[CSCD] [CSCD记录]
文献类型	期刊论文
条目标识符	http://ir.psych.ac.cn/handle/311026/14648
专题	脑与认知科学国家重点实验室
作者单位	1.中国科学院软件研究所人机交互北京市重点实验室; 2.清华大学计算机系清华信息科学与技术国家实验室; 3.中国科学院心理研究所脑与认知科学国家重点实验室; 4.中国科学院软件研究所计算机科学国家重点实验室
推荐引用方式 GB/T 7714	马翠霞,刘永进,付秋芳,等. 基于草图交互的视频摘要方法及认知分析[J]. 中国科学：信息科学,2013,43(8):1012-1023.
APA	马翠霞.,刘永进.,付秋芳.,刘烨.,傅小兰.,...&王宏安.(2013).基于草图交互的视频摘要方法及认知分析.中国科学：信息科学,43(8),1012-1023.
MLA	马翠霞,et al."基于草图交互的视频摘要方法及认知分析".中国科学：信息科学 43.8(2013):1012-1023.

条目包含的文件
文件名称/大小	文献类型	版本类型	开放类型	使用许可
基于草图交互的视频摘要方法及认知分析_马（5652KB）	期刊论文	作者接受稿	限制开放	CC BY-NC-SA	请求全文