基本信息
原春锋  女  硕导  中国科学院自动化研究所
电子邮件: cfyuan@nlpr.ia.ac.cn
通信地址: 中关村东路95号智能化大厦1511
邮政编码:

个人简介

原春锋,研究员,博士生导师,北京市杰出青年基金获得者,科技部新一代人工智能重大项目项目负责人。分别于2012年、2015-2016年、2019-2020年在阿德莱德大学、微软亚洲研究院、美国西北大学进行访问学者研究工作。目前主要从事多媒体智能理解、视频图像内容理解、多模态行为识别、跨模态视频描述、目标检测、预训练大模型等方面的研究。已在IEEE T-PAMI、IJCV、IEEE T-IP等权威期刊和ICCV、CVPR、ECCV、IJCAI、AAAI等国际会议上发表论文70余篇,申请与授权专利20项。 担任CCF人工智能与机器学习专委会、CSIG视觉大数据专委会、CSIG多媒体专委会、CAAI智能服务专委会等委员。担任期刊JCST的AE。

近年来,主持面上基金两项、973国家重点基础研究发展计划子课题一项、国家重大研发计划子课题两项、北京市基金两项、2016腾讯CCF犀牛鸟项目一项、国家网络安全中心、美图、腾讯等企业横向课题多项。2015年微软亚研青年铸星计划入选者。2018年联合美图公司,在中国模式识别与计算机视觉学术会议(PRCV2018)共同举办了PRCV2018“美图短视频实时分类挑战赛”。2019年获得ICCV2019 VATEX视频描述挑战赛中/英文双赛道冠军。2022年获中国自动化学会技术发明奖一等奖。

研究领域

多媒体内容理解与安全,模式识别与机器学习理论研究

招生信息

招收

自动化所全日制博士、硕士

人工智能学院非全日制硕士

中国科学院大学非全日制硕士


招生方向

跨模态视频描述、检索及问答等

视频行为识别,图像目标分类、检测及分割等

基础大模型学习方法及应用

招生专业
081203-计算机应用技术
081104-模式识别与智能系统
招生方向
模式识别
图像视频内容理解
计算机视觉

教育背景

2007-09--2010-12   中国科学院自动化研究所   博士学位

工作经历

   
工作简历
2023-07~现在, 中国科学院自动化研究所, 研究员
2019-05~2020-06,Northwestern University, America, 访问学者
2016-11~2023-07,中国科学院自动化研究所, 副研究员
2015-10~2016-04,微软亚洲研究院, 访问学者
2011-08~2011-09,University of Adelaide, Australia, 访问学者
2011-01~2016-10,中国科学院自动化研究所, 助理研究员
社会兼职
2022-07-01-2024-06-30,计算机科学技术学报(英文版)JCST, JCST’s Editorial Board of Young Scientists
2020-05-20-2025-05-19,中国图象图形学会视觉大数据专业委员会, 委员
2016-07-31-今,Associate Editor, 担任国际SCI期刊KSII Transactions on Internet and Information Systems, Associate Editor

专利与奖励

   
奖励信息
(1) 基于多线索协同的网络视频内容安全分析技术与应用, 一等奖, 其他, 2022
(2) 国际VATEX视频中英文描述双赛道冠军, 一等奖, 其他, 2019
专利成果
( 1 ) 基于图卷积网络的人体骨架行为识别方法、系统、装置, 专利授权, 2021, 第 1 作者, 专利号: CN110222611B

( 2 ) 基于角度无关性的骨架行为识别方法、系统及设备, 专利授权, 2021, 第 1 作者, 专利号: CN108764050B

( 3 ) 基于对比的快速暴恐视频识别方法, 专利授权, 2021, 第 3 作者, 专利号: CN108734106B

( 4 ) 基于时空注意卷积神经网络的行为识别方法及装置, 专利授权, 2020, 第 3 作者, 专利号: CN109241829B

( 5 ) 基于特征空间变化的蒸馏学习方法、系统、装置, 专利授权, 2020, 第 4 作者, 专利号: CN110135562B

( 6 ) 基于特征变换度量网络的少样本人体行为识别方法及系统, 发明专利, 2020, 第 1 作者, 专利号: CN112001345A

( 7 ) 多尺度加宽残差网络、小目标识别检测网络及其优化方法, 发明专利, 2020, 第 5 作者, 专利号: CN111626373A

( 8 ) 基于图学习的小样本图像识别方法及系统, 发明专利, 2020, 第 4 作者, 专利号: CN111598167A

( 9 ) 基于骨骼关节点分区域分层次的行为识别方法、系统, 专利授权, 2020, 第 1 作者, 专利号: CN110215216B

( 10 ) 基于各向异性卷积的图像分类方法及系统, 发明专利, 2020, 第 5 作者, 专利号: CN111126494A

( 11 ) 融合互补特征的视觉人体行为识别方法, 专利授权, 2020, 第 3 作者, 专利号: CN106874838B

( 12 ) 基于分解和剪枝的卷积神经网络压缩方法、系统、装置, 发明专利, 2020, 第 5 作者, 专利号: CN110782019A

( 13 ) 一种基于贝叶斯模型的视觉人体行为识别方法, 发明专利, 2017, 第 3 作者, 专利号: CN106529426A

( 14 ) 一种轨迹建模与检索方法, 发明专利, 2015, 第 3 作者, 专利号: CN105205145A

( 15 ) 一种基于图核的人体行为识别方法, 发明专利, 2015, 第 3 作者, 专利号: CN104992168A

( 16 ) 一种基于语义特征自动学习与筛选的人类行为识别方法, 发明专利, 2014, 第 3 作者, 专利号: CN104063721A

出版信息

发表论文
(1) Improving Visual Grounding with Visual-Linguistic Verification and Iterative Reasoning, 2020 IEEE Conference on Computer Vision and Pattern Recognition (CVPR), 2022, 通讯作者
(2) Learning Video-Text Aligned Representations for Video Captioning, ACM Transactions on Multimedia Computing Communications and Applications, 2022, 通讯作者
(3) EMScore: Evaluating Video Captioning via Coarse-Grained and Fine-Grained Embedding Matching, 2022 IEEE Conference on Computer Vision and Pattern Recognition (CVPR), 2022, 通讯作者
(4) LEARNABLE PIXEL CLUSTERING VIA STRUCTURE AND SEMANTIC DUAL CONSTRAINTS FOR UNSUPERVISED IMAGE SEGMENTATION, ICIP, 2022, 通讯作者
(5) EDP: An Efficient Decomposition and Pruning Scheme for Convolutional Neural Network Compression, IEEE TRANSACTIONS ON NEURAL NETWORKS AND LEARNING SYSTEMS, 2021, 通讯作者
(6) Open-book Video Captioning with Retrieve-Copy-Generate Network, 2021 IEEE Conference on Computer Vision and Pattern Recognition (CVPR), 2021, 通讯作者
(7) Object Relational Graph with Teacher-Recommended Learning for Video Captioning, CVPR, 2020, 通讯作者
(8) Anisotropic Convolution for Image Classification, IEEE TRANSACTIONS ON IMAGE PROCESSING, 2020, 第 3 作者
(9) Graph convolutional network with structure pooling and joint-wise channel attention for action recognition, PATTERN RECOGNITION, 2020, 通讯作者
(10) STA-CNN: Convolutional Spatial-Temporal Attention Learning for Action Recognition, IEEE TRANSACTIONS ON IMAGE PROCESSING, 2020, 第 2 作者
(11) 基于伪三维卷积神经网络的手势姿态估计, Hand pose estimation using pseudo-3D convolutional neural network, 计算机应用研究, 2020, 第 4 作者
(12) VATEX Captioning Challenge 2019: Multi-modal Information Fusion and Multi-stage Training Strategy for Video Captioning, 2019, 第 4 作者
(13) 基于浅三维稠密网的多模态手势识别算法, Multimodal Gesture Recognition Algorithm Based on Shallow 3D Dense Networks, 计算机工程与应用, 2019, 第 4 作者
(14) Asymmetric 3D Convolutional Neural Networks for action recognition, PATTERN RECOGNITION, 2019, 通讯作者
(15) Knowledge Distillation via Instance Relationship Graph, 2019 IEEE/CVF CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION (CVPR 2019), 2019, 通讯作者
(16) 基于时空注意力深度网络的视角无关性骨架行为识别, Spatio-Temporal Attention Deep Network for Skeleton Based View-Invariant Human Action Recognition, 计算机辅助设计与图形学学报, 2018, 第 3 作者
(17) Dual Sticky Hierarchical Dirichlet Process Hidden Markov Model and Its Application to Natural Language Description of Motions, IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE, 2018, 第 4 作者
(18) Interaction-aware Spatio-temporal Pyramid Attention Networks for Action Classification, Procedings of European Conference on Computer Vision (ECCV2018), 2018, 第 6 作者
(19) Interaction-Aware Spatio-Temporal Pyramid Attention Networks for Action Classification, COMPUTER VISION - ECCV 2018, PT XVI, 2018, 通讯作者
(20) Context-Dependent Random Walk Graph Kernels and Tree Pattern Graph Matching Kernels With Applications to Action Recognition, IEEE TRANSACTIONS ON IMAGE PROCESSING, 2018, 通讯作者
(21) Hierarchical Nonlinear Orthogonal Adaptive-Subspace Self-Organizing Map based Feature Extraction for Human Action Recognition, 2018 AAAI Conference on Artificial Intelligence, 2018, 第 4 作者
(22) Multi-View Multi-Instance Learning Based on Joint Sparse Representation and Multi-View Dictionary Learning, IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE, 2017, 第 2 作者
(23) Diagnosing deep learning models for high accuracy age estimation from a single image, PATTERN RECOGNITION, 2017, 第 4 作者
(24) Spatio-Temporal Self-Organizing Map Deep Network for Dynamic Object Detection from Videos, 2017 IEEE Conference on Computer Vision and Pattern Recognition, 2017, 第 3 作者
(25) Fusing $${\mathcal {R}}$$ R Features and Local Features with Context-Aware Kernels for Action Recognition, International Journal of Computer Vision, 2016, 第 1 作者
(26) Graph Based Skeleton Motion Representation and Similarity Measurement for Action Recognition, COMPUTER VISION - ECCV 2016, PT VII, 2016, 通讯作者
(27) Multi-Feature Max-Margin Hierarchical Bayesian Model for Action Recognition, IEEE Conference on Computer Vision and Pattern Recognition (CVPR), 2015, 第 2 作者
(28) Human Action Recognition Based on Context-Dependent Graph Kernels, IEEE Conference on Computer Vision and Pattern Recognition (CVPR), 2014, 第 2 作者
(29) Modeling Geometric-Temporal Context With Directional Pyramid Co-Occurrence for Action Recognition, IEEE TRANSACTIONS ON IMAGE PROCESSING, 2014, 通讯作者
(30) Multi-Task Sparse Learning with Beta Process Prior for Action Recognition, 2013 IEEE CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION (CVPR), 2013, 通讯作者
(31) 3D R Transform on Spatio-Temporal Interest Points for Action Recognition, 2013 IEEE CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION (CVPR), 2013, 通讯作者
(32) 基于视觉词包模型的行为识别, 2010, 第 1 作者

科研活动

   
科研项目
( 1 ) 基于多任务稀疏学习的视频行为理解, 负责人, 国家任务, 2015-01--2018-12
( 2 ) 大数据多模态协同表征, 负责人, 国家任务, 2017-10--2021-09
( 3 ) 排序学习中的对象集结构分析和等序关系输出研究, 负责人, 国家任务, 2017-09--2020-10
( 4 ) 基于深度学习新模型的视觉自适应感知与理解, 负责人, 研究所自主部署, 2018-01--2020-12
( 5 ) 基于深度学习新模型的短视频内容感知与理解, 负责人, 境内委托项目, 2017-09--2018-08
( 6 ) 基于机器视觉的特定信息发现与抽取, 负责人, 境内委托项目, 2018-05--2019-05
( 7 ) ***信息感知探测技术, 负责人, 国家任务, 2019-02--2021-01
( 8 ) 基于深度学习的敏感视频检测新方法, 负责人, 地方任务, 2019-01--2021-12
( 9 ) 基于RGB-D视频的多模态人体行为识别研究, 负责人, 国家任务, 2020-01--2023-12
( 10 ) 基于大规模多模态预训练技术的视频检索和标题生成研究, 负责人, 境内委托项目, 2021-05--2022-04
( 11 ) 北京市基金前沿方向分析跟踪研究, 负责人, 地方任务, 2020-10--2021-09
( 12 ) 视频结构化紧致表示和内容理解, 负责人, 地方任务, 2021-12--2024-12
( 13 ) 多模态基础模型训练关键技术及应用, 负责人, 国家任务, 2023-05--2024-04
( 14 ) 开放词汇下的目标检测技术研究, 负责人, 境内委托项目, 2023-04--2024-12
参与会议
(1)Orthogonal Adaptive-Subspace Self-Organizing Map based Feature Extraction for Human Action Recognition   2018-02-01
(2)Spatio-Temporal Self-Organizing Map Deep Network for Dynamic Object Detection from Videos   2017-07-25

指导学生

现指导学生

孙迪  硕士研究生  085410-人工智能  

陈泽文  硕士研究生  081203-计算机应用技术  

吴佩轩  硕士研究生  085410-人工智能  

杨宇鑫  硕士研究生  081104-模式识别与智能系统  

张岳灏  硕士研究生  085410-人工智能  

协助指导学生

张子琦 杨力 杜杨 杨浩 王沛 孙雯 等