Yupeng Hu
Personal Homepage
Personal Profile

胡宇鹏,副研究员,研究生导师,智能媒体研究中心执行主任、党支部书记。 主要从事多媒体信息检索与数据挖掘方向的研究工作,已累计在IEEE TIP、ACM TOIS、ACM Multimedia、计算机研究与发展等国内外顶级期刊和会议上发表论文50 余篇(其中第一作者、通信作者论文28篇),国家发明专利10余项。近五年主持参与多项国家自然科学基金、山东省自然科学基金、校企合作千万级横向项目等,担任IEEE TKDE、IEEE TMM、IEEE TCSVT 、ACM MM、 AAAI 等国际期刊和会议的审稿人和程序委员会委员,获得IEEE TMM 杰出审稿人等学术荣誉。


智能媒体研究中心(iLearn) 招生简介

按照团队leader聂礼强教授的要求,本中心培养学生的理念是“学术上立规矩,生活上无大小”。针对博士生,提供1年的海外顶级实验室交流机会,并保障衣食无忧; 鼓励读书期间学习驾驶、参加马拉松、恋爱、度假、创业等;根据以往带学生经验,在努力工作的情况下,4年可以达到博士毕业标准。针对想去工业界的硕士生,重点培养动手能力。针对想继续学术深造的硕士生,按博士标准培养,全力推荐到海内外知名实验室。


2025 研究生招生信息

2025招生简介.jpg



研究方向

    1、多媒体信息检索

                 在多媒体(视频、图像、文本、音频)语义理解的基础上,研究:

  •                  跨模态视频片段定位(Cross-Modal Video Moment Localization)

 

cml.png


  •                  视觉问答 (Visual Question Answering)

vqa.png


  •                  相关技术成果落地应用于智慧电力、智慧钢铁等千万级校企合作项目中 

 


 2、大规模异构数据的通用检索

        在统一向量表征的基础上,实现近似最近邻(Approximate Nearest Neighbor, ANN)通用检索

      “通用”检索 = 向量表征 + 向量检索

通用检索背景介绍.png

                 

          在2023年4月29日异构数据通用检索国际算法竞赛中,我们与华为2012实验室提出的QSGNGT算法

          针对级基准数据集,进行性能打榜,在5个数据集上给定Recall下的QPS,均达到第一名


算法打榜结果.png


           协助华为合作伙伴于2023年9月,发布全球首款致力于云服务的千亿级向量数据库:GaussDB.

           QSGNGT算法为GaussDB向量数据库提供了世界第一的检索性能。

落地应用华为向量数据库.png



 3、时间序列数据挖掘

              针对海量、高维、实时更新的时间序列流数据,研究:时序表征学习、分类、异常检测

              相关技术成果落地应用于传感时序数据挖掘项目中。

ts1.png


已发表学术论文

*: 通信作者, 完整列表 https://www.researchgate.net/profile/Yupeng-Hu-5

1. Hu Y., Nie L., Liu M., Wang K., Wang Y., Hua X., Coarse-to-Fine Semantic Alignment for Cross-modal Moment Localization. IEEE Transactions on Image Processing, 2021, 30: 5933-5943.(CCF A类,SCI中科院一区 TOP期刊)

2. Hu Y., Liu M., Su X., Gao Z., Nie L., Video Moment Localization via Deep Cross-Modal Hashing. IEEE Transactions on Image Processing, 2021, 30: 4667-4677.  ( CCF A类,SCI中科院一区 TOP期刊)   

3. Hu Y., Wang K., Liu M., Tang H., Nie L., Semantic Collaborative Learning for Cross-Modal Moment Localization, ACM Transactions on Information Systems, 2023, 42: 1-26. ( CCF A类,SCI中科院二区 期刊)  

4. Wang Y., Liu M.*, Li Z., Hu Y.*,  Luo X., Nie L., Unlocking the Power of Multimodal Learning for Emotion Recognition in Conversation. ACM International Conference on Multimedia, 2023, 5947-5955.  ( CCF A类 学术会议)   

5. Wang K., Liu H., Jie L., Li Z., Hu Y.*,  Nie L., Explicit Granularity and Implicit Scale Correspondence Learning for Point-Supervised Video Moment Localization. ACM International Conference on Multimedia, 2024.  ( CCF A类 学术会议)   

6. Tang H., Hu Y.*, Wang Y., Zhang S., Xu M., Zhu J., Zheng Q., Listen as you wish: Fusion of audio and text for cross-modal event detection in smart cities. Information Fusion, 2024. (SCI中科院一区 TOP期刊)

7. 张琪,胡宇鹏*,嵇存,展鹏,李学庆.边缘计算应用:传感数据异常实时检测算法. 计算机研究与发展, 2018, 55:524-536. (CCF A类中文期刊)     

8. Zhan P., Hu Y.*, Chen L., Luo W., Li X., SPAR: Set-based Piecewise Aggregate Representation for Time Series Anomaly Detection. Science China Information Sciences, 2021, 64:149101(article number). (CCF A类期刊)


近三年科研项目

1. 国家自然科学基金面上项目“基于文本-视觉语义协同推理的跨模态视频片段定位研究”(62276155),项目负责人.

2. 国家自然科学联合基金项目“基于目标行为的视频流智能检索”(U1936203),科研骨干.

3. 山东省杰出青年基金项目“社交多媒体计算”(ZR2019JQ23), 科研骨干.

4. 山东省面上基金项目“基于多媒体内容理解的目标行为视频定位技术研究”(ZR2021MF040), 项目负责人.

5. 山大-华为“近似近邻检索”算法研究项目,项目执行负责人.

6. 山大-华为“语义检索增强”算法研究项目,项目执行负责人.

7. 山大-河钢人工智能研究院“智慧钢铁”项目, 课题负责人.

8. 山大-智洋人工智能联合实验室“智慧电力”项目, 课题负责人.



智能媒体研究中心(iLearn)  https://ilearn.qd.sdu.edu.cn/  

应聘者可以将个人简历发送至我的邮箱(huyupeng@sdu.edu.cn)和 iLearn 2024面试考核邮箱:

wkun03@gmail.com;Izx@mail.sdu.edu.cn 邮件主题备注:应聘岗位+姓名+学校

招生.png



 

 


  • Education Background
  • Work Experience
No Content
  • Social Affiliations
  • Research Focus
No Content
Personal information

Associate Professor
Supervisor of Master's Candidates

Gender : Male

Alma Mater : 山东大学

Education Level : Postgraduate (Postdoctoral)

Degree : Doctoral Degree in Engineering

Status : Employed

School/Department : 软件学院

Date of Employment : 2021-12-15

Business Address : 山东大学软件园校区 软件学院 科研楼 423

Contact Information : huyupeng@sdu.edu.cn

You are visitors

The Last Update Time : ..


Copyright All Rights Reserved Shandong University Address: No. 27 Shanda South Road, Jinan City, Shandong Province, China: 250100
Information desk: (86) - 0531-88395114
On Duty Telephone: (86) - 0531-88364731 Construction and Maintenance: Information Work Office of Shandong University

MOBILE Version