• 其他栏目

    胡宇鹏

    • 副研究员 硕士生导师
    • 性别:男
    • 毕业院校:山东大学
    • 学历:研究生(博士后)
    • 学位:工学博士学位
    • 在职信息:在职
    • 所在单位:软件学院
    • 入职时间: 2021-12-15
    • 办公地点:山东大学软件园校区 软件学院 科研楼 423
    • 联系方式:huyupeng@sdu.edu.cn

    访问量:

    开通时间:..

    最后更新时间:..

    个人简介

    胡宇鹏,副研究员,研究生导师,智能媒体研究中心执行主任、党支部书记。 主要从事多媒体信息检索与数据挖掘方向的研究工作,已累计在IEEE TIP、ACM TOIS、ACM Multimedia、计算机研究与发展等国内外顶级期刊和会议上发表论文40 余篇(其中第一作者、通信作者论文22篇),国家发明专利10余项。近五年主持参与多项国家自然科学基金、山东省自然科学基金、校企合作千万级横向项目等,担任IEEE TKDE、IEEE TMM、IEEE TCSVT 、ACM MM、 AAAI 等国际期刊和会议的审稿人和程序委员会委员,获得IEEE TMM 杰出审稿人等学术荣誉。


    智能媒体研究中心(iLearn) 招生简介

    按照团队leader聂礼强教授的要求,本中心培养学生的理念是“学术上立规矩,生活上无大小”。针对博士生,提供1年的海外顶级实验室交流机会,并保障衣食无忧; 鼓励读书期间学习驾驶、参加马拉松、恋爱、度假、创业等;根据以往带学生经验,在努力工作的情况下,4年可以达到博士毕业标准。针对想去工业界的硕士生,重点培养动手能力。针对想继续学术深造的硕士生,按博士标准培养,全力推荐到海内外知名实验室。


    2024 研究生招生信息

    2024iLearn招生信息.png



    研究方向

        1、多媒体信息检索

                     在多媒体(视频、图像、文本、音频)语义理解的基础上,研究:

    •                  跨模态视频片段定位(Cross-Modal Video Moment Localization)

     

    cml.png


    •                  视觉问答 (Visual Question Answering)

    vqa.png


    •                  相关技术成果落地应用于智慧电力、智慧钢铁等千万级校企合作项目中 

     


     2、大规模异构数据的通用检索

            在统一向量表征的基础上,实现近似最近邻(Approximate Nearest Neighbor, ANN)通用检索

          “通用”检索 = 向量表征 + 向量检索

    通用检索背景介绍.png

                     

              在2023年4月29日异构数据通用检索国际算法竞赛中,我们与华为2012实验室提出的QSGNGT算法

              针对级基准数据集,进行性能打榜,在5个数据集上给定Recall下的QPS,均达到第一名


    算法打榜结果.png


               协助华为合作伙伴于2023年9月,发布全球首款致力于云服务的千亿级向量数据库:GaussDB.

               QSGNGT算法为GaussDB向量数据库提供了世界第一的检索性能。

    落地应用华为向量数据库.png



     3、时间序列数据挖掘

                  针对海量、高维、实时更新的时间序列流数据,研究:时序表征学习、分类、异常检测

                  相关技术成果落地应用于传感时序数据挖掘项目中。

    ts1.png


    近五年代表性成果

    *: 通信作者, 完整列表 https://www.researchgate.net/profile/Yupeng-Hu-5

    1. Hu Y., Nie L., Liu M., Wang K., Wang Y., Hua X., Coarse-to-Fine Semantic Alignment for Cross-modal Moment Localization. IEEE Transactions on Image Processing, 2021, 30: 5933-5943.(CCF A类,SCI中科院一区 TOP期刊)

    2. Hu Y., Liu M., Su X., Gao Z., Nie L., Video Moment Localization via Deep Cross-Modal Hashing. IEEE Transactions on Image Processing, 2021, 30: 4667-4677.  ( CCF A类,SCI中科院一区 TOP期刊)   

    3. Hu Y., Wang K., Liu M., Tang H., Nie L., Semantic Collaborative Learning for Cross-Modal Moment Localization, ACM Transactions on Information Systems, 2023, 42: 1-26. ( CCF A类,SCI中科院二区 期刊)  

    4. Wang Y., Liu M.*, Li Z., Hu Y.*,  Luo X., Nie L., Unlocking the Power of Multimodal Learning for Emotion Recognition in Conversation. ACM International Conference on Multimedia, 2023, 5947-5955.  ( CCF A类 学术会议)   

    5. Zhan P., Wang S., Wang J., Qu L., Wang K., Hu Y.*, Li X., Temporal anomaly detection on IIoT-enabled manufacturing. Journal of Intelligent Manufacturing, 2021, 32:1669–1678. (SCI中科院一区 TOP期刊)

    6. 张琪,胡宇鹏*,嵇存,展鹏,李学庆.边缘计算应用:传感数据异常实时检测算法. 计算机研究与发展, 2018, 55:524-536. (CCF A类中文期刊)     

    7. Zhan P., Hu Y.*, Chen L., Luo W., Li X., SPAR: Set-based Piecewise Aggregate Representation for Time Series Anomaly Detection. Science China Information Sciences, 2021, 64:149101(article number). (CCF A类,SCI中科院二区期刊)


    近三年科研项目

    1. 国家自然科学基金面上项目“基于文本-视觉语义协同推理的跨模态视频片段定位研究”(62276155),项目负责人.

    2. 国家自然科学联合基金项目“基于目标行为的视频流智能检索”(U1936203),科研骨干.

    3. 山东省杰出青年基金项目“社交多媒体计算”(ZR2019JQ23), 科研骨干.

    4. 山东省面上基金项目“基于多媒体内容理解的目标行为视频定位技术研究”(ZR2021MF040), 项目负责人.

    5. 青岛博士后应用研究项目“跨模态目标行为检索技术研究”, 项目负责人.

    6. 山大-河钢人工智能研究院“智慧钢铁”项目, 课题负责人.

    7. 山大-智洋人工智能联合实验室“智慧电力”项目, 课题负责人.

    8. 山大-华为“近似近邻检索”算法研究项目,项目执行负责人.


    智能媒体研究中心(iLearn)  https://ilearn.qd.sdu.edu.cn/  

    应聘者可以将个人简历发送至我的邮箱(huyupeng@sdu.edu.cn)和 iLearn 2024面试考核邮箱:

    wkun03@gmail.com;Izx@mail.sdu.edu.cn 邮件主题备注:应聘岗位+姓名+学校

    招生.png