“北京大学博雅人工智能讲堂”首场讲座举行，高文院士讲授“人工智能前沿技术和高质量发展解析”

成果速览 | CVPR2024细粒度视觉感知多模态大模型Pink、LocLLM

本文分享了来自北京大学张史梁长聘副教授课题组的工作《Pink: Unveiling the Power of Referential Comprehension for Multi-modal LLMs》与《LocLLM: Exploiting Generalizable Human Keypoint Localization via Large Language Model》。上述工作构建的多模态大模型Pink、LocLLM分别通过为大语言模型添加图像细粒度指代分析能力实现了对图像中特定物体和人体的细粒度感知。实验证明了所提出框架和方法在各类多模态任务、指代...

马思伟教授-贾川民研究员团队获国际智能编码CLIC挑战赛视频赛道冠军

2024年3月22-24日，国际数据压缩领域顶级会议IEEE Data Compression Conference（简称DCC）在美国犹他州召开，会议同期举办了第六届国际智能编码技术挑战赛（The 6th Challenge on Learned Image Compression，CLIC）。马思伟教授-贾川民研究员团队联合北大-抖音集团智能媒体联合实验室成员，获得了本届技术挑战赛视频压缩赛道（Video Compression Track）冠军。参赛方案提出了融合神经网络编码技术和混合编码框架的思路，采用...

高文院士荣获2023年度吴文俊人工智能科学技术奖最高成就奖

2024年3月7日，中国人工智能学会发布《2023年度吴文俊人工智能科学技术奖奖励公告》，中国工程院院士高文获得“吴文俊人工智能科学技术奖最高成就奖”。吴文俊人工智能科学技术奖，被誉为“中国智能科技最高奖”，具备提名推荐国家科学技术奖资格，代表人工智能领域的最高荣誉象征。该奖项设立于2011年，以人民科学家、人工智能先驱、中国人工智能学会原名誉理事长吴文俊先生命名，由中国人工智能学会发起设立，奖励在智能科学...

高 文 ：人工智能前沿技术和高质量发展解析

视频与视觉技术国家工程研究中心2024新年贺词

2024年即将到来，我谨代表北京大学视频与视觉技术国家工程研究中心向全体师生、员工及家人和长期以来关心支持中心发展的社会各界朋友致以新年的祝福！

郑雅菁入选“CCF博士学位论文激励计划”

近日，中国计算机学会公布了2023年“CCF博士学位论文激励计划”评选结果，共9篇博士学位论文入选，5篇博士学位论文获得提名。北大计算机学院、视频与视觉技术国家工程研究中心2022届毕业生郑雅菁的学位论文《脉冲视觉的视网膜编码模型与超高速应用研究》入选，指导教师为黄铁军教授。CCF博士学位论文激励计划是由中国计算机学会为推动中国计算机领域的科技进步，鼓励创新性研究，激励计算机领域的博士研究生潜心钻研，务实创新...

北京大学视频与视觉技术国家工程研究中心召开2023年度工作总结会议

12月18日，视频与视觉技术国家工程研究中心2023年度工作总结会议在北京大学召开。主任高文院士，以及研究中心本部、深圳分中心、杭州分中心教职员工、学生代表60余人参会交流，会议由副主任黄铁军教授、马思伟教授主持。本次会议还特别邀请了咪咕文化科技有限公司、北京智芯微电子科技有限公司、福州城投新基建集团有限公司、福州城投智慧微城产业发展有限公司、博云视觉（北京）科技有限公司、华为媒体编解码技术实验室、荣耀...

北大—抖音集团智能媒体联合实验室第一次会议召开

2023年11月30日下午，“北大—抖音集团智能媒体联合实验室”第一次会议在北京大学英杰交流中心召开。北京大学计算机学院副院长崔斌教授，联合实验室主任、视频与视觉技术国家工程研究中心副主任马思伟教授，抖音集团人力资源副总裁杜宏，火山引擎视频云架构技术总监王悦等领导和专家出席了会议。会议围绕联合实验室运行情况、科研进展展开，总结了联合实验室一年来工作成果，进一步深化讨论了双方合作内容。 会议现场 联合实验...

祝贺马思伟教授当选IEEE Fellow

北京时间11月22日，国际电气和电子工程师协会（IEEE）公布了 2024 年度新晋 Fellow 名单，北京大学视频与视觉技术国家工程研究中心副主任马思伟教授成功入选，入选理由：对视频编码技术和标准研制方面(video coding technologies and standards)做出贡献。北京大学博雅特聘教授 北京大学视频与视觉技术国家工程研究中心副主任 国家杰青、科学探索奖获得者马思伟教授长期从事高效视频编码研究，聚焦于资源约束条件下的率失真优化...

马思伟教授团队成果“沉浸式视频编解码关键技术与应用”荣获2022年北京市科学技术进步一等奖

2023年11月6日，北京市人民政府发布关于2022年度北京市科学技术奖励的决定，并公布“2022年北京市科学技术奖授奖清单”。由北京大学视频与视觉技术国家工程研究中心副主任马思伟教授、高文院士牵头申报的“沉浸式视频编解码关键技术与应用”项目，荣获北京市科学技术进步一等奖。北京市科学技术奖共分为突出贡献中关村奖、杰出青年中关村奖、国际合作中关村奖、自然科学奖、技术发明奖、科学技术进步奖6个类别。其中，科学技术...

黄铁军、杜凯团队在Nature子刊发表生物神经网络精细仿真算法并证明理论最优

ChatGPT为代表的大模型涌现出了强大的智能，改变了人们对人工智能的看法，越来越多的人相信超越人类的AGI（人工通用智能）正在到来。今天大模型的参数规模（人工神经网络的神经连接数量）已经达到万亿级，但也只有人脑的百分之一（人脑神经突触数量约百万亿）。进而，人工神经网络还只是对生物神经网络的粗略模仿，在神经元模型和神经网络结构方面与人脑相距甚远，在信号表达机理上存在根本差别。人脑是亿万年自然进化“训练”...

实验室田永鸿课题组脉冲神经网络深度学习开源框架荣登Science子刊

脉冲神经网络(Spiking Neural Network, SNN)被誉为第三代神经网络，使用更低层次的生物神经系统的抽象，既是神经科学中研究大脑原理的基本工具，又因其稀疏计算、事件驱动、超低功耗的特性而备受计算科学的关注。随着深度学习方法的引入，SNN的性能得到大幅度提升，脉冲深度学习(Spiking Deep Learning)成为新兴的研究热点。传统SNN框架更多的关注生物可解释性，致力于构建精细脉冲神经元并仿真真实生物神经系统，并不支持自动...

祝贺实验室博士生常建慧同学获得2023年度字节跳动奖学金

字节跳动奖学金计划是字节跳动公司发起的一项年度人才培养项目。该计划面向中国大陆地区高等院校的在校生，每年支持10名学生，旨在帮助具有创新精神的科技人才用专业知识解决实际难题，用技术回馈社会，引领未来。在本年度的奖学金计划中，字节跳动公司共收到了来自计算存储网络、数据库、语音、计算机视觉（CV）、机器学习、安全、机器人、自然语言处理等15个以上专业研究领域的近300位顶尖技术人才的申请。北京大学视频与视觉...

田永鸿教授指导的学生陈光耀荣获2023年北京大学优秀博士学位论文

为进一步提高博士学位论文质量，培育学科前沿具有重要意义、创新性强的博士学位论文，北京大学每年评选优秀博士学位论文。2023年度共100篇论文被评选为北京大学优秀博士学位论文（含医学部）。视频与视觉技术国家工程研究中心田永鸿教授指导的陈光耀同学的博士学位论文《开放视觉场景下未知类建模与学习方法研究》荣获2023年北京大学优秀博士学位论文。论文针对复杂多变的开放视觉场景，聚焦场景中的未知类检测与新类别发现挑战...