多媒体信号处理与智能微系统团队

团队负责人:刘昱

主要从事多媒体信号处理、无信标人员导航及定位、机器学习等方面的研究,承担多项国家自然科学基金、重点研计划课题、天津重大专项等纵向项目,与华为、中兴、亿尚等企业完成横向项目10余项。

研究方向与成果

  应用技术研究1:基于惯性传感的室内定位及动作识别系统

  基于惯性传感数据研究行人导航和定位系统及算法(PDR)

  获得2017年IPIN国际室内定位比赛第二名,正在开展PDR+ SLAM室内定位技术研究

  相关项目:国家基金2项

  发明专利:一种用于提高多源传感器融合中航向精度的磁场干扰检测装置及方法


  应用技术研究2:面向神经系统疾病筛查的立体眼动分析

  与国内顶级儿童孤独症、阿尔茨海默病诊疗机构合作,开展智能立体眼动信号分析,研制面向神经系统疾病筛查的解决方案,针对不同的疾病研究视频刺激内容及智能深度学习模型;为神经系统疾病的筛查和诊断提供智能助手

  发明专利:刘昱等,刘昱; 李畅; 一种眼动数据与精神系统疾病的关联分析方法


  应用技术研究3:基于营养素分析的智能营养分析与推荐(APP及大数据云计算)

  与国内顶级临床营养科合作,开展营养科学与智能信息处理的交叉研究。采用APP对用户的饮食数据进行采集和智能分析;构建营养摄入与健康云端智能大数据平台,针对糖尿病等慢性疾病,融合医疗干预数据,构建营养科学数据的智能数字疗法示范。

  相关项目:天津重大科技计划

  发明专利:一种基于机器学习的营养饮食推荐及评价方法等


  应用技术研发4:面向移动端的低复杂度人脸图像的超分辨率增强技术及软件

  设计多连接和多通道的卷积神经网络,实现人脸图像的超分辨率重建增强,当通信带宽受限时,可将接收到的低画质图片重建为高画质图片进行显示

  发明专利:一种面向移动终端的低复杂度JPEG人脸图像超分增强技术


  应用基础研究5:机器视觉工业测量、三维点云模型重建及微波光子技术

  基于激光测量、相控阵雷达、多波长光纤激光器等传感技术,设计机械外形表面等工业测量系统

  Yongmao Sun,张瑞峰,Qiang Li,Zhaoying Wang,Tunable Multiwavelength Fiber Laser Source for Continuous True-Time-Delay Beamforming,IEEE Photonics Technology Letters, 2016, 28(11):1261-1263

  Jinglin Sun, 张瑞峰, Shan Du,Liqiang Zhang, Global Adaptive 4-Points Congruent Sets Registration for 3D Indoor Scenes with Robust Estimation, IEEE Access, 2020, 8: 7539-7548


  应用技术研究6:面向SSVEP脑机接口、智能助听器的低噪声信号处理技术

  面向伤残人士的智能家居的SSVEP-BCI脑机接口技术,解决稳态视觉诱发电位的相位编、解码问题;智能助听器的啸叫问题;联心电图(ECG)分析,特征融合后进行心律失常的分类等

  发明专利:基于FFT谱校正的频率相位脑机接口编码方法及其装置

  发明专利:基于分段陷波的助听器啸叫检测与抑制方法及装置

  发明专利:基于S变换特征选择的心律失常分类方法



  应用项目及产品1:专业级音视频数据处理硬件、软件及系统

  在数字电视、网络流媒体设备、多媒体处理软件领域,完成了多项企业委托软硬件产品定制,云端智能大数据处理,APP等,研发成果产品化并广泛应用



  应用项目及产品2:定制微系统芯片SiP(System In a Package)

  基于SiP技术的芯片微系统设计与优化,边缘智能计算视觉系统,SiP封装基板/框架设计,芯片/封装/基板协同仿真,iP系统方案、原理图、布局、布线的设计及系统方案开发


  应用项目及产品3:可定制的边缘端AI处理BOX

  边缘智能计算视觉系统,可见光与红外摄像头智能联动,智慧安防监控、超低延时高密集人脸识别、人群密度统计、跌倒检测、黑暗环境下入侵检测、火灾早期预警、吸烟检测等,智能车载安防检测设备,移动便携安防检测设备,配合各类IoT设备,在线实时联动,轻量级的实现“万物”智能互联。面向开阔区域的亿级像素广域监控,实现超200米外的人员识别



  应用项目及产品4:智能SoC系统硬件解决方案

  基于FPGA,设计自主可控SoC软硬件系统,定制RISC-V及各类智能分析模型



  应用项目及产品5:便携式广播级多路视频直播系统

  专业影视级图像处理技术,多机位画面同步,5画面预监同步显示,智能感光、自动控噪优化,4G/5G、WiFi、网络全平台推流,对接多类伴侣软件、会议软件

  直播,分级存储


  应用项目及产品6:测绘地理信息4D数据构建

  基础地理信息“4D”产品: DOM、DLG、DEM、DSM 智能化数据生产及再加工,高精度导航电子地图,空间数据分析模型、地理信息系统、政务空间地理库等信息化建设



  应用项目及产品7:智慧城市的数字孪生

  城市/工业园区/乡镇/自然保护地高精度实景三维模型--“数字孪生”基底

  “实景三维中国”、智慧城市、应急管理,工地实景三维:土石方估算、智慧工地;三维激光雷达:文物保护等。


  应用项目及产品8:智慧社区管理系统软件

  融合物联网设备,公共管理信息等多源数据,建立感知、数据、应用以及用户等多层次的软件管理体系,对各类数据进行汇聚存储、清洗标注和分析处理,通过大数据服务等为管理决策赋能,提升管理和应急处置能力。