百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

Matlab和Python环境下的深度学习小项目(第二篇)

moboyou 2025-04-22 00:43 47 浏览

使用深度学习方法对脑部MRI进行年龄分类

算法程序讲解如何应用迁移学习调整预训练深层神经网络 (ResNet-18),以对大脑 MRI 数据集进行年龄分类。数据集包含从 155 名研究参与者处获得的脑部MRI数据,为了使用2D图像数据预训练的轻量级深层网络模型 (ResNet-18) ,使用2D 轴向中间切片图像。共三个年龄组类别:3-5岁,7-12,18 岁以上。

首先大致浏览下所使用的数据集

读取数据集

%Read OpenNEURO Dataset 
mriRootDataFolder = 'ds000228-1.1.0-subset';
mriDataFolder = fullfile(mriRootDataFolder, 'derivatives', 'preprocessed_data');

可视化3D Volumetric 数据

vol = niftiread(fullfile(mriDataFolder,"sub-pixar001","sub-pixar001_normed_anat.nii.gz"));
mask = niftiread(fullfile(mriDataFolder,"sub-pixar001","sub-pixar001_analysis_mask.nii.gz"));
vol = int16(vol) .* int16(mask); % Apply skull-stripping 
numSlices = size(vol,3);
imshow(vol(:,:,round(numSlices/2)));
opengl hardware
volshow(vol(:,:,1:round(numSlices/2)),'CameraViewAngle',7.5);

读取受试者数据

提取轴向切片示例

加载预训练网络

netName = 'resnet18';
net = resnet18();

netInputSize = net.Layers(1).InputSize;
inputImageSize = netInputSize(1:2);

img = imread(fullfile(classifierDataFolder, 'Adults', 'image_033.png'));
imgLabel = classify(net, imresize(img, inputImageSize)); % resize 2D brain image to match network's input image size

figure('Position',[10 10 200 200]);
imshow(img);
title([netName ' prediction: ' char(imgLabel)]);

测试结果的混淆矩阵

通过Occlusion方法得到网络所学习到的一些重要特征(对应的高亮区域)

此外,再继续可视化为两个年龄较大的类别

Matlab环境下基于深度学习的心电信号(ECG信号)识别

使用深度学习进行 ECG信号(心电信号)识别,所用MATLAB版本为R2021B

首先导入ECG信号,并进行短时傅里叶变换和连续小波变换

close all
clear all
% load ecg signal 
ecg =load('ecg.mat');
% Graphical Output
% Time Signal
%t = [0:length(ecg.data)-1]/ecg.fs;
t = [0:length(ecg.ecg)-1]/500;
plot(t,ecg.ecg)
% Short Time Fourier Analysis -- Spectrogram
pspectrum(ecg.ecg,500,'spectrogram')
% Wavelet Analysis -- Scalogram
cwt(ecg.ecg,[],500)

所使用的ECG数据集分为3类:心律失常(ARR),充血性心力衰竭 (CHF) ,正常窦性心律(NSR),本项目的目标是使用短时傅里叶变换(STFT)和连续小波变换 (CWT) 以及深层卷积神经网络 (DCNN) 对人体心电图 (ECG) 信号进行分类。共使用了来自3个 PhysioNet 数据库的 162 条心电图记录:MIT-BIH 心律失常数据库、MIT-BIH 正常窦性心律数据库和 BIDMC 充血性心力衰竭数据库,共96 个心律失常患者的数据,30 个充血性心力衰竭患者的数据,以及 36 个正常窦性心律患者的数据。共使用两个深层CNN模型:GoogLeNet 和 SqueezeNet,经过预训练用于图像识别。

使用Score-CAM方法解释深度学习的分类结果

算法程序主要讲解如何使用类激活映射(Score-CAM)研究和解释深层卷积神经网络预测结果,运行环境为MATLAB R2021b。与CAM 和 grad-CAM算法类似,但 Score-CAM 是所谓的一种“无梯度”解释方法,关于Score-CAM的参考文献如下:

Wang, H., Du, M., Yang, F. and Zhang, Z., 2019. Score-CAM: Improved Visual Explanations Via Score-Weighted Class Activation Mapping. arXiv preprint arXiv:1910.01279.

CAM相关的参考文献如下

Zhou, B., Khosla, A., Lapedriza, A., Oliva, A. and Torralba, A., 2016. Learning deep features for discriminative localization. In Proceedings of the IEEE conference on computer vision and pattern recognition (pp. 2921-2929).

grad-CAM相关的参考文献如下

Selvaraju, R.R., Cogswell, M., Das, A., Vedantam, R., Parikh, D. and Batra, D., 2017. Grad-cam: Visual explanations from deep networks via gradient-based localization. In Proceedings of the IEEE international conference on computer vision (pp. 618-626).

读取目标图像,并调整大小以适合 SqueezeNet 网络,并计算网络最后一个卷积层之后的 ReLU 层图像的激活值。

addpath('testImg\')
im = imread('CatImg.png');
imResized = imresize(im,[inputSize(1:2)]);

图像分类

[PredCategory,scoreBaseLine]=classify(net,imResized);
PredCategory

提取预测类别的索引

classIdx=find((net.Layers(end, 1).Classes==PredCategory)==1);

使用激活函数计算特征图

获取输入图像和调整后的特征图的点积,所获得图像如下


展示score-cam的结果

基于LSTM的NASA涡轮喷气发动机风扇的剩余使用寿命(remaining useful life,RUL)预测

算法程序执行环境为Python,使用Keras深度学习模块,执行基于LSTM的NASA涡轮喷气发动机风扇的剩余使用寿命(remaining useful life,RUL)预测,Lookback=10。

#基于LSTM的NASA涡轮喷气发动机风扇的剩余寿命RUL预测
#导入相关模块
import numpy as np
import pandas as pd
import seaborn as sns
import math
import matplotlib.pyplot as plt
from matplotlib import cm
#机器学习相关模块
from sklearn.decomposition import PCA
from sklearn.preprocessing import MinMaxScaler
from sklearn.model_selection import train_test_split, cross_val_score
from sklearn.preprocessing import QuantileTransformer , PowerTransformer
from sklearn.ensemble import RandomForestRegressor
from sklearn.metrics import mean_absolute_error
from sklearn.metrics import r2_score
from sklearn.metrics import accuracy_score
from sklearn.metrics import mean_squared_error
from sklearn.linear_model import LinearRegression
from sklearn.linear_model import LogisticRegression
#深度学习相关模块
from keras import optimizers
from keras.models import Sequential
from keras.layers import TimeDistributed, Flatten
from keras.layers.core import Dense, Dropout, Activation
from keras.layers.recurrent import LSTM
from sklearn.metrics import mean_squared_error


import warnings 
warnings.filterwarnings('ignore')


%matplotlib inline
cmap = cm.get_cmap('Spectral') # Colour map (there are many others)


from sklearn.metrics import mean_absolute_error
from sklearn.metrics import mean_squared_error
from sklearn.metrics import explained_variance_score
from sklearn.metrics import r2_score


from keras.models import load_model


#数据分析
train_file = "train_FD001.txt" #训练数据
test_file = "test_FD001.txt"#测试数据
RUL_file = "RUL_FD001.txt"#剩余寿命数据
#读取文件
df = pd.read_csv(train_file,sep=" ",header=None)
df.head()


#columns = ['unit_number','time_in_cycles','setting_1','setting_2','TRA','T2','T24','T30','T50','P2','P15','P30','Nf',
#           'Nc','epr','Ps3 0','phi','NRf','NRc','BPR','farB','htBleed','Nf_dmd','PCNfR_dmd','W31','W32' ]
#d删除NaN值
df.drop(columns=[26,27],inplace=True)
columns = ["Section-{}".format(i)  for i in range(26)]
df.columns = columns
df.head()
#每个参数的数据统计信息
df.describe()
#有关数据的相关信息,包括传感器ID,时间,传感器数据等
#Section-0 is MachineID
#Section-1 is time in, Cycles
#Section-2~4 is Opertional Settings
#Section-5~25 is sensor's data
#Data Set: FD001
#Train trjectories: 100
#Test trajectories: 100
#Conditions: ONE (Sea Level)
#Fault Modes: ONE (HPC Degradation)


#命名
MachineID_name = ["Section-0"]
RUL_name = ["Section-1"]
OS_name = ["Section-{}".format(i) for i in range(2,5)]
Sensor_name = ["Section-{}".format(i) for i in range(5,26)]




# 将数据转换为pandas数据框架
MachineID_data = df[MachineID_name]
RUL_data = df[RUL_name]
OS_data = df[OS_name]
Sensor_data = df[Sensor_name]




#将数据转换为pandas序列
MachineID_series = df["Section-0"]
RUL_series = df["Section-1"]


grp = RUL_data.groupby(MachineID_series)
max_cycles = np.array([max(grp.get_group(i)["Section-1"]) for i in MachineID_series.unique()])
print("Max Life >> ",max(max_cycles))
print("Mean Life >> ",np.mean(max_cycles))
print("Min Life >> ",min(max_cycles))


#删除不携带有关单元状态信息的常量值的列
df.drop(columns=["Section-0",
                "Section-4", # Operatinal Setting
                "Section-5", # Sensor data
                "Section-9", # Sensor data
                "Section-10", # Sensor data
                "Section-14",# Sensor data
                "Section-20",# Sensor data
                "Section-22",# Sensor data
                "Section-23"] , inplace=True)

MATLAB生成对抗网络系列(11种,对抗自编码器,辅助分类生成对抗网络,条件生成对抗网络,Pix-to-Pix等)

环境配置

  • MATLAB 2021b
  • Deep Learning Toolbox
  • Parallel Computing Toolbox

目录

  • Generative Adversarial Network (GAN)
  • Least Squares Generative Adversarial Network (LSGAN)
  • Deep Convolutional Generative Adversarial Network (DCGAN)
  • Conditional Generative Adversarial Network (CGAN)
  • Auxiliary Classifier Generative Adversarial Network (ACGAN)
  • InfoGAN
  • Adversarial AutoEncoder (AAE)
  • Pix2Pix
  • Wasserstein Generative Adversarial Network (WGAN)
  • Semi-Supervised Generative Adversarial Network (SGAN)
  • CycleGAN
  • DiscoGAN

基于小波分析和深度学习的时间序列分类并可视化相关特征

算法程序运行环境为MATLAB R2021B。加载预训练的 GoogLeNet网络的时候,如果未安装 Deep Learning ToolboxTM Model for GoogLeNet Network 支持包,软件将在附加功能资源管理器中提供所需支持包的链接

该算法使用连续小波变换 (CWT) 和深度卷积神经网络 (CNN) 对人体心电图 (ECG) 信号进行分类,并进行特征可视化便于以后的深入分析。由于从头训练深度 CNN 的计算成本很高,并且需要大量的训练数据,在很多应用中并没有足够数量的训练数据可用,因此采用迁移学习方法GoogLeNet 对ECG波形的CWT时频谱图进行分类。

使用的ECG数据分为3种:心律失常(ARR)、充血性心力衰竭(CHF) 和正常窦性心律(NSR),分别来自MIT-BIH Arrhythmia数据库、MIT-BIH Normal Sinus Rhythm数据库和BIDMC Congestive Heart Failure数据库,首先看一下这3种波形的样子。

创建CWT时频谱图

显示网络的层次图

修改网络并进行训练

可视化第一个卷积层的网络滤波器权重

查看第一个卷积层 'conv1-7x7_s2' 的输出激活区域

将最强通道与原始图像进行比较

5种深度学习可解释性方法:LIME,GradientAttribution,Occlusion,GradCam等方法

算法程序运行环境为MATLAB R2021b

大佬说了,最简单可以将可解释性分为两类,第一类是全局性解释,第二类是局域性解释。

全局性解释 试图可视化神经网络每个神经元学到了什么。

局域性解释 只关注输入空间中在这个图片周围的很小区域。

以Local Interpretable Model-Agnostic Explanations(LIME)算法为例,进行可视化。

重要特征展示


使用卷积神经网络CNN进行涡轮风扇发动机的剩余使用寿命(remaining useful life,RUL)估计

注意:该程序运行环境为MATLAB R2021B

算法程序主要讲解如何使用卷积神经网络 CNN)来预测涡轮风扇发动机的的剩余使用寿命(remaining useful life,RUL)。 深度学习的优势在于模型无需通过手动特征提取或特征选择来预测 RUL。 此外,基于深度学习的 RUL 预测模型不需要信号处理的先验知识。

MATLAB环境下基于支持向量机、孤立森林和LSTM自编码器的三轴振动数据的机械状态异常检测

算法程序主要讲解如何使用机器学习和深度学习来进行机械状态异常检测,使用机械振动数据。

数据集包含来自工业机器的三轴振动测量值, 在计划维护之前和维护之后采集数据。 假定在定期维护后采集的数据代表机器的正常运行状况,维护前的数据代表正常或异常情况。 每轴的数据存储在单独的列中,每个文件包含 7000 个测量值。

基于迁移学习的滚动轴承故障诊断

算法程序运行环境为MATLAB R2021B,主要讲解如何使用深度学习(迁移学习)方法对滚动轴承进行故障诊断,讲解如何将一维轴承振动信号转换为二维尺度图图像并使用预训练网络应用迁移学习对轴承故障进行分类。 迁移学习显著减少了传统轴承诊断方法特征提取和特征选择所花费的时间,并在小型数据集中获得了良好的准确性。

面包多代码

https://mbd.pub/o/GeBENHAGEN

相关推荐

Excel技巧:SHEETSNA函数一键提取所有工作表名称批量生产目录

首先介绍一下此函数:SHEETSNAME函数用于获取工作表的名称,有三个可选参数。语法:=SHEETSNAME([参照区域],[结果方向],[工作表范围])(参照区域,可选。给出参照,只返回参照单元格...

Excel HOUR函数:“小时”提取器_excel+hour函数提取器怎么用

一、函数概述HOUR函数是Excel中用于提取时间值小时部分的日期时间函数,返回0(12:00AM)到23(11:00PM)之间的整数。该函数在时间数据分析、考勤统计、日程安排等场景中应用广泛。语...

Filter+Search信息管理不再难|多条件|模糊查找|Excel函数应用

原创版权所有介绍一个信息管理系统,要求可以实现:多条件、模糊查找,手动输入的内容能去空格。先看效果,如下图动画演示这样的一个效果要怎样实现呢?本文所用函数有Filter和Search。先用filter...

FILTER函数介绍及经典用法12:FILTER+切片器的应用

EXCEL函数技巧:FILTER经典用法12。FILTER+切片器制作筛选按钮。FILTER的函数的经典用法12是用FILTER的函数和切片器制作一个筛选按钮。像左边的原始数据,右边想要制作一...

office办公应用网站推荐_office办公软件大全

以下是针对Office办公应用(Word/Excel/PPT等)的免费学习网站推荐,涵盖官方教程、综合平台及垂直领域资源,适合不同学习需求:一、官方权威资源1.微软Office官方培训...

WPS/Excel职场办公最常用的60个函数大全(含卡片),效率翻倍!

办公最常用的60个函数大全:从入门到精通,效率翻倍!在职场中,WPS/Excel几乎是每个人都离不开的工具,而函数则是其灵魂。掌握常用的函数,不仅能大幅提升工作效率,还能让你在数据处理、报表分析、自动...

收藏|查找神器Xlookup全集|一篇就够|Excel函数|图解教程

原创版权所有全程图解,方便阅读,内容比较多,请先收藏!Xlookup是Vlookup的升级函数,解决了Vlookup的所有缺点,可以完全取代Vlookup,学完本文后你将可以应对所有的查找难题,内容...

批量查询快递总耗时?用Excel这个公式,自动计算揽收到签收天数

批量查询快递总耗时?用Excel这个公式,自动计算揽收到签收天数在电商运营、物流对账等工作中,经常需要统计快递“揽收到签收”的耗时——比如判断某快递公司是否符合“3天内送达”的服务承...

Excel函数公式教程(490个实例详解)

Excel函数公式教程(490个实例详解)管理层的财务人员为什么那么厉害?就是因为他们精通excel技能!财务人员在日常工作中,经常会用到Excel财务函数公式,比如财务报表分析、工资核算、库存管理等...

Excel(WPS表格)Tocol函数应用技巧案例解读,建议收藏备用!

工作中,经常需要从多个单元格区域中提取唯一值,如体育赛事报名信息中提取唯一的参赛者信息等,此时如果复制粘贴然后去重,效率就会很低。如果能合理利用Tocol函数,将会极大地提高工作效率。一、功能及语法结...

Excel中的SCAN函数公式,把计算过程理清,你就会了

Excel新版本里面,除了出现非常好用的xlookup,Filter公式之外,还更新一批自定义函数,可以像写代码一样写公式其中SCAN函数公式,也非常强大,它是一个循环函数,今天来了解这个函数公式的计...

Excel(WPS表格)中多列去重就用Tocol+Unique组合函数,简单高效

在数据的分析和处理中,“去重”一直是绕不开的话题,如果单列去重,可以使用Unique函数完成,如果多列去重,如下图:从数据信息中可以看到,每位参赛者参加了多项运动,如果想知道去重后的参赛者有多少人,该...

Excel(WPS表格)函数Groupby,聚合统计,快速提高效率!

在前期的内容中,我们讲了很多的统计函数,如Sum系列、Average系列、Count系列、Rank系列等等……但如果用一个函数实现类似数据透视表的功能,就必须用Groupby函数,按指定字段进行聚合汇...

Excel新版本,IFS函数公式,太强大了!

我们举一个工作实例,现在需要计算业务员的奖励数据,右边是公司的奖励标准:在新版本的函数公式出来之前,我们需要使用IF函数公式来解决1、IF函数公式IF函数公式由三个参数组成,IF(判断条件,对的时候返...

Excel不用函数公式数据透视表,1秒完成多列项目汇总统计

如何将这里的多组数据进行汇总统计?每组数据当中一列是不同菜品,另一列就是该菜品的销售数量。如何进行汇总统计得到所有的菜品销售数量的求和、技术、平均、最大、最小值等数据?不用函数公式和数据透视表,一秒就...