zoukankan      html  css  js  c++  java
  • Keras实现autoencoder

    Keras使我们搭建神经网络变得异常简单,之前我们使用了Sequential来搭建LSTM:keras实现LSTM

    我们要使用Keras的functional API搭建更加灵活的网络结构,比如说本文的autoencoder,关于autoencoder的介绍可以在这里找到:deep autoencoder

    现在我们就开始。

    step 0 导入需要的包

    1 import keras
    2 from keras.layers import Dense, Input
    3 from keras.datasets import mnist
    4 from keras.models import Model
    5 import numpy as np

     step 1 数据预处理

    这里需要说明一下,导入的原始数据shape为(60000,28,28),autoencoder使用(60000,28*28),而且autoencoder属于无监督学习,所以只需要导入x_train和x_test.

    1 (x_train, _), (x_test, _) = mnist.load_data()
    2 x_train = x_train.astype('float32')/255.0
    3 x_test = x_test.astype('float32')/255.0
    4 #print(x_train.shape)
    5 x_train = x_train.reshape(x_train.shape[0], -1)
    6 x_test = x_test.reshape(x_test.shape[0], -1)
    7 #print(x_train.shape)

    step 2 向图片添加噪声

    添加噪声是为了让autoencoder更robust,不容易出现过拟合。

    1 #add random noise
    2 x_train_nosiy = x_train + 0.3 * np.random.normal(loc=0., scale=1., size=x_train.shape)
    3 x_test_nosiy = x_test + 0.3 * np.random.normal(loc=0, scale=1, size=x_test.shape)
    4 x_train_nosiy = np.clip(x_train_nosiy, 0., 1.)
    5 x_test_nosiy = np.clip(x_test_nosiy, 0, 1.)
    6 print(x_train_nosiy.shape, x_test_nosiy.shape)

    step 3 搭建网络结构

    分别构建encoded和decoded,然后将它们链接起来构成整个autoencoder。使用Model建模。

    1 #build autoencoder model
    2 input_img = Input(shape=(28*28,))
    3 encoded = Dense(500, activation='relu')(input_img)
    4 decoded = Dense(784, activation='sigmoid')(encoded)
    5 
    6 autoencoder = Model(input=input_img, output=decoded)

     step 4 compile

    因为这里是让解压后的图片和原图片做比较, loss使用的是binary_crossentropy。

    1 autoencoder.compile(optimizer='adam', loss='binary_crossentropy')
    2 autoencoder.summary()

     

    step 5 train

    指定epochs,batch_size,可以使用validation_data,keras训练的时候不会使用它,而是用来做模型评价。

    autoencoder.fit(x_train_nosiy, x_train, epochs=20, batch_size=128, verbose=1, validation_data=(x_test, x_test))

    step 6 对比一下解压缩后的图片和原图片

     1 %matplotlib inline
     2 import matplotlib.pyplot as plt
     3 
     4 #decoded test images
     5 decoded_img = autoencoder.predict(x_test_nosiy)
     6 
     7 n = 10
     8 plt.figure(figsize=(20, 4))
     9 for i in range(n):
    10     #noisy data
    11     ax = plt.subplot(3, n, i+1)
    12     plt.imshow(x_test_nosiy[i].reshape(28, 28))
    13     plt.gray()
    14     ax.get_xaxis().set_visible(False)
    15     ax.get_yaxis().set_visible(False)
    16     #predict
    17     ax = plt.subplot(3, n, i+1+n)
    18     plt.imshow(decoded_img[i].reshape(28, 28))
    19     plt.gray()
    20     ax.get_yaxis().set_visible(False)
    21     ax.get_xaxis().set_visible(False)
    22     #original
    23     ax = plt.subplot(3, n, i+1+2*n)
    24     plt.imshow(x_test[i].reshape(28, 28))
    25     plt.gray()
    26     ax.get_yaxis().set_visible(False)
    27     ax.get_xaxis().set_visible(False)
    28 plt.show()

     这样的结果,你能分出哪个是压缩解压缩后的图片哪个是原图片吗?

    reference:

    https://keras.io/getting-started/functional-api-guide/

  • 相关阅读:
    elinput 金额校验
    使用PHPExcel实现Excel文件的导入和导出(模板导出) (转载自用)
    Scrapy 轻松定制网络爬虫
    在线学习(Online Learning)
    AdaBoost ,online Adaboost
    斯坦福飞鱼滑翔装置完胜跳跃机器人
    机器学习中的集成学习方法(一)理论
    Boosting, Online Boosting,adaboost
    struts.xml配置方法
    java实现单向链表
  • 原文地址:https://www.cnblogs.com/yangmang/p/7530463.html
Copyright © 2011-2022 走看看