创建keras环境步骤

简介: 0 下载并安装miniconda

0 下载并安装miniconda

bash Miniconda3-latest-Linux-x86_64.sh 执行安装
• 1

一股YES,安装成功,但是会发现不存在。

pip list
Command 'pip' not found, but can be installed with:
sudo apt install python-pip

此时,我们对终端进行重启即可

1.首先安装anaconda
2.bash Anaconda安装包
3.在终端输入anaconda(确保已经安装完成)
4.终端输入vim ~/.bashrc
5.点击i
6.在最后一行输入export PATH=/home/XXX/anaconda3/bin:$PATH
7.按 Esc :wq保存退出
8. 在终端输入source ~/.bashrc 更新配置文件
9. 新建环境:在命令行输入conda create -n 虚拟环境名 python=2.7/3.6…(conda install --yes --file requirements.txt)
10. 激活环境:source activate 虚拟环境名
11. 查看所有环境:终端输入 conda env list

1. 安装环境

首先看系统的版本


查看cudnn版本

cat /usr/local/cuda/include/cudnn.h | grep CUDNN_MAJOR -A 2
lihuanyu@zyg-dgx:~$ cat /usr/local/cuda/include/cudnn.h | grep CUDNN_MAJOR -A 2
#define CUDNN_MAJOR 7
#define CUDNN_MINOR 3
#define CUDNN_PATCHLEVEL 1
--
#define CUDNN_VERSION (CUDNN_MAJOR * 1000 + CUDNN_MINOR * 100 + CUDNN_PATCHLEVEL)
#include "driver_types.h"

查看cuda版本

lihuanyu@zyg-dgx:~$ nvcc -V
nvcc: NVIDIA (R) Cuda compiler driver
Copyright (c) 2005-2018 NVIDIA Corporation
Built on Sat_Aug_25_21:08:01_CDT_2018
Cuda compilation tools, release 10.0, V10.0.130

2 创建lihuanyu环境

1 创建环境,这一过程需要下载东西,速度相对较慢。
conda create -n lihuanyu python=3.6
2 激活进入环境
conda activate lihuanyu
3 查看环境
conda info -e
4 删除环境
conda remove -n lihuanyu --all
5 添加清华镜像
5.1 conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/
5.2 conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main/
5.3 conda config --set show_channel_urls yes
5.4 conda config --remove channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/   删除
6. 退出环境
conda deactivate

3. 安装tesorflow-gpu

1 安装最新版本tensorflow-gpu 2.6.0

pip install tensorflow-gpu

利用清华镜像安装2.2.0

pip install tensorflow-gpu==2.2.0 -i https://pypi.tuna.tsinghua.edu.cn/simple
• 1

查看GPU能用吗?

import tensorflow as tf
tf.__version__
import tensorflow as tf
tf.test.is_gpu_available()

4. 安装keras

pytho对应关系


pip install keras==2.3.1
export LD_LIBRARY_PATH="/usr/local/cuda-10.1b64:$LD_LIBRARY_PATH"

5 切换cuda

export PATH="/usr/local/cuda-10.1/bin:$PATH"
 export LD_LIBRARY_PATH="/usr/local/cuda-10.1b64:$LD_LIBRARY_PATH"
• 1
• 2

6. 测试文件(源于官方例程)

测试文件

"""
Title: Simple MNIST convnet
Author: [fchollet](https://twitter.com/fchollet)
Date created: 2015/06/19
Last modified: 2020/04/21
Description: A simple convnet that achieves ~99% test accuracy on MNIST.
"""
"""
## Setup
"""
import numpy as np
from tensorflow import keras
from tensorflow.keras import layers
"""
## Prepare the data
"""
# Model / data parameters
num_classes = 10
input_shape = (28, 28, 1)
# the data, split between train and test sets
(x_train, y_train), (x_test, y_test) = keras.datasets.mnist.load_data()
# Scale images to the [0, 1] range
x_train = x_train.astype("float32") / 255
x_test = x_test.astype("float32") / 255
# Make sure images have shape (28, 28, 1)
x_train = np.expand_dims(x_train, -1)
x_test = np.expand_dims(x_test, -1)
print("x_train shape:", x_train.shape)
print(x_train.shape[0], "train samples")
print(x_test.shape[0], "test samples")
# convert class vectors to binary class matrices
y_train = keras.utils.to_categorical(y_train, num_classes)
y_test = keras.utils.to_categorical(y_test, num_classes)
"""
## Build the model
"""
model = keras.Sequential(
    [
        keras.Input(shape=input_shape),
        layers.Conv2D(32, kernel_size=(3, 3), activation="relu"),
        layers.MaxPooling2D(pool_size=(2, 2)),
        layers.Conv2D(64, kernel_size=(3, 3), activation="relu"),
        layers.MaxPooling2D(pool_size=(2, 2)),
        layers.Flatten(),
        layers.Dropout(0.5),
        layers.Dense(num_classes, activation="softmax"),
    ]
)
model.summary()
"""
## Train the model
"""
batch_size = 128
epochs = 15
model.compile(loss="categorical_crossentropy", optimizer="adam", metrics=["accuracy"])
model.fit(x_train, y_train, batch_size=batch_size, epochs=epochs, validation_split=0.1)
"""
## Evaluate the trained model
"""
score = model.evaluate(x_test, y_test, verbose=0)
print("Test loss:", score[0])
print("Test accuracy:", score[1])

结果为

相关实践学习
部署Stable Diffusion玩转AI绘画(GPU云服务器)
本实验通过在ECS上从零开始部署Stable Diffusion来进行AI绘画创作,开启AIGC盲盒。
相关文章
|
3月前
|
JSON API 持续交付
逐步指南:使用FastAPI部署YOLO模型的步骤
逐步指南:使用FastAPI部署YOLO模型的步骤
|
2月前
|
机器学习/深度学习 并行计算 PyTorch
安装PyTorch详细步骤
安装PyTorch时,选择CPU或GPU版本。有Nvidia显卡需装CUDA和cuDNN,可从NVIDIA官网下载CUDA 11.8和对应版本cuDNN。无Nvidia显卡则安装CPU版。安装PyTorch通过conda或pip,GPU版指定`cu118`或`rocm5.4.2`镜像源。验证安装成功使用`torch._version_`和`torch.cuda.is_available()`。
|
3月前
|
缓存 自然语言处理 大数据
ModelScope问题之运行模型报错如何解决
ModelScope模型报错是指在使用ModelScope平台进行模型训练或部署时遇到的错误和问题;本合集将收集ModelScope模型报错的常见情况和排查方法,帮助用户快速定位问题并采取有效措施。
315 0
|
3月前
|
机器学习/深度学习 API TensorFlow
TensorFlow 2.0 的新增功能:第一、二部分
TensorFlow 2.0 的新增功能:第一、二部分
153 0
|
3月前
|
机器学习/深度学习 TensorFlow API
TensorFlow 2.0 的新增功能:第三、四部分
TensorFlow 2.0 的新增功能:第三、四部分
67 0
|
人工智能 数据可视化 TensorFlow
从Tensorflow模型文件中解析并显示网络结构图(CKPT模型篇)
从Tensorflow模型文件中解析并显示网络结构图(CKPT模型篇)
从Tensorflow模型文件中解析并显示网络结构图(CKPT模型篇)
|
机器学习/深度学习 数据可视化 Java
TensorFlow 高级技巧:自定义模型保存、加载和分布式训练
本篇文章将涵盖 TensorFlow 的高级应用,包括如何自定义模型的保存和加载过程,以及如何进行分布式训练。
|
编解码 并行计算 算法
MMdetection框架速成系列 第01部分:学习路线图与步骤+优先学习的两个目标检测模型代码+loss计算流程+遇到问题如何求助+Anaconda3下的安装教程(mmdet+mmdet3d)
Tip:目前 MMDetection 实现的算法中主要包括 one-stage 和 two-stage 算法,而 two-stage 算法可以简单认为是 one-stage + pool + one-stage 步骤。
770 0
|
人工智能 自然语言处理 PyTorch
基于Pytorch学习Bert模型配置运行环境详细流程
基于Pytorch学习Bert模型配置运行环境详细流程
914 1
基于Pytorch学习Bert模型配置运行环境详细流程
|
PyTorch TensorFlow API
对比PyTorch和TensorFlow的自动差异和动态子类化模型
对比PyTorch和TensorFlow的自动差异和动态子类化模型
158 0
对比PyTorch和TensorFlow的自动差异和动态子类化模型