佳木斯湛栽影视文化发展公司

主頁 > 知識庫 > TensorFlow和keras中GPU使用的設置操作

TensorFlow和keras中GPU使用的設置操作

熱門標簽:百度AI接口 硅谷的囚徒呼叫中心 企業(yè)做大做強 Win7旗艦版 電話運營中心 客戶服務 語音系統(tǒng) 呼叫中心市場需求

1. 訓練運行時候指定GPU

運行時候加一行代碼:

CUDA_VISIBLE_DEVICES=1 python train.py

2. 運行過程中按需或者定量分配GPU

tensorflow直接在開啟Session時候加幾行代碼就行,而Keras指定GPU,并限制按需用量和TensorFlow不太一樣,因為keras訓練是封裝好的,不好對Session操作。如下是兩種對應的操作。

keras中的操作:

import os
import tensorflow as tf
from keras.backend.tensorflow_backend import set_session
 
# 指定第一塊GPU可用 
os.environ["CUDA_VISIBLE_DEVICES"] = "0" #指定GPU的第二種方法
 
config = tf.ConfigProto()
config.gpu_options.allocator_type = 'BFC' #A "Best-fit with coalescing" algorithm, simplified from a version of dlmalloc.
config.gpu_options.per_process_gpu_memory_fraction = 0.3 #定量
config.gpu_options.allow_growth = True  #按需
set_session(tf.Session(config=config)) 

TensorFlow中的操作:

#指定GPU
import os
os.environ["CUDA_VISIBLE_DEVICES"] = "0"
 
#設置GPU定量分配
config = tf.ConfigProto() 
config.gpu_options.per_process_gpu_memory_fraction = 0.9 # 占用GPU90%的顯存 
session = tf.Session(config=config)
 
#設置GPU按需分配
config = tf.ConfigProto() 
config.gpu_options.allow_growth = True 
session = tf.Session(config=config)

補充:Keras以及Tensorflow強制使用CPU,GPU

Keras如果是使用Theano后端的話,應該是自動不使用GPU只是用CPU的,啟動GPU使用Theano內(nèi)部命令即可。

對于Tensorflow后端的Keras以及Tensorflow會自動使用可見的GPU,而我需要其必須只運行在CPU上。網(wǎng)上查到三種方法,最后一種方法對我有用,但也對三種都做如下記錄:

使用tensorflow的 with tf.device('/cpu:0'):函數(shù)。簡單操作就是把所有命令都放在前面所述的域里面。

使用tensorflow聲明Session時的參數(shù): 關于tensorflow中Session中的部分參數(shù)設置,以及Keras如何設置其調(diào)用的Tensorflow的Session,可以參見Keras設定GPU使用內(nèi)存大小(Tensorflow backend)。

對于Tensorflow,聲明Session的時候加入device_count={'gpu':0}即可,代碼如下:

import tensorflow as tf  
sess = tf.Session(config=tf.ConfigProto(device_count={'gpu':0}))

對于Keras,則調(diào)用后端函數(shù),設置其使用如上定義的Session即可,代碼如下:

import tensorflow as tf
import keras.backend.tensorflow_backend as KTF 
KTF.set_session(tf.Session(config=tf.ConfigProto(device_count={'gpu':0})))

對于多線程以及GPU內(nèi)存設置等可以參見Keras設定GPU使用內(nèi)存大小(Tensorflow backend)。

3、第三種是使用CUDA_VISIBLE_DEVICES命令行參數(shù),代碼如下:

CUDA_VISIBLE_DEVICES="0" python3 train.py

以上為個人經(jīng)驗,希望能給大家一個參考,也希望大家多多支持腳本之家。

您可能感興趣的文章:
  • TensorFlow2.0使用keras訓練模型的實現(xiàn)
  • tensorflow2.0教程之Keras快速入門
  • 解決TensorFlow調(diào)用Keras庫函數(shù)存在的問題
  • Keras模型轉(zhuǎn)成tensorflow的.pb操作
  • 完美解決TensorFlow和Keras大數(shù)據(jù)量內(nèi)存溢出的問題
  • keras和tensorflow使用fit_generator 批次訓練操作
  • 解決tensorflow 與keras 混用之坑

標簽:山西 海南 安康 喀什 濟南 崇左 山西 長沙

巨人網(wǎng)絡通訊聲明:本文標題《TensorFlow和keras中GPU使用的設置操作》,本文關鍵詞  ;如發(fā)現(xiàn)本文內(nèi)容存在版權問題,煩請?zhí)峁┫嚓P信息告之我們,我們將及時溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡,涉及言論、版權與本站無關。
  • 相關文章
  • 收縮
    • 微信客服
    • 微信二維碼
    • 電話咨詢

    • 400-1100-266
    黔东| 象山县| 双桥区| 通化县| 和林格尔县| 喀喇沁旗| 溧阳市| 元阳县| 鄂托克前旗| 大连市| 黄龙县| 涟水县| 宝清县| 萝北县| 太仆寺旗| 江山市| 盘山县| 宁武县| 深泽县| 交城县| 襄樊市| 嘉义市| 城市| 临邑县| 绥宁县| 新丰县| 巫溪县| 夏邑县| 金寨县| 安康市| 潼南县| 阳高县| 周口市| 同心县| 怀仁县| 保德县| 天等县| 洪雅县| 临汾市| 彭阳县| 胶南市|