python中編寫(xiě)config文件并及時(shí)更新的方法
更新時(shí)間：2023年02月28日 08:56:16 作者：Rilkean?heart
在pytorch或者其他深度學(xué)習(xí)框架中，有許多超參數(shù)需要調(diào)整，包括learning_rate，training_data_path等，因此編寫(xiě)一個(gè)config文件統(tǒng)一存放這些參數(shù)，方便調(diào)用/查看/修改還是很有必要，這篇文章主要介紹了python中一種編寫(xiě)config文件并及時(shí)更新的方法,需要的朋友可以參考下
0. Intro
- 在pytorch或者其他深度學(xué)習(xí)框架中，有許多超參數(shù)需要調(diào)整，包括
learning_rate，training_data_path等，因此編寫(xiě)一個(gè)config文件統(tǒng)一存放這些參數(shù)，方便調(diào)用/查看/修改還是很有必要的。下面是我使用過(guò)的一種很簡(jiǎn)單的方式，不是很優(yōu)雅，小模型下初步的微調(diào)已經(jīng)夠用，希望也對(duì)你有所幫助，有更好更pro的方式歡迎大家留言~ - 我這里的目錄結(jié)構(gòu):
- MLP
mlp.ipynb: 用于training等config.py:存放超參數(shù)、路徑- data
targets：targets data pathtrain：training data path
1. config.py
這個(gè).py文件實(shí)際上是一個(gè)class，大概如下:
class DefaultConfig(object):
# dataset劃分
batch_size = 40
train_pct = 0.7
vali_pct = 0.2
test_pct = 0.1
#learning rate
learning_rate = 1e-3
# Training data
train_path = r"../data/train"
target_path_metric = r"../data/targets"2. 調(diào)用以及更新
寫(xiě)成class之后，在mlp.ipynb中調(diào)用只需要引用一下就完事了:
import config # import進(jìn)來(lái) reload(config) ################## 注意這里必須reload??！ from config import DefaultConfig # 引入class opt = DefaultConfig() # 實(shí)例config對(duì)象 # 這里名字最好保持和clas內(nèi)部一致，方便檢查 batch_size = opt.batch_size train_pct = opt.train_pct vali_pct = opt.vali_pct test_pct = opt.test_pct
注意，很可能當(dāng)我們改動(dòng)config.py之后，外部文件的參數(shù)不會(huì)及時(shí)更新，所以加入reload語(yǔ)句是一個(gè)很好的習(xí)慣
import config # import進(jìn)來(lái) reload(config) ################## 注意這里必須reload??！
到此這篇關(guān)于python中一種編寫(xiě)config文件并及時(shí)更新的方法的文章就介紹到這了,更多相關(guān)python編寫(xiě)config文件內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
相關(guān)文章
在pyqt5中QLineEdit里面的內(nèi)容回車(chē)發(fā)送的實(shí)例
今天小編就為大家分享一篇在pyqt5中QLineEdit里面的內(nèi)容回車(chē)發(fā)送的實(shí)例，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2019-06-06
今天小編就為大家分享一篇python opencv判斷圖像是否為空的實(shí)例，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2019-01-01
python使用xlrd實(shí)現(xiàn)檢索excel中某列含有指定字符串記錄的方法
這篇文章主要介紹了python使用xlrd實(shí)現(xiàn)檢索excel中某列含有指定字符串記錄的方法,涉及Python使用xlrd模塊檢索Excel的技巧,非常具有實(shí)用價(jià)值,需要的朋友可以參考下2015-05-05
對(duì)numpy中array和asarray的區(qū)別詳解
下面小編就為大家分享一篇對(duì)numpy中array和asarray的區(qū)別詳解，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2018-04-04
本文主要介紹了Django url反向解析的實(shí)現(xiàn)，文中通過(guò)示例代碼介紹的非常詳細(xì)，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下2021-12-12
今天小編就為大家分享一篇解決Tensorflow占用GPU顯存問(wèn)題，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2020-02-02
Python設(shè)計(jì)模式之裝飾模式實(shí)例詳解
這篇文章主要介紹了Python設(shè)計(jì)模式之裝飾模式,結(jié)合實(shí)例形式詳細(xì)分析了裝飾模式的概念、原理并結(jié)合Python實(shí)例形式分析了裝飾模式的相關(guān)使用技巧,需要的朋友可以參考下2019-01-01
這篇文章主要介紹了Python實(shí)現(xiàn)釘釘訂閱消息,本文通過(guò)實(shí)例代碼截圖的形式給大家展示的非常詳細(xì)，具有一定的參考借鑒價(jià)值，需要的朋友可以參考下2020-01-01
python中隨機(jī)函數(shù)random用法實(shí)例
這篇文章主要介紹了python中隨機(jī)函數(shù)random用法,實(shí)例分析了random函數(shù)的相關(guān)使用技巧,非常具有實(shí)用價(jià)值,需要的朋友可以參考下2015-04-04
這篇文章主要介紹了Python批量處理csv并保存過(guò)程解析,文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-05-05