tensorflow學習筆記(四十五):sess.run(tf.global_variables_initializer()) 做了什么?


當我們訓練自己的神經網絡的時候,無一例外的就是都會加上一句 sess.run(tf.global_variables_initializer()) ,這行代碼的官方解釋是 初始化模型的參數。那么,它到底做了些什么?

一步步看源代碼:(代碼在后面)

global_variables_initializer 返回一個用來初始化 計算圖中 所有global variable的 op。
這個op 到底是啥,還不清楚。
函數中調用了 variable_initializer() 和 global_variables()
global_variables() 返回一個 Variable list ,里面保存的是 gloabal variables。
variable_initializer() 將 Variable list 中的所有 Variable 取出來,將其 variable.initializer 屬性做成一個 op group。
然后看 Variable 類的源碼可以發現, variable.initializer 就是一個 assign op。
所以: sess.run(tf.global_variables_initializer()) 就是 run了 所有global Variable 的 assign op,這就是初始化參數的本來面目。

def global_variables_initializer():
"""Returns an Op that initializes global variables.
Returns:
An Op that initializes global variables in the graph.
"""
return variables_initializer(global_variables())

def global_variables():
"""Returns global variables.
Returns:
A list of `Variable` objects.
"""
return ops.get_collection(ops.GraphKeys.GLOBAL_VARIABLES)

def variables_initializer(var_list, name="init"):
"""Returns an Op that initializes a list of variables.
Args:
var_list: List of `Variable` objects to initialize.
name: Optional name for the returned operation.

Returns:
An Op that run the initializers of all the specified variables.
"""
if var_list:
return control_flow_ops.group(*[v.initializer for v in var_list], name=name)
return control_flow_ops.no_op(name=name)
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
class Variable(object):
def _init_from_args(self, ...):
self._initializer_op = state_ops.assign(
self._variable, self._initial_value,
validate_shape=validate_shape).op
@property
def initializer(self):
"""The initializer operation for this variable."""
return self._initializer_op
---------------------
作者:ke1th
來源:CSDN
原文:https://blog.csdn.net/u012436149/article/details/78291545
版權聲明:本文為博主原創文章,轉載請附上博文鏈接!


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM