TensorFlow定义了一组预设的集合,具体可以参考这里:https://www.tensorflow.org/versions/r0.12/api_docs/python/framework/graph_collections
我目前使用tf.get_collection(tf.GraphKeys.GLOBAL_VARIABLES)
来获取所有变量[*如果变量有命名,则可以获取;如果没有命名,即使存在也无法显示]。
同样,我期望tf.get_collection(tf.GraphKeys.WEIGHTS)
能输出一个权重列表,但实际上返回的是一个空数组。这同样适用于GraphKeys.BIASES
和.ACTIVATIONS
。
这是怎么回事?
在我看来,这里有两种可能。第一,这些集合实际上从未被自动定义,只是推荐的集合名称。第二,我的网络可能有问题,但这似乎不太可能。
有谁有这方面的经验吗?
回答:
默认情况下,所有变量都绑定到tf.GraphKeys.GLOBAL_VARIABLES集合。一个方便的方法是将每个权重设置到tf.GraphKeys.WEIGHTS集合中,像这样:
In [2]: w = tf.Variable([1,2,3], collections=[tf.GraphKeys.WEIGHTS], dtype=tf.float32)In [3]: w2 = tf.Variable([11,22,32], collections=[tf.GraphKeys.WEIGHTS], dtype=tf.float32)
然后你可以通过以下方式获取它们:
tf.get_collection_ref(tf.GraphKeys.WEIGHTS)
这些就是权重:
[<tf.Variable 'Variable:0' shape=(3,) dtype=float32_ref>, <tf.Variable 'Variable_1:0' shape=(3,) dtype=float32_ref>]