或者,Saltstack + docker-py AttributeError: 'RecentlyUsedContainer' object has no attribute 'lock'
我一直在深入研究这个问题,但无济于事。我正在尝试使用 SaltStack 来管理我的 docker 图像/容器,但遇到了 this problem .
最初我使用的是盐状态 docker.running 但显示为命令不存在。当我将状态更改为 docker.running 时,我得到了我在那个 GitHub 问题上发布的回溯:
ID: scheduler
Function: docker.pulled
Result: False
Comment: An exception occurred in this state: Traceback (most recent call last):
File "/usr/lib/python2.7/dist-packages/salt/state.py", line 1563, in call
**cdata['kwargs'])
File "/usr/lib/python2.7/dist-packages/salt/states/dockerio.py", line 271, in pulled
returned = pull(name, tag=tag, insecure_registry=insecure_registry)
File "/usr/lib/python2.7/dist-packages/salt/modules/dockerio.py", line 1599, in pull
client = _get_client()
File "/usr/lib/python2.7/dist-packages/salt/modules/dockerio.py", line 277, in _get_client
client._version = client.version()['ApiVersion']
File "/usr/local/lib/python2.7/dist-packages/docker/client.py", line 837, in version
return self._result(self._get(url), json=True)
File "/usr/local/lib/python2.7/dist-packages/docker/clientbase.py", line 86, in _get
return self.get(url, **self._set_request_timeout(kwargs))
File "/usr/local/lib/python2.7/dist-packages/requests/sessions.py", line 310, in get
#: Stream response content default.
File "/usr/local/lib/python2.7/dist-packages/requests/sessions.py", line 279, in request
File "/usr/local/lib/python2.7/dist-packages/requests/sessions.py", line 374, in send
url=request.url,
File "/usr/local/lib/python2.7/dist-packages/requests/adapters.py", line 155, in send
**proxy_kwargs)
File "/usr/local/lib/python2.7/dist-packages/docker/unixconn/unixconn.py", line 74, in get_connection
with self.pools.lock:
AttributeError: 'RecentlyUsedContainer' object has no attribute 'lock'
Started: 09:33:42.873628
Duration: 22.115 ms
在 Google 上多搜索了一下,一无所获,我继续并开始了 reading the source .
在阅读 unixconn.py 并意识到 RecentlyUsedContainer 来自 urllib3 之后,我去追踪它的源代码并发现有一个 _lock 属性,刚才更改为 lock。这似乎很奇怪。
我仔细查看了导入并意识到 unixconn.py 试图使用请求的内置 urllib3,然后然后回退到独立的 urllib3。所以我检查了请求 urllib3 并发现它确实有 _lock -> lock 更改。但它比我的 版本的请求更新。所以我升级了请求并再次尝试。仍然没有骰子 - 相同的 AttributeError。
现在事情开始变得奇怪了。
为了将信息返回给我的 salt master,我开始在我的 salt minion 上处理 docker-py 和 urllib3 代码。起初我用 urllib3.__file__ 引发异常以确保我使用的是正确的文件。但有时它返回的文件名位于一个不存在的文件和文件夹中。通常它显示 /usr/local/lib/python2.7/dist-packages/requests/packages/urllib3/_collections.pyc,但是当我删除该文件时认为 .pyc 可能是缓存导致了一个问题,它仍然会说那是 __file__,即使它不存在。
然后我发现了inspect.getfile。我得到了同样奇怪的行为 - 我可以删除 .pyc 文件,但 inspect.getfile(self.pools) 会返回不存在的文件。
为了让生活更美好,我添加了
raise Exception('Pining for the Fjords')
到
/usr/local/lib/python2.7/dist-packages/requests/packages/urllib3/_collections.py
在 RecentlyUsedContainer.__init__ 的末尾。然而,该异常不会引发。
而且我刚刚确认某些事情 实际上是在骗我,因为尽管更改了 unixconn.py
def get_connection(self, url, proxies=None):
import inspect
r = RecentlyUsedContainer(10)
raise Exception(inspect.getfile(r.__class__) + '\n' + r.__doc__)
返回 /usr/local/lib/python2.7/dist-packages/requests/packages/urllib3/_collections.pyc,当我编辑那个 .pyc 并修改 RecentlyUsedContainer 的文档字符串我得到原始文档字符串。
最后,当我编辑 /usr/lib/python2.7/dist-packages/urllib3/_collections.pyc 并更改 它的 文档字符串时,(或相同的路径而不是 _collections.py)...
我仍然得到相同的文档字符串!
为什么这里执行了错误的代码,我怎样才能找到错误代码的位置以便解决问题?
请您参考如下方法:
所以我终于想通了问题:
它确实与盐有关。出于某种原因,salt minion 导入 docker-py 库的方式做了某种......部分保留了导入。我怀疑发生的事情是 salt 重新导入 只是 docker-py 库,所以当我对这些文件进行更改时,更改会显示出来。
但是,由于 Python 导入机制将首先搜索预先导入的模块,所以 urllib3 代码从未被重新导入。
最终所需要做的就是重启 salt minion:
salt 'my-minion' cmd.run "nohup /bin/sh -c 'sleep 10 && salt-call --local service.restart salt-minion'"
