如何在覆盖其 class 上的 dict 属性后访问实例字典？

Question

考虑这个例子，其中 class A 的所有实例的 __dict__ 将指向全局字典 shared.

shared = {'a': 1, 'b': 2}

class A(object):
    def __init__(self):
        self.__dict__ = shared

现在让我们测试一些东西：

>>> a = A()
>>> b = A()
>>> a.a, a.b, b.a, b.b
(1, 2, 1, 2)
>>> b.x = 100
>>> shared
{'a': 1, 'x': 100, 'b': 2}
>>> a.x
100
>>> c = A()
>>> c.a, c.b, c.x
(1, 2, 100)
>>> shared['foo'] = 'bar'
>>> a.foo, b.foo, c.foo
('bar', 'bar', 'bar')
>>> a.__dict__, b.__dict__, c.__dict__
({'a': 1, 'x': 100, 'b': 2, 'foo': 'bar'},
 {'a': 1, 'x': 100, 'b': 2, 'foo': 'bar'},
 {'a': 1, 'x': 100, 'b': 2, 'foo': 'bar'}
)

一切正常。

现在让我们稍微调整一下 class A，添加一个名为 __dict__.

的属性

shared = {'a': 1, 'b': 2}

class A(object):
    __dict__ = None
    def __init__(self):
        self.__dict__ = shared

让我们再次运行同样的步骤：

>>> a = A()
>>> b = A()
>>> a.a, a.b, b.a, b.b
AttributeError: 'A' object has no attribute 'a'
>>> b.x = 100
>>> shared
{'a': 1, 'b': 2}
>>> b.__dict__  # What happened to x?
{'a': 1, 'b': 2}
>>> a.x
AttributeError: 'A' object has no attribute 'x'
>>> c = A()
>>> c.a, c.b, c.x
AttributeError: 'A' object has no attribute 'a'
>>> shared['foo'] = 'bar'
>>> a.foo, b.foo, c.foo
AttributeError: 'A' object has no attribute 'foo'
>>> a.__dict__, b.__dict__, c.__dict__
({'a': 1, 'b': 2, 'foo': 'bar'},
 {'a': 1, 'b': 2, 'foo': 'bar'},
 {'a': 1, 'b': 2, 'foo': 'bar'}
)
>>> b.x  # Where did this come from?
100

根据以上信息，第一种情况按预期工作，但第二种情况没有，因此我想知道添加 class 级别 __dict__ 属性后发生了什么变化。我们是否可以通过任何方式访问现在正在使用的实例字典？

Answer 1

在第一种情况下，self.__dict__ 可以访问其类型提供的 __dict__ 描述符。这个描述符允许它获取底层实例字典，并分别使用 PyObject_GenericGetDict and PyObject_GenericSetDict 将其设置为一个新字典。

>>> A.__dict__
mappingproxy(
{'__module__': '__main__',
 '__init__': <function A.__init__ at 0x1041fb598>,
 '__dict__': <attribute '__dict__' of 'A' objects>,
 '__weakref__': <attribute '__weakref__' of 'A' objects>, '__doc__': None
})
>>> A.__dict__['__dict__'].__get__(a)
{'a': 1, 'b': 2}

当然我们也可以从这里设置一个新词典：

>>> new_dict = {}
>>> A.__dict__['__dict__'].__set__(a, new_dict)  # a.__dict__ = new_dict
>>> a.spam = 'eggs'
>>> a.__dict__
{'spam': 'eggs'}
>>> new_dict
{'spam': 'eggs'}
>>> b = A()  # Points to `shared`
>>> b.__dict__
{'a': 1, 'b': 2}

在第二种情况下，我们的 class 本身包含一个名为 __dict__ 的属性，但 __dict__ 属性仍然指向 mappingproxy.

>>> A.__dict__
mappingproxy(
{'__module__': '__main__',
 '__dict__': None,
 '__init__': <function A.__init__ at 0x1041cfae8>,
 '__weakref__': <attribute '__weakref__' of 'A' objects>,
 '__doc__': None}
)

__dict__ classes 的属性是 special attribute.

>>> A.__weakref__ is A.__dict__['__weakref__']
True    
>>> A.__weakref__ = 1    
>>> A.__weakref__, A.__dict__['__weakref__']
(1, 1)

>>> A.__dict__ = {}    
AttributeError: attribute '__dict__' of 'type' objects is not writable

我们设置的属性可以这样访问：

>>> repr(A.__dict__['__dict__'])
'None'

A Python 级别我们现在无法访问实例字典，但在内部 class 可以使用 tp_dictoffset. As done in _PyObject_GetDictPtr.

找到它

两者 __getattribute__ and __setattr__ 也使用 _PyObject_GetDictPtr 访问基础实例字典。

要访问正在使用的实例字典，我们实际上可以使用 ctypes 在 Python 中实现 _PyObject_GetDictPtr。这是由 @user4815162342 here.

雄辩地完成的

import ctypes

def magic_get_dict(o):
    # find address of dict whose offset is stored in the type
    dict_addr = id(o) + type(o).__dictoffset__

    # retrieve the dict object itself
    dict_ptr = ctypes.cast(dict_addr, ctypes.POINTER(ctypes.py_object))
    return dict_ptr.contents.value

继续第二种情况：

>>> magic_get_dict(a)
{'__dict__': {'a': 1, 'b': 2, 'foo': 'bar'}}  # `a` has only one attribute i.e. __dict__
>>> magic_get_dict(b)
{'__dict__': {'a': 1, 'b': 2, 'foo': 'bar'}, 'x': 100}  # `x` found
>>> magic_get_dict(b).update(shared)
>>> b.a, b.b, b.foo, b.x
(1, 2, 'bar', 100)

如何在覆盖其 class 上的 dict 属性后访问实例字典？

How to access instance dictionary after overriding dict attribute on its class?

python

class

python-internals

如何在覆盖其 class 上的 __dict__ 属性后访问实例字典？

How to access instance dictionary after overriding __dict__ attribute on its class?

python

class

python-internals

如何在覆盖其 class 上的 dict 属性后访问实例字典？

How to access instance dictionary after overriding dict attribute on its class?