dataclasses --- 数据类¶
这个模块提供了一个装饰器和一些函数,用于自动添加生成的 special method,例如 __init__() 和 __repr__() 到用户定义的类。 它最初描述于 PEP 557 。
在这些生成的方法中使用的成员变量是使用 PEP 526 类型标注来定义的。例如以下代码:
from dataclasses import dataclass
@dataclass
class InventoryItem:
"""Class for keeping track of an item in inventory."""
name: str
unit_price: float
quantity_on_hand: int = 0
def total_cost(self) -> float:
return self.unit_price * self.quantity_on_hand
将在添加的内容中包括如下所示的 __init__():
def __init__(self, name: str, unit_price: float, quantity_on_hand: int = 0):
self.name = name
self.unit_price = unit_price
self.quantity_on_hand = quantity_on_hand
请注意,此方法会自动添加到类中:而不是在如上所示的 InventoryItem 定义中被直接指定。
3.7 新版功能.
模块内容¶
-
@dataclasses.dataclass(*, init=True, repr=True, eq=True, order=False, unsafe_hash=False, frozen=False, match_args=True, kw_only=False, slots=False)¶ 这个函数是 decorator ,用于将生成的 special method 添加到类中,如下所述。
dataclass()装饰器会检查类以查找field——field被定义为具有 类型标注 的类变量。除了下面描述的两个例外,在dataclass()中没有什么东西会去检查这些变量标注成了何种类型。这些字段在所有生成的方法中的顺序,都是它们在类定义中出现的顺序。
dataclass()装饰器将向类中添加如下的各种 dunder 方法。如果所添加的方法已存在于类中,则行为将取决于下面所列出的形参。该装饰器会返回调用它的类;不会创建新的类。如果
dataclass()仅用作没有参数的简单装饰器,它将使用它的函数签名中的默认值。也就是说,这三种dataclass()用法是等价的:@dataclass class C: ... @dataclass() class C: ... @dataclass(init=True, repr=True, eq=True, order=False, unsafe_hash=False, frozen=False, match_args=True, kw_only=False, slots=False) class C: ...
dataclass()的参数有:init: 如果为真值(默认),将生成一个__init__()方法。如果类已定义
__init__(),则忽略此参数。repr:如果为真值(默认),将生成一个__repr__()方法。 生成的 repr 字符串将具有类名以及每个字段的名称和 repr ,按照它们在类中定义的顺序。不包括标记为从 repr 中排除的字段。 例如:InventoryItem(name='widget', unit_price=3.0, quantity_on_hand=10)。如果类已定义
__repr__(),则忽略此参数。eq:如果为true(默认值),将生成__eq__()方法。此方法将类作为其字段的元组按顺序比较。比较中的两个实例必须是相同的类型。如果类已定义
__eq__(),则忽略此参数。order:如果为真值(默认为False),则__lt__()、__le__()、__gt__()和__ge__()方法将生成。 这将类作为其字段的元组按顺序比较。比较中的两个实例必须是相同的类型。如果order为真值并且eq为假值 ,则引发ValueError。如果类已经定义了
__lt__()、__le__()、__gt__()或者__ge__()中的任意一个,将引发TypeError。unsafe_hash:如果为False(默认值),则根据eq和frozen的设置方式生成__hash__()方法。__hash__()由内置的hash()使用,当对象被添加到散列集合(如字典和集合)时。有一个__hash__()意味着类的实例是不可变的。可变性是一个复杂的属性,取决于程序员的意图,__eq__()的存在性和行为,以及dataclass()装饰器中eq和frozen标志的值。默认情况下,
dataclass()不会隐式添加__hash__()方法,除非这样做是安全的。 它也不会添加或更改现有的明确定义的__hash__()方法。 设置类属性__hash__ = None对 Python 具有特定含义,如__hash__()文档中所述。如果
__hash__()没有显式定义,或者它被设为None,则dataclass()可能 会添加一个隐式__hash__()方法。 虽然并不推荐,但你可以用unsafe_hash=True来强制dataclass()创建一个__hash__()方法。 如果你的类在逻辑上不可变但却仍然可被修改那么可能就是这种情况。 这是一个特殊用例并且应当被仔细地考虑。以下是隐式创建
__hash__()方法的规则。请注意,你不能在数据类中都使用显式的__hash__()方法并设置unsafe_hash=True;这将导致TypeError。如果
eq和frozen都是 true,默认情况下dataclass()将为你生成一个__hash__()方法。如果eq为 true 且frozen为 false ,则__hash__()将被设置为None,标记它不可用(因为它是可变的)。如果eq为 false ,则__hash__()将保持不变,这意味着将使用超类的__hash__()方法(如果超类是object,这意味着它将回到基于id的hash)。frozen: 如为真值 (默认值为False),则对字段赋值将会产生异常。 这模拟了只读的冻结实例。 如果在类中定义了__setattr__()或__delattr__()则将会引发TypeError。 参见下文的讨论。match_args: 如果为真值 (默认值为True),则将根据传给生成的__init__()方法的形参列表来创建__match_args__元组 (即使没有生成__init__()也会创建,见上文)。 如果为假值,或者如果__match_args__已在类中定义,则将不生成__match_args__。
3.10 新版功能.
kw_only: 如果为真值 (默认值为False),则所有字段都将被标记为仅限关键字。 如果一个字段被标记为仅限关键字,则其唯一的影响是根据仅限关键字的字段生成的__init__()形参必须使用调用__init__()时传入的关键字来指定。 对于 dataclass 的任何其它方面都没有影响。 请参阅 parameter 术语表条目了解详情。 另请参阅KW_ONLY一节。
3.10 新版功能.
slots: 如果为真值 (默认值为False),则将生成__slots__属性并将返回一个新类而非原来的类。 如果__slots__已在类中定义,则会引发TypeError。
3.10 新版功能.
可以用普通的 Python 语法为各个
field指定默认值:@dataclass class C: a: int # 'a' has no default value b: int = 0 # assign a default value for 'b'
在这个例子中,
a和b都将包含在添加的__init__()方法中,它们将被定义为:def __init__(self, a: int, b: int = 0):
如果在具有默认值的字段之后存在没有默认值的字段,将会引发
TypeError。无论此情况是发生在单个类中还是作为类继承的结果,都是如此。
-
dataclasses.field(*, default=MISSING, default_factory=MISSING, init=True, repr=True, hash=None, compare=True, metadata=None, kw_only=MISSING)¶ 大多数时候,对于简单常见的用途,前述的功能已经足够了。而有些功能需要字段提供额外的信息来启用。为了满足这种对附加信息的需求,你可以通过调用提供的
field()函数来替换字段默认值。例如:@dataclass class C: mylist: list[int] = field(default_factory=list) c = C() c.mylist += [1, 2, 3]
如上所示,
MISSING值是一个哨兵对象,用于检测一些形参是否由用户提供。使用它是因为None对于一些形参来说是有效的用户值。任何代码都不应该直接使用MISSING值。field()的形参有:default:如果提供,这将是该字段的默认值。设计这个形参是因为field()调用将会占据原来用来提供默认值的位置。default_factory:如果提供,它必须是一个需要零个参数的可调用对象,当该字段需要一个默认值时,它将被调用。这能解决当默认值是可变对象时会带来的问题,如下所述。同时指定default和default_factory将产生错误。init:如果为true(默认值),则该字段作为参数包含在生成的__init__()方法中。repr:如果为true(默认值),则该字段包含在生成的__repr__()方法返回的字符串中。hash:这可以是布尔值或None。如果为true,则此字段包含在生成的__hash__()方法中。如果为None(默认值),请使用compare的值,这通常是预期的行为。如果字段用于比较,则应在 hash 中考虑该字段。不鼓励将此值设置为None以外的任何值。设置
hash=False但compare=True的一个合理情况是,一个计算哈希值的代价很高的字段是检验等价性需要的,且还有其他字段可以用于计算类型的哈希值。可以从哈希值中排除该字段,但仍令它用于比较。compare:如果为true(默认值),则该字段包含在生成的相等性和比较方法中(__eq__(),__gt__()等等)。metadata:可以是映射或 None。None 被视为一个空的字典。这个值将被包装在MappingProxyType()中,使其只读,并暴露在Field对象上。数据类不使用它——它是作为第三方扩展机制提供的。多个第三方可以各自拥有自己的键,以用作元数据中的命名空间。kw_only: 如果为真值,则此字段将被标记为仅限关键字。 这将在当计算出所生成的__init__()方法的形参时被使用。
3.10 新版功能.
如果通过调用
field()指定字段的默认值,则该字段对应的类属性的值将最终被替换为指定的default值。如果没有提供default,那么将删除该字段对应的类属性。目的是在dataclass()装饰器运行之后,类属性将包含字段的默认值,和直接指定了默认值一样。例如,在运行如下代码之后:@dataclass class C: x: int y: int = field(repr=False) z: int = field(repr=False, default=10) t: int = 20
类属性
C.z将是10,类属性C.t将是20,类属性C.x和C.y将不设置。
-
class
dataclasses.Field¶ Field对象描述每个已定义的字段。这些对象在内部被创建,并由fields()模块级方法返回(见下)。用户永远不应该直接实例化Field对象。它的下列属性的含义是由文档规定的:name:字段的名称。type:字段的类型。default,default_factory,init,repr,hash,compare,metadata和kw_only具有与field()函数中对应参数相同的含义和值。
可能存在其他属性,但它们是私有的。用户不应检查或依赖于这些属性。
-
dataclasses.fields(class_or_instance)¶ 返回一个能描述此数据类所包含的字段的元组,元组的每一项都是
Field对象。接受数据类或数据类的实例。如果没有传递一个数据类或实例将引发TypeError。不返回ClassVar或InitVar等伪字段。
-
dataclasses.asdict(obj, *, dict_factory=dict)¶ 将数据类
obj转换为一个字典(使用工厂函数dict_factory)。每个数据类被转换为以name: value键值对来储存其字段的字典。数据类、字典、列表和元组的内容会被递归地访问。其它对象用copy.deepcopy()来复制。在嵌套的数据类上使用
asdict()的例子:@dataclass class Point: x: int y: int @dataclass class C: mylist: list[Point] p = Point(10, 20) assert asdict(p) == {'x': 10, 'y': 20} c = C([Point(0, 0), Point(10, 4)]) assert asdict(c) == {'mylist': [{'x': 0, 'y': 0}, {'x': 10, 'y': 4}]}
要创建一个浅拷贝,可以使用以下的变通方法:
dict((field.name, getattr(obj, field.name)) for field in fields(obj))
-
dataclasses.astuple(obj, *, tuple_factory=tuple)¶ 将数据类
obj转换为一个元组(使用工厂函数tuple_factory)。每个数据类被转换为其字段的值的元组。数据类、字典、列表和元组的内容会被递归地访问。其它对象用copy.deepcopy()来复制。继续前一个例子:
assert astuple(p) == (10, 20) assert astuple(c) == ([(0, 0), (10, 4)],)
要创建一个浅拷贝,可以使用以下的变通方法:
tuple(getattr(obj, field.name) for field in dataclasses.fields(obj))
-
dataclasses.make_dataclass(cls_name, fields, *, bases=(), namespace=None, init=True, repr=True, eq=True, order=False, unsafe_hash=False, frozen=False, match_args=True, kw_only=False, slots=False)¶ 新建一个名为
cls_name的数据类,其字段在fields中定义,基类在bases中给出,并使用在namespace中给出的命名空间进行初始化。fields是一个可迭代对象,其中的每个元素均为name,(name, type)或(name, type, Field)。 如果只提供了name,则typing.Any会被用作type。init,repr,eq,order,unsafe_hash,frozen,match_args,kw_only和slots等值与它们在dataclass()中的含义相同。此函数不是必需的,因为任何用于创建带有
__annotations__的新类的 Python 机制都可以进一步用dataclass()函数将创建的类转换为数据类。提供此函数是为了方便。例如:C = make_dataclass('C', [('x', int), 'y', ('z', int, field(default=5))], namespace={'add_one': lambda self: self.x + 1})
等价于:
@dataclass class C: x: int y: 'typing.Any' z: int = 5 def add_one(self): return self.x + 1
-
dataclasses.replace(obj, /, **changes)¶ 创建一个与
obj类型相同的新对象,将字段替换为changes里的值。如果obj不是数据类,则抛出TypeError。如果changes里的值没有指定要替换的字段名,则抛出TypeError。新返回的对象通过调用数据类的
__init__()方法创建。这确保了如果存在__post_init__(),其也被调用。如果存在没有默认值的仅初始化变量,必须在调用
replace()时指定,以便它们可以传递给__init__()和__post_init__()。changes包含任何定义为init=False的字段是错误的。在这种情况下会引发ValueError。提前提醒, 字段在
replace()被调用时的行为是,当它们被初始化时,不是从源对象直接复制,而是在__post_init__()中初始化。除非保持审慎,否则init=False字段大概很少能被正确地使用。如果有使用init=False的字段,那么使用另外的类构造器,或自定义replace()方法(或类似名称的方法)来复制实例,可能会更好。
-
dataclasses.is_dataclass(obj)¶ 如果其形参为数据类,或其实例,返回
True,否则返回False。如果你需要知道一个类是否是一个数据类的实例(而不是一个数据类本身),那么再添加一个
not isinstance(obj, type)检查:def is_dataclass_instance(obj): return is_dataclass(obj) and not isinstance(obj, type)
-
dataclasses.MISSING¶ 一个指明“没有提供 default 或 default_factory”的监视值。
-
dataclasses.KW_ONLY¶ 一个用作类型标注的监视值。 任何在伪字段之后的类型为
KW_ONLY的字段会被标记为仅限关键字字段。 请注意在其他情况下KW_ONLY类型的伪字段会被完全忽略。 这包括此类字段的名称。 根据惯例,名称_会被用作KW_ONLY字段。 仅限关键字字段指明当类被实例化时__init__()形参必须以关键字形式来指定。在这个例子中,字段
y和z将被标记为仅限关键字字段:@dataclass class Point: x: float _: KW_ONLY y: float z: float p = Point(0, y=1.5, z=2.0)
在单个数据类中,指定一个以上
KW_ONLY类型的字段将导致错误。3.10 新版功能.
-
exception
dataclasses.FrozenInstanceError¶ 在使用
frozen=True定义的数据类上调用隐式定义的__setattr__()或__delattr__()时引发。 这是AttributeError的一个子类。
初始化后处理¶
生成的 __init__() 代码将调用一个名为 __post_init__() 的方法,如果在类上已经定义了 __post_init__() 。它通常被称为 self.__post_init__() 。但是,如果定义了任何 InitVar 字段,它们也将按照它们在类中定义的顺序传递给 __post_init__() 。 如果没有 __init__() 方法生成,那么 __post_init__() 将不会被自动调用。
在其他用途中,这允许初始化依赖于一个或多个其他字段的字段值。例如:
@dataclass
class C:
a: float
b: float
c: float = field(init=False)
def __post_init__(self):
self.c = self.a + self.b
由 dataclass() 所生成的 __init__() 方法不会调用基类的 __init__() 方法。 如果基类有需要被调用的 __init__() 方法,通常是在 __post_init__() 方法中调用此方法:
@dataclass
class Rectangle:
height: float
width: float
@dataclass
class Square(Rectangle):
side: float
def __post_init__(self):
super().__init__(self.side, self.side)
但是请注意,一般来说 dataclass 生成的 __init__() 方法不需要被调用,因为派生的 dataclass 将负责初始化任何自身为 dataclass 的基类的所有字段。
有关将参数传递给 __post_init__() 的方法,请参阅下面有关仅初始化变量的段落。另请参阅关于 replace() 处理 init=False 字段的警告。
类变量¶
在 dataclass() 会实际检查字段类型的少数几个地方之一是确定字符是否为如 PEP 526 所定义的类变量。 它通过检查字段的类型是否为 typing.ClassVar 来实现这一点。 如果一个字段是 ClassVar,它将被排除在考虑范围之外并被数据类机制所忽略。 这样的 ClassVar 伪字段将不会被模块层级的 fields() 函数返回。
仅初始化变量¶
Another place where dataclass() inspects a type annotation is to
determine if a field is an init-only variable. It does this by seeing
if the type of a field is of type dataclasses.InitVar. If a field
is an InitVar, it is considered a pseudo-field called an init-only
field. As it is not a true field, it is not returned by the
module-level fields() function. Init-only fields are added as
parameters to the generated __init__() method, and are passed to
the optional __post_init__() method. They are not otherwise used
by dataclasses.
例如,假设在创建类时没有为某个字段提供值,初始化时将从数据库中取值:
@dataclass
class C:
i: int
j: int | None = None
database: InitVar[DatabaseType | None] = None
def __post_init__(self, database):
if self.j is None and database is not None:
self.j = database.lookup('j')
c = C(10, database=my_database)
冻结的实例¶
无法创建真正不可变的 Python 对象。但是,通过将 frozen=True 传递给 dataclass() 装饰器,你可以模拟不变性。在这种情况下,数据类将向类添加 __setattr__() 和 __delattr__() 方法。 些方法在调用时会引发 FrozenInstanceError 。
使用 frozen=True 时会有很小的性能损失: __ init__() 不能使用简单的赋值来初始化字段,并必须使用 object.__setattr__()。
继承¶
当数据类由 dataclass() 装饰器创建时,它会按反向 MRO 顺序(即,从 object 开始)查看它的所有基类,并且将找到的每个数据类的字段添加到一个有序映射中。添加完所有基类字段后,它会将自己的字段添加到这个有序映射中。所有生成的方法都将使用这个有序映射。字段会遵守它们被插入的顺序,因此派生类会重写基类。一个例子:
@dataclass
class Base:
x: Any = 15.0
y: int = 0
@dataclass
class C(Base):
z: int = 10
x: int = 15
最后的字段列表依次是 x 、 y 、 z 。 x 的最终类型是 int ,如类 C 中所指定的那样。
为 C 生成的 __init__() 方法看起来像:
def __init__(self, x: int = 15, y: int = 0, z: int = 10):
__init__() 中仅限关键字字段的重新排序¶
在计算出 __init__() 所需要的形参之后,任何仅限关键字形参会被移至所有常规(非仅限关键字)形参的后面。 这是 Python 中实现仅限关键字形参所要求的:它们必须位于非仅限关键字形参之后。
在这个例子中,Base.y, Base.w, and D.t 是仅限关键字字段,而 Base.x 和 D.z 是常规字段:
@dataclass
class Base:
x: Any = 15.0
_: KW_ONLY
y: int = 0
w: int = 1
@dataclass
class D(Base):
z: int = 10
t: int = field(kw_only=True, default=0)
为 D 生成的 __init__() 方法看起来像是这样:
def __init__(self, x: Any = 15.0, z: int = 10, *, y: int = 0, w: int = 1, t: int = 0):
请注意形参原来在字段列表中出现的位置已被重新排序:前面是来自常规字段的形参而后面是来自仅限关键字字段的形参。
仅限关键字形参的相对顺序会在重新排序的 __init__() 形参列表中保持原样。
默认工厂函数¶
如果一个
field()指定了一个default_factory,当需要该字段的默认值时,将使用零参数调用它。例如,要创建列表的新实例,请使用:mylist: list = field(default_factory=list)如果一个字段被排除在
__init__()之外(使用init=False)并且字段也指定default_factory,则默认的工厂函数将始终从生成的__init__()函数调用。发生这种情况是因为没有其他方法可以为字段提供初始值。
可变的默认值¶
Python 在类属性中存储默认成员变量值。思考这个例子,不使用数据类:
class C: x = [] def add(self, element): self.x.append(element) o1 = C() o2 = C() o1.add(1) o2.add(2) assert o1.x == [1, 2] assert o1.x is o2.x请注意,类
C的两个实例共享相同的类变量x,如预期的那样。使用数据类,如果 此代码有效:
@dataclass class D: x: List = [] def add(self, element): self.x += element它生成的代码类似于:
class D: x = [] def __init__(self, x=x): self.x = x def add(self, element): self.x += element assert D().x is D().x这与使用
C类的原始示例具有相同的问题。 也就是说,当在创建类实例的时候D类的两个实例没有为x指定值则将共享同一个x的副本。 因为数据类只是使用普通的 Python 类创建方式所以它们也会共享此行为。 数据类没有任何通用方式来检测这种情况。 相反地,dataclass()装饰器在检测到类型为list,dict或set的默认形参时将会引发TypeError。 这是一个部分解决方案,但它确实能防止许多常见错误。使用默认工厂函数是一种创建可变类型新实例的方法,并将其作为字段的默认值:
@dataclass class D: x: list = field(default_factory=list) assert D().x is not D().x
描述器类型的字段¶
当字段被 描述器对象 赋值为默认值时会遵循以下行为:
字段的值被传递到数据类的
__init__方法时,会传递给描述器的__set__方法,而不会覆盖掉描述器对象。相似的是,当我们获取或设置字段的值时,不会覆盖或返回描述器对象,而是会调用描述器的
__get__或__set__方法后返回。检测一个字段是否存在默认值时 ,
dataclasses将使用类方法(即descriptor.__get__(obj=None, type=cls))调用描述器的__get__方法。 在这种情况下,如果描述器拥有返回值 ,则返回值为该字段的默认值。如果在这种情况下描述器抛出AttributeError错误,则该字段不存在默认值。
class IntConversionDescriptor:
def __init__(self, *, default):
self._default = default
def __set_name__(self, owner, name):
self._name = "_" + name
def __get__(self, obj, type):
if obj is None:
return self._default
return getattr(obj, self._name, self._default)
def __set__(self, obj, value):
setattr(obj, self._name, int(value))
@dataclass
class InventoryItem:
quantity_on_hand: IntConversionDescriptor = IntConversionDescriptor(default=100)
i = InventoryItem()
print(i.quantity_on_hand) # 100
i.quantity_on_hand = 2.5 # calls __set__ with 2.5
print(i.quantity_on_hand) # 2
若一个字段的类型是描述器,但其默认值并不是描述器对象,那么该字段只会像普通的字段一样工作。