marshmallow 庫介紹

前言

又是一個忘了寫完的。。。。

marshmallow 是一個 ORM/ODM/框架無關的庫,用于將復雜的數據類型,例如對象與Python原生數據類型之間轉換的庫。簡單而言,就是對象序列化和反序列化,實現object -> dict, object -> list, string -> dict, string -> list的轉換。(注:這篇文章將以 0.1.0 版本代碼分析,可能與當前官方文檔的例子有些不同)

官網示例

from datetime import date
from marshmallow import Schema, fields, pprint

class ArtistSchema(Schema):
    name = fields.Str()

class AlbumSchema(Schema):
    title = fields.Str()
    release_date = fields.Date()
    artist = fields.Nested(ArtistSchema())

bowie = dict(name='David Bowie')
album = dict(artist=bowie, title='Hunky Dory', release_date=date(1971, 12, 17))

schema = AlbumSchema()
result = schema.dump(album)
pprint(result, indent=2)
# { 'artist': {'name': 'David Bowie'},
#   'release_date': '1971-12-17',
#   'title': 'Hunky Dory'}

源碼開篇

先看看 0.1.0 版本的源碼結構,如下所示

marshmallow
├── __init__.py  
├── base.py
├── compat.py
├── core.py   # 核心代碼,使用Python元類定義了Serializer,繼承于BaseSerializer、SerializerMeta
├── exceptions.py
├── fields.py
├── types.py

core.py

先從 core.py 文件開始看起,該文件中主要包括了以下幾個類,并應用了元類編程的思想:

class SerializerMeta(type):
    def __new__(cls, name, bases, attrs):
        attrs['_base_fields'] = _get_declared_fields(bases, attrs)
        return super(SerializerMeta, cls).__new__(cls, name, bases, attrs)
    
class BaseSerializer(object):
    def __init__(self, data=None):
        self._data = data
        self.fields = self.__get_fields()  # Dict of fields
    
    def __get_fields(self):
        """"""
        
    @property
    def data(self):
        """"""
    
    @property
    def json(self):
        """"""
        
class Serializer(with_metaclass(SerializerMeta, BaseSerializer)):
    pass


# compat.py
def with_metaclass(meta, *bases):
    '''Defines a metaclass.

    Creates a dummy class with a dummy metaclass. When subclassed, the dummy
    metaclass is used, which has a constructor that instantiates a
    new class from the original parent. This ensures that the dummy class and
    dummy metaclass are not in the inheritance tree.

    Credit to Armin Ronacher.
    '''
    class metaclass(meta):
        __call__ = type.__call__
        __init__ = type.__init__
        def __new__(cls, name, this_bases, d):
            if this_bases is None:
                return type.__new__(cls, name, (), d)
            return meta(name, bases, d)
    return metaclass('temporary_class', None, {})

可能之前有過元編程經驗的人就會發現這段代碼很熟悉,Serializer 類定義時使用 with_metaclass 方法傳入 SerializerMeta 元類和 BaseSerializer 基類,而 with_metaclass 是一個比較重要的方法,用來兼容 python2 和 python3 元類使用上的區別。

  • with_metaclass 函數中定義了一個內部類(metaclass),并使用該內部類創建一個臨時類 temporary_class
  • 該臨時類是 內部類(metaclass) 的實例(元類創建出來的類就是元類的實例), 即是 tempoary_class 類的元類是 metaclass
  • 通過上面代碼可以看出臨時類創建時僅僅調用了 type.__new__方法

當定義 Serializer 類的時候,Serializer 得到了繼承的元類metaclass:

  • 實例化 metaclass, 調用 metaclass.__new__方法,即是調用 meta(name, bases, d), meta 就是 SerializerMeta 元類,bases 就是 BaseSerializer 基類(要繼承的類)
  • 調用 SerializerMeta 元類的 __new__ 方法來實例化得到 Serializer

這個地方需要注意一點是:

1、在定義 Serializer 類的時候,會執行 SerializerMeta 元類的__new__ 來創建類,而不是實例化的時候執行__new__ ,這是因為在類的定義(創建)過程中,是通過尋找 __metaclass__ 來完成的
2、上面雖然沒有顯示定義 __metaclass__ ,但由于下面metaclass的規則,會將定義的 SerializerMeta 類作為 metaclass 來創建類

3、metaclass 查找的規則是:如果當前類沒有__metaclass__,但有基類,那么就使用第一個基類的__class__作為 __metaclass__,如果沒有 __class__,則使用type 來創建類

一個簡單的例子來看看:

# -*- coding: utf-8 -*-
from datetime import datetime
from marshmallow import Serializer, fields

class Person(object):
    def __init__(self, name):
        self.name = name
        self.date_born = datetime.now()
        
class PersonSerializer(Serializer):
    name = fields.String()
    date_born = fields.DateTime()
    
person = Person(name="guoweikuang")
serialized = PersonSerializer(person)
print(PersonSerializer.__mro__)


# out: (<class '__main__.PersonSerializer'>, <class 'marshmallow.core.Serializer'>, <class 'marshmallow.core.BaseSerializer'>, <type 'object'>)

可以看到 PersonSerializer 繼承鏈中沒有之前創建的臨時類(tempoary_class)

?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,316評論 6 531
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,481評論 3 415
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 176,241評論 0 374
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,939評論 1 309
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,697評論 6 409
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 55,182評論 1 324
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,247評論 3 441
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,406評論 0 288
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,933評論 1 334
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,772評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,973評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,516評論 5 359
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,209評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,638評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,866評論 1 285
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,644評論 3 391
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,953評論 2 373

推薦閱讀更多精彩內容