手把手教你實現在Monaco Editor中使用VSCode主題

背景

筆者開源了一個小項目code-run,類似codepen的一個工具,其中代碼編輯器使用的是微軟的Monaco Editor,這個庫是直接從VSCode的源碼中生成的,只不過是做了一點修改讓它支持在瀏覽器中運行,但是功能基本是和VSCode一樣強大的,所以在筆者看來Monaco Editor等于VSCode的編輯器核心。

另外筆者是一個顏控,不管做什么項目,都熱衷于配套一些好看的皮膚、主題,所以Moncao Editor僅僅內置了三種主題是遠遠滿足不了筆者需求的,況且還都很丑,于是結合Monaco EditorVSCode的關系就很自然的想到,能不能直接復用VSCode的主題,接下來就給大家介紹一下筆者的探索之路。

ps.想直接了解如何實現的可以跳轉到【具體實現】小節。

基本使用

先看一下Monaco Editor的基本使用,首先安裝:

npm install monaco-editor

然后引入:

import * as monaco from 'monaco-editor'

// 創建一個js編輯器
const editor = monaco.editor.create(document.getElementById('container'), {
    value: ['function x() {', '\tconsole.log("Hello world!");', '}'].join('\n'),
    language: 'javascript',
    theme: 'vs'
})

這樣就可以在container元素上創建一個js語言的編輯器,并且使用了內置的vs-dark主題。如果遇到報錯或者語法提示不生效,那么可能需要配置一下worker文件的路徑,可以參考官方示例browser-esm-webpack

自定義主題

Monaco Editor支持自定義主題,方法如下:

// 定義主題
monaco.editor.defineTheme(themeName, themeData)
// 使用定義的主題
monaco.editor.setTheme(themeName)

themeName是要自定義的主題名稱,比如OneDarkProthemeData是一個對象,即主題數據,基本結構如下:

{
    base: 'vs',// 要繼承的基礎主題,即內置的三個:vs、vs-dark、hc-black
    inherit: false,// 是否繼承
    rules: [// 高亮規則,即給代碼里不同token類型的代碼設置不同的顯示樣式
        { token: '', foreground: '000000', background: 'fffffe' }
    ],
    colors: {// 非代碼部分的其他部分的顏色,比如背景、滾動條等
        [editorBackground]: '#FFFFFE'
    }
}

rules里面就是用來給代碼進行高亮的,常見的tokenstring(字符串)、comment(注釋)、keyword(關鍵詞)等等,完整的請移步themes.ts,這些token是怎么確定的呢,Monaco Editor內置了一個語法著色器Monarch,本質是通過正則表達式來匹配,然后給匹配到的內容命名為一個token

可以直接在編輯器中查看代碼某塊對應的token,按F1或鼠標右鍵點擊Command Palette,然后再找到并點擊Developer: Inspect Tokens,接下來鼠標點哪一塊代碼,就會顯示對應的信息,包括token類型,當前應用的顏色等。

踩坑

最開始的想法很簡單,直接找到VSCode的主題文件,然后通過自定義主題來使用。

獲取VSCode主題文件

有兩種方法,如果某個主題已經在你的VSCode里安裝并正在使用的話,那么可以按F1Command/Control + Shift + P或鼠標右鍵點擊Command Palette/命令面板,接著找到并點擊Developer:Generate Color Theme From Current Setting/開發人員:使用當前設置生成顏色主題,然后VSCode就會生成一份json數據,保存即可。

如果某個主題沒有安裝的話,那么可以去vscode主題商店搜索該主題,進入主題詳情頁面后點擊右側的Download Extension按鈕即可下載該主題,下載完成后找到剛才下載的文件,文件應該是以.vsix結尾的,直接把該后綴改成.zip,然后解壓縮,最后打開里面的/extension/themes/文件夾,里面的.json文件即主題文件,打開該文件復制json數據即可。

VSCode主題轉換成Monaco Editor主題格式

上一步過后你應該可以發現VSCode主題的格式是這樣的:

{
    "$schema": "vscode://schemas/color-theme",
    "type": "dark",
    "colors": {
        "activityBar.background": "#282c34"
    },
    "tokenColors": [
        {
            "scope": "variable.other.generic-type.haskell",
            "settings": {
                "foreground": "#C678DD"
            }
        },
        {
            "scope": [
                "punctuation.section.embedded.begin.php",
                "punctuation.section.embedded.end.php"
            ],
            "settings": {
                "foreground": "#BE5046"
            }
        }
    ]
}  

Monaco Editor的主題格式有一點區別,那是不是可以寫一個轉換方法把它轉換成下面這樣呢:

{
    base: 'vs',
    inherit: false,
    rules: [
        { token: 'variable.other.generic-type.haskell', foreground: '#C678DD' },
        { token: 'punctuation.section.embedded.begin.php', foreground: '#BE5046' },
        { token: 'punctuation.section.embedded.end.php', foreground: '#BE5046' }
    ],
    colors: {
        "activityBar.background": "#282c34"
    }
}

當然可以,這也不難,但是最后當你使用這個自定義的主題后會發現,沒有效果,為什么呢,去Monarch看一下對應語言的解析配置后就會發現,壓根就沒有VSCode主題里定義的這些token,有效果才奇怪,那怎么辦呢,自己擴展這個解析的配置嗎,筆者最開始就是這么做的,寫正則表達式嘛,應該也不是很難,為此,筆者還把Monarch文檔完整翻譯了一遍Monarch中文,但是當筆者在VSCode里看到如下效果時:

image-20210918142132745.png

果斷放棄,這顯然是要進行語義分析才行,否則誰知道abc是個變量。

其實在VSCode里語法高亮使用的是TextMate,而在Monaco Editor里使用的是Monarch,兩者壓根不是一個東西,為什么Monaco Editor不使用TextMate,而是要開發一個新的東西呢,原因是VSCode使用的是vscode-textmate來解析TextMate語法,這個庫依賴一個Oniguruma正則表達式庫,而這個正則表達式庫是使用C語言開發的,當然不支持在瀏覽器上運行。

退而求其次

既然VSCode的主題不能直接使用,那么就只能能用多少用多少,因為Monaco Editor內置的主題token就只有那么多,那么把它所有的token顏色換成VSCode的主題顏色不就行了嗎,雖然語義高亮沒有,但是總比默認主題好看。實現也很簡單,首先colors部分的基本可以直接使用,而token部分可以通過上面介紹的方法Developer: Inspect TokensVSCode里找到對應代碼塊的顏色,復制到Monaco Editor主題的對應token上即可,比如筆者轉換后的OneDarkPro的實際效果如下:

image-20210918143406409.png

VSCode里的效果如下:

image-20210918143427581.png

只可粗看,不要細究。

這個事情也有人已經做了,可以參考這個倉庫monaco-themes,里面幫你轉換了一些常見的主題,可以拿來直接使用。

新的曙光

就在筆者已經放棄在Monaco Editor中直接使用VSCode主題的想法后,無意間發現codesandboxleetcode兩個網站中的編輯器主題效果和VSCode中基本一致,而且可以明顯的看到在leetcode中切換主題請求的文件:

image-20210918161935357.png

基本和VSCode主題格式是一樣的,這就說明在Monaco Editor中使用VSCode主題是可以實現的,那么問題就變成了怎么實現。

實現

不得不說,這方面資料真的很少,相關文章基本沒有,百度搜索結果里只有一兩個相關的鏈接,不過也足以解決問題了,相關鏈接詳見文章尾部。

主要使用的是monaco-editor-textmate這個工具(所以除了百度谷歌之外,github也是一個很重要的搜索引擎啊),先安裝:

npm i monaco-editor-textmate

npm應該會同時幫你再安裝monaco-textmateonigasmmonaco-editor這幾個包,monaco-editor自不必說,我們自己都裝了,其他兩個可以自行檢查一下,如果沒有的話需要自行安裝。

工具介紹

簡單介紹一下這幾個包。

onigasm

這個庫就是用來解決上述瀏覽器不支持C語言編寫的Oniguruma的問題,解決方法是把Oniguruma編譯為WebAssemblyWebAssembly是一種中間格式,可以把非js代碼編譯成.wasm格式的文件,然后瀏覽器就可以加載并運行它了,WebAssembly已經是WEB的標準之一了,隨著時間的推移,相信兼容性也不是問題。

monaco-textmate

這個庫是在VSCode使用的vscode-textmate庫的基礎上修改的, 以便讓它在瀏覽器上使用。主要作用是解析TextMate語法,這個庫依賴前面的onigasm

monaco-editor-textmate

這個庫的主要作用是幫我們把monaco-editormonaco-textmate關聯起來,內部首先會加載對應語言的TextMate語法文件,然后調用monaco.languages.setTokensProvider方法來自定義語言的token解析器。

看一下它的使用示例:

import { loadWASM } from 'onigasm'
import { Registry } from 'monaco-textmate'
import { wireTmGrammars } from 'monaco-editor-textmate'
export async function liftOff() {
    await loadWASM(`path/to/onigasm.wasm`)
    const registry = new Registry({
        getGrammarDefinition: async (scopeName) => {
            return {
                format: 'json',
                content: await (await fetch(`static/grammars/css.tmGrammar.json`)).text()
            }
        }
    })
    const grammars = new Map()
    grammars.set('css', 'source.css')
    grammars.set('html', 'text.html.basic')
    grammars.set('typescript', 'source.ts')
    monaco.editor.defineTheme('vs-code-theme-converted', {});
    var editor = monaco.editor.create(document.getElementById('container'), {
        value: [
            'html, body {',
            '    margin: 0;',
            '}'
        ].join('\n'),
        language: 'css',
        theme: 'vs-code-theme-converted'
    })
    await wireTmGrammars(monaco, registry, grammars, editor)
}

具體實現

看完前面的使用示例后,接下來我們詳細看一下如何使用。

加載onigasm

首先我們要做的是加載onigasmwasm文件,這個文件需要首先被加載,且加載一次就可以了,所以我們在編輯器初始化前進行加載:

import { loadWASM } from 'onigasm'
const init = async () => {
    await loadWASM(`${base}/onigasm/onigasm.wasm`)
    // 創建編輯器...
}
init()

onigasm.wasm文件可以在/node_modules/onigasm/lib/目錄下找到,然后復制到項目的/public/onigasm/目錄下,這樣可以通過http進行請求。

創建作用域映射

接下來創建語言id到作用域名稱的映射:

const grammars = new Map()
grammars.set('css', 'source.css')

其他語言的作用域名稱可以在各種語言的語法列表這里找到,比如想知道css的作用域名稱,我們進入css目錄,然后打開package.json文件,可以看到其中有一個grammars字段:

"grammars": [
    {
        "language": "css",
        "scopeName": "source.css",
        "path": "./syntaxes/css.tmLanguage.json",
        "tokenTypes": {
            "meta.function.url string.quoted": "other"
        }
    }
]

language就是語言idscopeName就是作用域名稱。常見的如下:

const scopeNameMap = {
    html: 'text.html.basic',
    pug: 'text.pug',
    css: 'source.css',
    less: 'source.css.less',
    scss: 'source.css.scss',
    typescript: 'source.ts',
    javascript: 'source.js',
    javascriptreact: 'source.js.jsx',
    coffeescript: 'source.coffee'
}

注冊語法映射

再接著注冊TextMate的語法映射關系,這樣可以通過作用域名稱來加載并創建對應的語法:

import {
    Registry
} from 'monaco-textmate'

// 創建一個注冊表,可以從作用域名稱來加載對應的語法文件
const registry = new Registry({
    getGrammarDefinition: async (scopeName) => {
        return {
            format: 'json',// 語法文件格式,有json、plist
            content: await (await fetch(`${base}grammars/css.tmLanguage.json`)).text()
        }
    }
})

語法文件和前面的作用域名稱一樣,也是在各種語言的語法列表這里找,同樣以css語言為例,還是看它的package.jsongrammars字段:

"grammars": [
    {
        "language": "css",
        "scopeName": "source.css",
        "path": "./syntaxes/css.tmLanguage.json",
        "tokenTypes": {
            "meta.function.url string.quoted": "other"
        }
    }
]

path字段就是對應的語法文件的路徑,我們把這些json文件復制到項目的/public/grammars/目錄下,這樣就可以通過fetch來請求到。

定義主題

前面介紹過,Monaco Editor的主題格式和VSCode的格式是有點不一樣的,所以需要進行轉換,轉換可以自己實現,也可以直接使用monaco-vscode-textmate-theme-converter這個工具,它可以同時轉換多個本地文件:

// convertTheme.js
const converter = require('monaco-vscode-textmate-theme-converter')
const path = require('path')

const run = async () => {
    try {
        await converter.convertThemeFromDir(
            path.resolve(__dirname, './vscodeThemes'), 
            path.resolve(__dirname, '../public/themes')
        );
    } catch (error) {
        console.log(error)
    }
}
run()

運行node ./convertTheme.js命令后,就會把你放在vscodeThemes目錄下所有VSCode的主題文件轉換成Monaco Editor的主題文件并輸出到public/themes目錄下,然后我們在代碼里直接通過fetch來請求主題文件并使用defineTheme方法定義主題即可:

// 請求OneDarkPro主題文件
const themeData = await (
    await fetch(`${base}themes/OneDarkPro.json`)
).json()
// 定義主題
monaco.editor.defineTheme('OneDarkPro', themeData)

設置token解析器

經過前面這些準備工作,最后一步要做的是設置Monaco Editortoken解析器,默認使用的是內置的Monarch,我們要換成TextMate的解析器,也就是monaco-editor-textmate做的事情:

import {
    wireTmGrammars
} from 'monaco-editor-textmate'
import * as monaco from 'monaco-editor'

let editor = monaco.editor.create(document.getElementById('container'), {
    value: [
        'html, body {',
        '    margin: 0;',
        '}'
    ].join('\n'),
    language: 'css',
    theme: 'OneDarkPro'
})

await wireTmGrammars(monaco, registry, grammars, editor)

問題1

上一步后應該可以看到VSCode的主題在Monaco Editor上生效了,但是多試幾次可能會發現偶爾會失效,原因是Monaco Editor內置的語言是延遲加載的,并且加載完后也會同樣注冊一個token解析器,所以會把我們的給覆蓋掉,詳見issuesetTokensProvider unable to override existing tokenizer

一種解決方法是去除內置的語言,這可以使用monaco-editor-webpack-plugin

安裝:

npm install monaco-editor-webpack-plugin -D

Vue項目配置如下:

// vue.config.js
const MonacoWebpackPlugin = require('monaco-editor-webpack-plugin')

module.exports = {
    configureWebpack: {
        plugins: [
            new MonacoWebpackPlugin({
                languages: []
            })
        ]
    }
}

languages選項用來指定要包含的語言,我們直接設為空,啥也不要。

然后修改Monaco Editor的引入方式為:

import * as monaco from 'monaco-editor/esm/vs/editor/editor.api'

最后需要手動注冊我們需要的語言,因為所有內置語言都被去除了嘛,比如我們要使用js語言的話:

monaco.languages.register({id: 'javascript'})

這種方法雖然可以完美解決該問題,但是很大的一個副作用是語法提示不生效了,因為只有包含了內置的htmlcsstypescript時才會去加載對應的worker文件,沒有語法提示筆者也是無法接受的,所以最后筆者使用了一種比較lowhack方式:

// 插件配置
new MonacoWebpackPlugin({
    languages: ['css', 'html', 'javascript', 'less', 'pug', 'scss', 'typescript', 'coffee']
})

// 注釋掉語言注冊語句
// monaco.languages.register({id: 'javascript'})

// 當worker文件被加載了后再wire
let hasGetAllWorkUrl = false
window.MonacoEnvironment = {
    getWorkerUrl: function (moduleId, label) {
        hasGetAllWorkUrl = true
        if (label === 'json') {
            return './monaco/json.worker.bundle.js'
        }
        if (label === 'css' || label === 'scss' || label === 'less') {
            return './monaco/css.worker.bundle.js'
        }
        if (label === 'html' || label === 'handlebars' || label === 'razor') {
            return './monaco/html.worker.bundle.js'
        }
        if (label === 'typescript' || label === 'javascript') {
            return './monaco/ts.worker.bundle.js'
        }
        return './monaco/editor.worker.bundle.js'
    },
}
// 循環檢測
let loop = () => {
    if (hasGetAllWorkUrl) {
        Promise.resolve().then(async () => {
            await wireTmGrammars(monaco, registry, grammars, editor)
        })
    } else {
        setTimeout(() => {
            loop()
        }, 100)
    }
}
loop()

問題2

筆者遇到的另外一個問題是,轉換后有些主題的默認顏色并未設置,所以都是黑色,很丑:

image-20210924105525593.png

這個問題的解決方法是可以給主題的rules數組添加一個空的token,用來作為沒有匹配到的默認token

{
    "rules": [
        {
            "foreground": "#abb2bf",
            "token": ""
        }
     ]
}

foreground的色值可以取colors選項里的editor.foreground的值,要手動修改每個色值比較麻煩,可以在之前的轉換主題的步驟里順便進行,會在下一個問題里一起解決。

問題3

monaco-vscode-textmate-theme-converter這個包本質算是nodejs環境下的工具,所以想在純前端環境下使用不太方便,另外它對于非標準json格式的VSCode主題轉換時會報錯,因為很多主題格式是.jsonc,內容是帶有很多注釋的,所以都需要自己先進行檢查并修改,不是很方便,基于這兩個問題,筆者fork了它的代碼,然后修改并分成了兩個包,分別對應nodejs瀏覽器環境,詳見https://github.com/wanglin2/monaco-vscode-textmate-theme-converter

所以我們可以替換掉monaco-vscode-textmate-theme-converter,改成安裝筆者的:

npm i vscode-theme-to-monaco-theme-node -D

使用方式基本是一樣的:

// 只要修改引入為筆者的包即可
const converter = require('vscode-theme-to-monaco-theme-node')
const path = require('path')

const run = async () => {
    try {
        await converter.convertThemeFromDir(
            path.resolve(__dirname, './vscodeThemes'), 
            path.resolve(__dirname, '../public/themes')
        );
    } catch (error) {
        console.log(error)
    }
}
run()

現在就可以直接轉換.jsonc文件,而且輸出統一為.json文件,另外內部會自動添加一個空的token作為沒有匹配到的默認token,效果如下:

image.png

最佳實踐

VSCode主題除了代碼主題外,一般還包含編輯器其他部分的主題,比如標題欄、狀態欄、側邊欄、按鈕等等,所以我們也可以在頁面應用這些樣式,達到整個頁面的主題也能隨編輯器代碼主題一起切換的效果,這樣能讓頁面整體更加協調,具體的實現上,我們可以使用CSS變量,先把頁面所有涉及到的顏色都定義成CSS變量,然后在切換主題時根據主題的colors選項里的指定字段來更新變量即可,具體使用哪個字段來對應頁面的哪個部分可以根據實際情況來確定,VSCode主題的所有可配置項可以在theme-color這里找到。效果如下:

2021-09-27-10-46-47.gif

總結

本文完整詳細的介紹了筆者對于Monaco Editor編輯器主題的探索,希望能給有主題定制需求的小伙伴們一點幫助,完整的代碼請參考本項目源碼:code-run

參考鏈接

文章:monaco使用vscode相關語法高亮在瀏覽器上顯示

文章:codesandbox是如何解決主題的問題

文章:閑談Monaco Editor-自定義語言之Monarch

討論:如何在Monaco Editor中使用VSC主題?

討論:使用WebAssembly來支持TextMate語法

?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,030評論 6 531
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,310評論 3 415
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 175,951評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,796評論 1 309
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,566評論 6 407
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 55,055評論 1 322
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,142評論 3 440
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,303評論 0 288
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,799評論 1 333
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,683評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,899評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,409評論 5 358
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,135評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,520評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,757評論 1 282
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,528評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,844評論 2 372

推薦閱讀更多精彩內容