Hot-keys on this page

r m x p   toggle line displays

j k   next/prev highlighted chunk

0   (zero) top of page

1   (one) first highlighted chunk

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

54

55

56

57

58

59

60

61

62

63

64

65

66

67

68

69

70

71

72

73

74

75

76

77

78

79

80

81

82

83

84

85

86

87

88

89

90

91

92

93

94

95

96

97

98

99

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

136

137

138

139

140

141

142

143

144

145

146

147

148

149

150

151

152

153

154

155

156

157

158

159

# -*- coding: utf-8 -*- 

""" 

    pygments.lexers.nimrod 

    ~~~~~~~~~~~~~~~~~~~~~~ 

 

    Lexer for the Nimrod language. 

 

    :copyright: Copyright 2006-2014 by the Pygments team, see AUTHORS. 

    :license: BSD, see LICENSE for details. 

""" 

 

import re 

 

from pygments.lexer import RegexLexer, include, default 

from pygments.token import Text, Comment, Operator, Keyword, Name, String, \ 

    Number, Punctuation, Error 

 

__all__ = ['NimrodLexer'] 

 

 

class NimrodLexer(RegexLexer): 

    """ 

    For `Nimrod <http://nimrod-code.org/>`_ source code. 

 

    .. versionadded:: 1.5 

    """ 

 

    name = 'Nimrod' 

    aliases = ['nimrod', 'nim'] 

    filenames = ['*.nim', '*.nimrod'] 

    mimetypes = ['text/x-nimrod'] 

 

    flags = re.MULTILINE | re.IGNORECASE | re.UNICODE 

 

    def underscorize(words): 

        newWords = [] 

        new = "" 

        for word in words: 

            for ch in word: 

                new += (ch + "_?") 

            newWords.append(new) 

            new = "" 

        return "|".join(newWords) 

 

    keywords = [ 

        'addr', 'and', 'as', 'asm', 'atomic', 'bind', 'block', 'break', 

        'case', 'cast', 'const', 'continue', 'converter', 'discard', 

        'distinct', 'div', 'elif', 'else', 'end', 'enum', 'except', 'finally', 

        'for', 'generic', 'if', 'implies', 'in', 'yield', 

        'is', 'isnot', 'iterator', 'lambda', 'let', 'macro', 'method', 

        'mod', 'not', 'notin', 'object', 'of', 'or', 'out', 'proc', 

        'ptr', 'raise', 'ref', 'return', 'shl', 'shr', 'template', 'try', 

        'tuple', 'type', 'when', 'while', 'with', 'without', 'xor' 

    ] 

 

    keywordsPseudo = [ 

        'nil', 'true', 'false' 

    ] 

 

    opWords = [ 

        'and', 'or', 'not', 'xor', 'shl', 'shr', 'div', 'mod', 'in', 

        'notin', 'is', 'isnot' 

    ] 

 

    types = [ 

        'int', 'int8', 'int16', 'int32', 'int64', 'float', 'float32', 'float64', 

        'bool', 'char', 'range', 'array', 'seq', 'set', 'string' 

    ] 

 

    tokens = { 

        'root': [ 

            (r'##.*$', String.Doc), 

            (r'#.*$', Comment), 

            (r'[*=><+\-/@$~&%!?|\\\[\]]', Operator), 

            (r'\.\.|\.|,|\[\.|\.\]|\{\.|\.\}|\(\.|\.\)|\{|\}|\(|\)|:|\^|`|;', 

             Punctuation), 

 

            # Strings 

            (r'(?:[\w]+)"', String, 'rdqs'), 

            (r'"""', String, 'tdqs'), 

            ('"', String, 'dqs'), 

 

            # Char 

            ("'", String.Char, 'chars'), 

 

            # Keywords 

            (r'(%s)\b' % underscorize(opWords), Operator.Word), 

            (r'(p_?r_?o_?c_?\s)(?![(\[\]])', Keyword, 'funcname'), 

            (r'(%s)\b' % underscorize(keywords), Keyword), 

            (r'(%s)\b' % underscorize(['from', 'import', 'include']), 

             Keyword.Namespace), 

            (r'(v_?a_?r)\b', Keyword.Declaration), 

            (r'(%s)\b' % underscorize(types), Keyword.Type), 

            (r'(%s)\b' % underscorize(keywordsPseudo), Keyword.Pseudo), 

            # Identifiers 

            (r'\b((?![_\d])\w)(((?!_)\w)|(_(?!_)\w))*', Name), 

            # Numbers 

            (r'[0-9][0-9_]*(?=([e.]|\'f(32|64)))', 

             Number.Float, ('float-suffix', 'float-number')), 

            (r'0x[a-f0-9][a-f0-9_]*', Number.Hex, 'int-suffix'), 

            (r'0b[01][01_]*', Number.Bin, 'int-suffix'), 

            (r'0o[0-7][0-7_]*', Number.Oct, 'int-suffix'), 

            (r'[0-9][0-9_]*', Number.Integer, 'int-suffix'), 

            # Whitespace 

            (r'\s+', Text), 

            (r'.+$', Error), 

        ], 

        'chars': [ 

            (r'\\([\\abcefnrtvl"\']|x[a-f0-9]{2}|[0-9]{1,3})', String.Escape), 

            (r"'", String.Char, '#pop'), 

            (r".", String.Char) 

        ], 

        'strings': [ 

            (r'(?<!\$)\$(\d+|#|\w+)+', String.Interpol), 

            (r'[^\\\'"$\n]+', String), 

            # quotes, dollars and backslashes must be parsed one at a time 

            (r'[\'"\\]', String), 

            # unhandled string formatting sign 

            (r'\$', String) 

            # newlines are an error (use "nl" state) 

        ], 

        'dqs': [ 

            (r'\\([\\abcefnrtvl"\']|\n|x[a-f0-9]{2}|[0-9]{1,3})', 

             String.Escape), 

            (r'"', String, '#pop'), 

            include('strings') 

        ], 

        'rdqs': [ 

            (r'"(?!")', String, '#pop'), 

            (r'""', String.Escape), 

            include('strings') 

        ], 

        'tdqs': [ 

            (r'"""(?!")', String, '#pop'), 

            include('strings'), 

            include('nl') 

        ], 

        'funcname': [ 

            (r'((?![\d_])\w)(((?!_)\w)|(_(?!_)\w))*', Name.Function, '#pop'), 

            (r'`.+`', Name.Function, '#pop') 

        ], 

        'nl': [ 

            (r'\n', String) 

        ], 

        'float-number': [ 

            (r'\.(?!\.)[0-9_]*', Number.Float), 

            (r'e[+-]?[0-9][0-9_]*', Number.Float), 

            default('#pop') 

        ], 

        'float-suffix': [ 

            (r'\'f(32|64)', Number.Float), 

            default('#pop') 

        ], 

        'int-suffix': [ 

            (r'\'i(32|64)', Number.Integer.Long), 

            (r'\'i(8|16)', Number.Integer), 

            default('#pop') 

        ], 

    }