класс Ripper

Родитель:: Объект

Ripper — это парсер скриптов Ruby.

Вы можете получить информацию из парсера в стиле событий. Информация, такая как абстрактные синтаксические деревья или простой лексический анализ программы Ruby.

Использование

Ripper предоставляет простой интерфейс для парсинга вашей программы в дерево выражений в символической форме (или S-выражение).

Понимание вывода парсера может оказаться сложной задачей, рекомендуется использовать PP для форматирования вывода для удобочитаемости.

require 'ripper'
require 'pp'

pp Ripper.sexp('def hello(world) "Hello, #{world}!"; end')
  #=> [:program,
       [[:def,
         [:@ident, "hello", [1, 4]],
         [:paren,
          [:params, [[:@ident, "world", [1, 10]]], nil, nil, nil, nil, nil, nil]],
         [:bodystmt,
          [[:string_literal,
            [:string_content,
             [:@tstring_content, "Hello, ", [1, 18]],
             [:string_embexpr, [[:var_ref, [:@ident, "world", [1, 27]]]]],
             [:@tstring_content, "!", [1, 33]]]]],
          nil,
          nil,
          nil]]]]

Вы можете увидеть в примере выше, что выражение начинается с :program.

Отсюда определение метода в :def, за которым следует идентификатор метода :@ident. После идентификатора метода идут скобки :paren и параметры метода в :params.

Далее следует тело метода, начиная с :bodystmt (stmt означающее оператор), которое содержит полное определение метода.

В нашем случае мы просто возвращаем строку, поэтому дальше у нас есть выражение :string_literal.

В нашем :string_literal вы заметите два @tstring_content, это литеральная часть для Hello, и ! . Между двумя @tstring_content операторами находится :string_embexpr, где embexpr — вложенное выражение. Наше выражение состоит из локальной переменной, или var_ref, с идентификатором (@ident) world.

Ресурсы

Ruby Inside

Требования

ruby 1.9 (поддержка только CVS HEAD)
bison 1.28 или более поздняя версия (другие yaccs не работают)

Лицензия

Лицензия Ruby.

Minero Aoki
aamine@loveruby.net
i.loveruby.net

Константы

EVENTS: Этот массив содержит имена всех событий ripper.
PARSER_EVENTS: Этот массив содержит имена событий парсера.
SCANNER_EVENTS: Этот массив содержит имена событий сканера.
Version: версия Ripper

Общедоступные методы класса

dedent_string(p1, p2) Показать исходный код

static VALUE
parser_dedent_string(VALUE self, VALUE input, VALUE width)
{
    int wid, col;

    StringValue(input);
    wid = NUM2UINT(width);
    col = dedent_string(input, wid);
    return INT2NUM(col);
}

lex(src, filename = '-', lineno = 1) Показать исходный код

# File ext/ripper/lib/ripper/lexer.rb, line 43
def Ripper.lex(src, filename = '-', lineno = 1)
  Lexer.new(src, filename, lineno).lex
end

Токенизирует программу Ruby и возвращает массив массивов, отформатированный как [[lineno, column], type, token, state].

require 'ripper'
require 'pp'

pp Ripper.lex("def m(a) nil end")
#=> [[[1,  0], :on_kw,     "def", Ripper::EXPR_FNAME                   ],
     [[1,  3], :on_sp,     " ",   Ripper::EXPR_FNAME                   ],
     [[1,  4], :on_ident,  "m",   Ripper::EXPR_ENDFN                   ],
     [[1,  5], :on_lparen, "(",   Ripper::EXPR_LABEL | Ripper::EXPR_BEG],
     [[1,  6], :on_ident,  "a",   Ripper::EXPR_ARG                     ],
     [[1,  7], :on_rparen, ")",   Ripper::EXPR_ENDFN                   ],
     [[1,  8], :on_sp,     " ",   Ripper::EXPR_BEG                     ],
     [[1,  9], :on_kw,     "nil", Ripper::EXPR_END                     ],
     [[1, 12], :on_sp,     " ",   Ripper::EXPR_END                     ],
     [[1, 13], :on_kw,     "end", Ripper::EXPR_END                     ]]

lex_state_name(p1) Показать исходный код

static VALUE
ripper_lex_state_name(VALUE self, VALUE state)
{
    return rb_parser_lex_state_name(NUM2INT(state));
}

new(src, filename="(ripper)", lineno=1) → ripper Показать исходный код

static VALUE
ripper_initialize(int argc, VALUE *argv, VALUE self)
{
    struct parser_params *parser;
    VALUE src, fname, lineno;

    TypedData_Get_Struct(self, struct parser_params, &parser_data_type, parser);
    rb_scan_args(argc, argv, "12", &src, &fname, &lineno);
    if (RB_TYPE_P(src, T_FILE)) {
        lex_gets = ripper_lex_io_get;
    }
    else if (rb_respond_to(src, id_gets)) {
        lex_gets = ripper_lex_get_generic;
    }
    else {
        StringValue(src);
        lex_gets = lex_get_str;
    }
    lex_input = src;
    parser->eofp = 0;
    if (NIL_P(fname)) {
        fname = STR_NEW2("(ripper)");
        OBJ_FREEZE(fname);
    }
    else {
        StringValueCStr(fname);
        fname = rb_str_new_frozen(fname);
    }
    parser_initialize(parser);

    ruby_sourcefile_string = fname;
    ruby_sourcefile = RSTRING_PTR(fname);
    ruby_sourceline = NIL_P(lineno) ? 0 : NUM2INT(lineno) - 1;

    return Qnil;
}

Создает новый объект Ripper. src должен быть строкой, объектом IO или объектом, у которого есть метод gets.

Этот метод не запускает парсинг. См. также #parse и ::parse.

parse(src, filename = '(ripper)', lineno = 1) Показать исходный код

# File ext/ripper/lib/ripper/core.rb, line 17
def Ripper.parse(src, filename = '(ripper)', lineno = 1)
  new(src, filename, lineno).parse
end

Парсит данную программу Ruby, считанную из src. src должен быть строкой, объектом IO или объектом с методом gets.

sexp(src, filename = '-', lineno = 1) Показать исходный код

# File ext/ripper/lib/ripper/sexp.rb, line 30
def Ripper.sexp(src, filename = '-', lineno = 1)
  builder = SexpBuilderPP.new(src, filename, lineno)
  sexp = builder.parse
  sexp unless builder.error?
end

ЭКСПЕРИМЕНТАЛЬНО

Парсит src и создаёт дерево S-выражений. Возвращает более читаемое дерево, чем ::sexp_raw. Этот метод в основном предназначен для использования разработчиками.

require 'ripper'
require 'pp'

pp Ripper.sexp("def m(a) nil end")
  #=> [:program,
       [[:def,
        [:@ident, "m", [1, 4]],
        [:paren, [:params, [[:@ident, "a", [1, 6]]], nil, nil, nil, nil]],
        [:bodystmt, [[:var_ref, [:@kw, "nil", [1, 9]]]], nil, nil, nil]]]]

sexp_raw(src, filename = '-', lineno = 1) Показать исходный код

# File ext/ripper/lib/ripper/sexp.rb, line 56
def Ripper.sexp_raw(src, filename = '-', lineno = 1)
  builder = SexpBuilder.new(src, filename, lineno)
  sexp = builder.parse
  sexp unless builder.error?
end

ЭКСПЕРИМЕНТАЛЬНО

Парсит src и создаёт дерево S-выражений. Этот метод в основном предназначен для использования разработчиками.

require 'ripper'
require 'pp'

pp Ripper.sexp_raw("def m(a) nil end")
  #=> [:program,
       [:stmts_add,
        [:stmts_new],
        [:def,
         [:@ident, "m", [1, 4]],
         [:paren, [:params, [[:@ident, "a", [1, 6]]], nil, nil, nil]],
         [:bodystmt,
          [:stmts_add, [:stmts_new], [:var_ref, [:@kw, "nil", [1, 9]]]],
          nil,
          nil,
          nil]]]]

slice(src, pattern, n = 0) Показать исходный код

# File ext/ripper/lib/ripper/lexer.rb, line 142
def Ripper.slice(src, pattern, n = 0)
  if m = token_match(src, pattern)
  then m.string(n)
  else nil
  end
end

ЭКСПЕРИМЕНТАЛЬНО

Парсит src и возвращает строку, которая совпала с pattern. pattern должно быть описано как Regexp.

require 'ripper'

p Ripper.slice('def m(a) nil end', 'ident')                   #=> "m"
p Ripper.slice('def m(a) nil end', '[ident lparen rparen]+')  #=> "m(a)"
p Ripper.slice("<<EOS\nstring\nEOS",
               'heredoc_beg nl $(tstring_content*) heredoc_end', 1)
    #=> "string\n"

tokenize(src, filename = '-', lineno = 1) Показать исходный код

# File ext/ripper/lib/ripper/lexer.rb, line 20
def Ripper.tokenize(src, filename = '-', lineno = 1)
  Lexer.new(src, filename, lineno).tokenize
end

Токенизирует программу Ruby и возвращает массив строк.

p Ripper.tokenize("def m(a) nil end")
   # => ["def", " ", "m", "(", "a", ")", " ", "nil", " ", "end"]

Общедоступные методы экземпляра

column → Целое Показать исходный код

static VALUE
ripper_column(VALUE self)
{
    struct parser_params *parser;
    long col;

    TypedData_Get_Struct(self, struct parser_params, &parser_data_type, parser);
    if (!ripper_initialized_p(parser)) {
        rb_raise(rb_eArgError, "method called for uninitialized object");
    }
    if (NIL_P(parser->parsing_thread)) return Qnil;
    col = parser->tokp - lex_pbeg;
    return LONG2NUM(col);
}

Возвращает номер столбца текущей строки парсинга. Этот номер начинается с 0.

encoding → кодировка Показать исходный код

VALUE
rb_parser_encoding(VALUE vparser)
{
    struct parser_params *parser;

    TypedData_Get_Struct(vparser, struct parser_params, &parser_data_type, parser);
    return rb_enc_from_encoding(current_enc);
}

Возвращает кодировку источника.

end_seen? → Булево Показать исходный код

VALUE
rb_parser_end_seen_p(VALUE vparser)
{
    struct parser_params *parser;

    TypedData_Get_Struct(vparser, struct parser_params, &parser_data_type, parser);
    return ruby__end__seen ? Qtrue : Qfalse;
}

Возвращает true, если исходный код закончен оператором +_END_+.

error? → Булево Показать исходный код

static VALUE
ripper_error_p(VALUE vparser)
{
    struct parser_params *parser;

    TypedData_Get_Struct(vparser, struct parser_params, &parser_data_type, parser);
    return parser->error_p ? Qtrue : Qfalse;
}

Возвращает true, если в проанализированном источнике есть ошибки.

filename → Строка Показать исходный код

static VALUE
ripper_filename(VALUE self)
{
    struct parser_params *parser;

    TypedData_Get_Struct(self, struct parser_params, &parser_data_type, parser);
    if (!ripper_initialized_p(parser)) {
        rb_raise(rb_eArgError, "method called for uninitialized object");
    }
    return ruby_sourcefile_string;
}

Возвращает текущее имя файла парсинга.

lineno → Целое Показать исходный код

static VALUE
ripper_lineno(VALUE self)
{
    struct parser_params *parser;

    TypedData_Get_Struct(self, struct parser_params, &parser_data_type, parser);
    if (!ripper_initialized_p(parser)) {
        rb_raise(rb_eArgError, "method called for uninitialized object");
    }
    if (NIL_P(parser->parsing_thread)) return Qnil;
    return INT2NUM(ruby_sourceline);
}

Возвращает номер строки текущей строки парсинга. Этот номер начинается с 1.

parse Показать исходный код

static VALUE
ripper_parse(VALUE self)
{
    struct parser_params *parser;

    TypedData_Get_Struct(self, struct parser_params, &parser_data_type, parser);
    if (!ripper_initialized_p(parser)) {
        rb_raise(rb_eArgError, "method called for uninitialized object");
    }
    if (!NIL_P(parser->parsing_thread)) {
        if (parser->parsing_thread == rb_thread_current())
            rb_raise(rb_eArgError, "Ripper#parse is not reentrant");
        else
            rb_raise(rb_eArgError, "Ripper#parse is not multithread-safe");
    }
    parser->parsing_thread = rb_thread_current();
    rb_ensure(ripper_parse0, self, ripper_ensure, self);

    return parser->result;
}

Начинает парсинг и возвращает значение корневого действия.

state → Целое Показать исходный код

static VALUE
ripper_state(VALUE self)
{
    struct parser_params *parser;

    TypedData_Get_Struct(self, struct parser_params, &parser_data_type, parser);
    if (!ripper_initialized_p(parser)) {
        rb_raise(rb_eArgError, "method called for uninitialized object");
    }
    if (NIL_P(parser->parsing_thread)) return Qnil;
    return INT2NUM(lex_state);
}

Возвращает состояние сканера текущего токена.

yydebug → true или false Показать исходный код

VALUE
rb_parser_get_yydebug(VALUE self)
{
    struct parser_params *parser;

    TypedData_Get_Struct(self, struct parser_params, &parser_data_type, parser);
    return yydebug ? Qtrue : Qfalse;
}

Получить yydebug.

yydebug = флаг Показать исходный код

VALUE
rb_parser_set_yydebug(VALUE self, VALUE flag)
{
    struct parser_params *parser;

    TypedData_Get_Struct(self, struct parser_params, &parser_data_type, parser);
    yydebug = RTEST(flag);
    return flag;
}

Установить yydebug.

Методы частного экземпляра

_dispatch_0() Показать исходный код

# File ext/ripper/lib/ripper/core.rb, line 32
def _dispatch_0() nil end

_dispatch_1(a) Показать исходный код

# File ext/ripper/lib/ripper/core.rb, line 33
def _dispatch_1(a) a end

_dispatch_2(a, b) Показать исходный код

# File ext/ripper/lib/ripper/core.rb, line 34
def _dispatch_2(a, b) a end

_dispatch_3(a, b, c) Показать исходный код

# File ext/ripper/lib/ripper/core.rb, line 35
def _dispatch_3(a, b, c) a end

_dispatch_4(a, b, c, d) Показать исходный код

# File ext/ripper/lib/ripper/core.rb, line 36
def _dispatch_4(a, b, c, d) a end

_dispatch_5(a, b, c, d, e) Показать исходный код

# File ext/ripper/lib/ripper/core.rb, line 37
def _dispatch_5(a, b, c, d, e) a end

_dispatch_6(a, b, c, d, e, f) Показать исходный код

# File ext/ripper/lib/ripper/core.rb, line 38
def _dispatch_6(a, b, c, d, e, f) a end

_dispatch_7(a, b, c, d, e, f, g) Показать исходный код

# File ext/ripper/lib/ripper/core.rb, line 39
def _dispatch_7(a, b, c, d, e, f, g) a end

compile_error(msg) Показать исходный код

# File ext/ripper/lib/ripper/core.rb, line 60
def compile_error(msg)
end

Этот метод вызывается, когда синтаксическая ошибка обнаружена парсером.

dedent_string(p1, p2) Показать исходный код

static VALUE
parser_dedent_string(VALUE self, VALUE input, VALUE width)
{
    int wid, col;

    StringValue(input);
    wid = NUM2UINT(width);
    col = dedent_string(input, wid);
    return INT2NUM(col);
}

warn(fmt, *args) Показать исходный код

# File ext/ripper/lib/ripper/core.rb, line 51
def warn(fmt, *args)
end

Этот метод вызывается, когда парсер генерирует слабое предупреждение. fmt и args - в стиле printf.

warning(fmt, *args) Показать исходный код

# File ext/ripper/lib/ripper/core.rb, line 56
def warning(fmt, *args)
end

Этот метод вызывается, когда парсер генерирует сильное предупреждение. fmt и args - в стиле printf.

Ruby Core © 1993–2017 Yukihiro Matsumoto
Licensed under the Ruby License.
Ruby Standard Library © contributors
Licensed under their own licenses.