StreamTokenizer (Платформа Java SE 7)

java.lang. Объект
- java.io. StreamTokenizer

```
public class StreamTokenizer
extends Object
```
StreamTokenizer класс берет входной поток и анализирует его в "маркеры", позволяя маркеры быть считанным по одному. Процессом парсинга управляют таблица и много флагов, которые могут быть установлены в различные состояния. Потоковый токенизатор может распознать идентификаторы, числа, заключенные в кавычки строки, и различные стили комментария.
Каждое побайтовое чтение от входного потока расценивается как символ в диапазоне '\u0000' через '\u00FF'. Символьное значение используется, чтобы искать пять возможных атрибутов символа: пробел, алфавитный, числовой, представляет в виде строки кавычку, и символ комментария. У каждого символа могут быть нуль или больше этих атрибутов.
Кроме того, у экземпляра есть четыре флага. Эти флаги указывают:
- Должны ли разделители строки быть возвращены как маркеры или обработаны как пробел, который просто разделяет маркеры.
- Должны ли комментарии C-стиля быть распознаны и пропущены.
- Должны ли комментарии в стиле С++ быть распознаны и пропущены.
- Преобразовываются ли символы идентификаторов в нижний регистр.
Типичное приложение первые конструкции экземпляр этого класса, устанавливает синтаксические таблицы, и затем неоднократно циклы, вызывая nextToken метод в каждой итерации цикла, пока это не возвращает значение TT_EOF.
С тех пор:

JDK1.0

См. Также:
nextToken(), TT_EOF

Полевая Сводка

Поля
Модификатор и Тип	Поле и Описание
`double`	`nval` Если текущий маркер является числом, это поле содержит значение того числа.
`Строка`	`sval` Если текущий маркер является маркером слова, это поле содержит строку, дающую символы маркера слова.
`static int`	`TT_EOF` Постоянное указание, что конец потока был считан.
`static int`	`TT_EOL` Постоянное указание, что конец строки был считан.
`static int`	`TT_NUMBER` Постоянное указание, что маркер числа был считан.
`static int`	`TT_WORD` Постоянное указание, что маркер слова был считан.
`int`	`ttype` После звонка `nextToken` метод, это поле содержит тип маркера только чтение.

Сводка конструктора

Конструкторы
Конструктор и Описание
`StreamTokenizer(InputStream is)` Осуждаемый. С версии 1.1 JDK привилегированный способ маркировать входной поток состоит в том, чтобы преобразовать это в символьный поток, например: Reader r = new BufferedReader(new InputStreamReader(is)); StreamTokenizer st = new StreamTokenizer(r);
`StreamTokenizer(Reader r)` Создайте токенизатор, который анализирует данный символьный поток.

Сводка метода

Методы
Модификатор и Тип	Метод и Описание
`void`	`commentChar(int ch)` Определенный, что символьный параметр запускает однострочный комментарий.
`void`	`eolIsSignificant(boolean flag)` Определяет, обрабатываются ли концы строки как маркеры.
`int`	`lineno()` Возвратите текущий номер строки.
`void`	`lowerCaseMode(boolean fl)` Определяет, печатается ли маркер слова автоматически строчными литерами.
`int`	`nextToken()` Анализирует следующий маркер от входного потока этого токенизатора.
`void`	`ordinaryChar(int ch)` Определяет, что символьный параметр "обычен" в этом токенизаторе.
`void`	`ordinaryChars(int low, int hi)` Определяет что все символы c в диапазоне `low <= c <= high` "обычны" в этом токенизаторе.
`void`	`parseNumbers()` Определяет, что числа должны быть проанализированы этим токенизатором.
`void`	`pushBack()` Вызывает следующий звонок `nextToken` метод этого токенизатора, чтобы возвратить текущую стоимость в `ttype` поле, а не изменить значение в `nval` или `sval` поле.
`void`	`quoteChar(int ch)` Определяет, что соответствующие пары этого символа разграничивают строковые константы в этом токенизаторе.
`void`	`resetSyntax()` Сбросы синтаксическая таблица этого токенизатора так, чтобы все символы были "обычны". См. `ordinaryChar` метод для получения дополнительной информации о символе, являющемся обычным.
`void`	`slashSlashComments(boolean flag)` Определяет, распознает ли токенизатор комментарии в стиле С++.
`void`	`slashStarComments(boolean flag)` Определяет, распознает ли токенизатор комментарии C-стиля.
`Строка`	`toString()` Возвращает строковое представление текущего потокового маркера и номера строки, на котором это происходит.
`void`	`whitespaceChars(int low, int hi)` Определяет что все символы c в диапазоне `low <= c <= high` пробельные символы.
`void`	`wordChars(int low, int hi)` Определяет что все символы c в диапазоне `low <= c <= high` составляющие слова.

Методы java.lang унаследованный от класса. Объект
clone, equals, finalize, getClass, hashCode, notify, notifyAll, wait, wait, wait

- Полевая Деталь
  - ttype
```
public int ttype
```
    После звонка nextToken метод, это поле содержит тип маркера только чтение. Для единственного символьного маркера его значение является единственным символом, преобразованным в целое число. Для заключенного в кавычки строкового маркера его значение является символом кавычки. Иначе, его значение является одним из следующего:
    - TT_WORD указывает, что маркер является словом.
    - TT_NUMBER указывает, что маркер является числом.
    - TT_EOL указывает, что конец строки был считан. У поля может только быть это значение если eolIsSignificant метод вызвали с параметром true.
    - TT_EOF указывает, что конец входного потока был достигнут.
    Начальное значение этого поля-4.
    См. Также:
    eolIsSignificant(boolean), nextToken(), quoteChar(int), TT_EOF, TT_EOL, TT_NUMBER, TT_WORD
  - TT_EOF
```
public static final int TT_EOF
```
    Постоянное указание, что конец потока был считан.
    
    См. Также:
    Постоянные Значения полей
  - TT_EOL
```
public static final int TT_EOL
```
    Постоянное указание, что конец строки был считан.
    
    См. Также:
    Постоянные Значения полей
  - TT_NUMBER
```
public static final int TT_NUMBER
```
    Постоянное указание, что маркер числа был считан.
    
    См. Также:
    Постоянные Значения полей
  - TT_WORD
```
public static final int TT_WORD
```
    Постоянное указание, что маркер слова был считан.
    
    См. Также:
    Постоянные Значения полей
  - sval
```
public String sval
```
    Если текущий маркер является маркером слова, это поле содержит строку, дающую символы маркера слова. Когда текущий маркер является заключенным в кавычки строковым маркером, это поле содержит тело строки.
    Текущий маркер является словом когда значение ttype поле TT_WORD. Текущий маркер является заключенным в кавычки строковым маркером когда значение ttype поле является символом кавычки.
    Начальное значение этого поля является нулем.
    
    См. Также:
    quoteChar(int), TT_WORD, ttype
  - nval
```
public double nval
```
    Если текущий маркер является числом, это поле содержит значение того числа. Текущий маркер является числом когда значение ttype поле TT_NUMBER.
    Начальное значение этого поля 0.0.
    
    См. Также:
    TT_NUMBER, ttype
- Деталь конструктора
  - StreamTokenizer
```
@Deprecated
public StreamTokenizer(InputStream is)
```
    Осуждаемый. С версии 1.1 JDK привилегированный способ маркировать входной поток состоит в том, чтобы преобразовать это в символьный поток, например:
    Reader r = new BufferedReader(new InputStreamReader(is)); StreamTokenizer st = new StreamTokenizer(r);
    Создает потоковый токенизатор, который анализирует указанный входной поток. Потоковый токенизатор инициализируется к следующему состоянию по умолчанию:
    - Все значения байта 'A' через 'Z', 'a' через 'z', и '\u00A0' через '\u00FF' как полагают, являются алфавитными.
    - Все значения байта '\u0000' через '\u0020' как полагают, пробел.
    - '/' символ комментария.
    - Одинарная кавычка '\'' и двойная кавычка '"' строковые символы кавычек.
    - Числа анализируются.
    - Концы строк обрабатываются как пробел, не как отдельные маркеры.
    - C-стиль и комментарии в стиле С++ не распознаются.
    Параметры:
    is - входной поток.
    См. Также:
    BufferedReader, InputStreamReader, StreamTokenizer(java.io.Reader)
  - StreamTokenizer
```
public StreamTokenizer(Reader r)
```
    Создайте токенизатор, который анализирует данный символьный поток.
    
    Параметры:
    r - объект Читателя обеспечение входного потока.
    С тех пор:
    
    JDK1.1
- Деталь метода
  - resetSyntax
```
public void resetSyntax()
```
    Сбросы синтаксическая таблица этого токенизатора так, чтобы все символы были "обычны". См. ordinaryChar метод для получения дополнительной информации о символе, являющемся обычным.
    
    См. Также:
    ordinaryChar(int)
  - wordChars
```
public void wordChars(int low,
             int hi)
```
    Определяет что все символы c в диапазоне low <= c <= high составляющие слова. Маркер слова состоит из составляющей слова, сопровождаемой нулем или большим количеством составляющих слова или составляющих числа.
    
    Параметры:
    low - нижний уровень диапазона.
    hi - верхний уровень диапазона.
  - whitespaceChars
```
public void whitespaceChars(int low,
                   int hi)
```
    Определяет что все символы c в диапазоне low <= c <= high пробельные символы. Пробельные символы служат только, чтобы разделить маркеры во входном потоке.
    Любые другие настройки атрибута для символов в указанном диапазоне очищаются.
    
    Параметры:
    low - нижний уровень диапазона.
    hi - верхний уровень диапазона.
  - ordinaryChars
```
public void ordinaryChars(int low,
                 int hi)
```
    Определяет что все символы c в диапазоне low <= c <= high "обычны" в этом токенизаторе. См. ordinaryChar метод для получения дополнительной информации о символе, являющемся обычным.
    
    Параметры:
    low - нижний уровень диапазона.
    hi - верхний уровень диапазона.
    См. Также:
    ordinaryChar(int)
  - ordinaryChar
```
public void ordinaryChar(int ch)
```
    Определяет, что символьный параметр "обычен" в этом токенизаторе. Это удаляет любое специальное значение, которое символ имеет как символ комментария, компонент слова, строковый разделитель, пробел, или символ числа. Когда с таким символом встречается синтаксический анализатор, синтаксический анализатор обрабатывает это как одно-символьный маркер и наборы ttype поле к символьному значению.
    Создание "обычного" символа разделителя строки может вмешаться в возможность a StreamTokenizer считать строки. lineno метод больше, возможно, не отражает присутствие таких символов разделителя в его количестве строки.
    
    Параметры:
    ch - символ.
    См. Также:
    ttype
  - commentChar
```
public void commentChar(int ch)
```
    Определенный, что символьный параметр запускает однострочный комментарий. Все символы от символа комментария до конца строки игнорируются этим потоковым токенизатором.
    Любые другие настройки атрибута для указанного символа очищаются.
    
    Параметры:
    ch - символ.
  - quoteChar
```
public void quoteChar(int ch)
```
    Определяет, что соответствующие пары этого символа разграничивают строковые константы в этом токенизаторе.
    Когда nextToken метод встречается со строковой константой, ttype поле устанавливается в строковый разделитель и sval поле устанавливается в тело строки.
    Если со строковым символом кавычки встречаются, то строка распознается, состоя из всех символов после (но не включая) строковый символ кавычки, до (но не включая) следующее возникновение того же самого строкового символа кавычки, или разделитель строки, или конец файла. Обычные escape-последовательности такой как "\n" и "\t" распознаются и преобразовываются в единственные символы, поскольку строка анализируется.
    Любые другие настройки атрибута для указанного символа очищаются.
    
    Параметры:
    ch - символ.
    См. Также:
    nextToken(), sval, ttype
  - parseNumbers
```
public void parseNumbers()
```
    Определяет, что числа должны быть проанализированы этим токенизатором. Синтаксическая таблица этого токенизатора изменяется так, чтобы каждый из этих двенадцати символов:
    0 1 2 3 4 5 6 7 8 9 . -
    имеет "числовой" атрибут.
    Когда синтаксический анализатор встречается с маркером слова, у которого есть формат двойной точности число с плавающей точкой, это обрабатывает маркер как число, а не слово, устанавливая ttype поле к значению TT_NUMBER и помещение числового значения маркера в nval поле.
    См. Также:
    nval, TT_NUMBER, ttype
  - eolIsSignificant
```
public void eolIsSignificant(boolean flag)
```
    Определяет, обрабатываются ли концы строки как маркеры. Если параметром флага является истина, этот токенизатор обрабатывает конец строк как маркеры; nextToken возвраты метода TT_EOL и также наборы ttype поле к этому значению, когда конец строки читается.
    Строка является последовательностью символов, заканчивающихся любым символ возврата каретки ('\r') или символ новой строки ('\n'). Кроме того, символ возврата каретки, сопровождаемый сразу символом новой строки, обрабатывается как единственный маркер конца строки.
    Если flag ложь, символы конца строки обрабатываются как пробел и служат только, чтобы разделить маркеры.
    
    Параметры:
    flag - true указывает, что символы конца строки являются отдельными маркерами; false указывает, что символы конца строки являются пробелом.
    См. Также:
    nextToken(), ttype, TT_EOL
  - slashStarComments
```
public void slashStarComments(boolean flag)
```
    Определяет, распознает ли токенизатор комментарии C-стиля. Если параметр флага true, этот потоковый токенизатор распознает комментарии C-стиля. Весь текст между последовательными возникновениями /* и */ отбрасываются.
    Если параметр флага false, тогда комментарии C-стиля не обрабатываются особенно.
    
    Параметры:
    flag - true указывает, чтобы распознать и проигнорировать комментарии C-стиля.
  - slashSlashComments
```
public void slashSlashComments(boolean flag)
```
    Определяет, распознает ли токенизатор комментарии в стиле С++. Если параметр флага true, этот потоковый токенизатор распознает комментарии в стиле С++. Любое возникновение двух последовательных символов наклонной черты ('/') обрабатывается как начало комментария, который расширяется до конца строки.
    Если параметр флага false, тогда комментарии в стиле С++ не обрабатываются особенно.
    
    Параметры:
    flag - true указывает, чтобы распознать и проигнорировать комментарии в стиле С++.
  - lowerCaseMode
```
public void lowerCaseMode(boolean fl)
```
    Определяет, печатается ли маркер слова автоматически строчными литерами. Если параметр флага true, тогда значение в sval поле печатается строчными литерами всякий раз, когда маркер слова возвращается ( ttype у поля есть значение TT_WORD nextToken метод этого токенизатора.
    Если параметр флага false, тогда sval поле не изменяется.
    
    Параметры:
    fl - true указывает, что все маркеры слова должны печататься строчными литерами.
    См. Также:
    nextToken(), ttype, TT_WORD
  - nextToken
```
public int nextToken()
              throws IOException
```
    Анализирует следующий маркер от входного потока этого токенизатора. Тип следующего маркера возвращается в ttype поле. Дополнительная информация о маркере может быть в nval поле или sval поле этого токенизатора.
    Типичные клиенты этого класса, сначала установленного, синтаксические таблицы и затем находятся в цикле, вызывая nextToken, чтобы проанализировать последовательные маркеры, пока TT_EOF не возвращается.
    
    Возвраты:
    значение ttype поле.
    
    Броски:
    
    IOException - если ошибка ввода-вывода происходит.
    См. Также:
    nval, sval, ttype
  - pushBack
```
public void pushBack()
```
    Вызывает следующий звонок nextToken метод этого токенизатора, чтобы возвратить текущую стоимость в ttype поле, а не изменить значение в nval или sval поле.
    
    См. Также:
    nextToken(), nval, sval, ttype
  - lineno
```
public int lineno()
```
    Возвратите текущий номер строки.
    
    Возвраты:
    текущий номер строки этого потокового токенизатора.
  - toString
```
public String toString()
```
    Возвращает строковое представление текущего потокового маркера и номера строки, на котором это происходит.
    Точная возвращенная строка является неуказанной, хотя следующий пример можно считать типичным:
    Token['a'], line 10
    Переопределения:
    
    toString в классе Object
    
    Возвраты:
    строковое представление маркера
    См. Также:
    nval, sval, ttype

Представьте ошибку или функцию
Для дальнейшей ссылки API и документации разработчика, см. Java Документация SE. Та документация содержит более подробные, предназначенные разработчиком описания, с концептуальными краткими обзорами, определениями сроков, обходных решений, и рабочих примеров кода.
Авторское право © 1993, 2011, Oracle и/или его филиалы. Все права защищены.

Класс StreamTokenizer

Полевая Сводка

Сводка конструктора

Сводка метода

Методы java.lang унаследованный от класса. Объект

Полевая Деталь

ttype

TT_EOF

TT_EOL

TT_NUMBER

TT_WORD

sval

nval

Деталь конструктора

StreamTokenizer

StreamTokenizer

Деталь метода

resetSyntax

wordChars

whitespaceChars

ordinaryChars

ordinaryChar

commentChar

quoteChar

parseNumbers

eolIsSignificant

slashStarComments

slashSlashComments

lowerCaseMode

nextToken

pushBack

lineno

toString