字句解析の英語

字句解析部１２は、条件式をトークンに分割する。例文帳に追加

The word/phrase analyzing part 12 divides the conditional formula into tokens. - 特許庁

入力部４０１で入力された管理情報体の記述を字句解析部４０２で字句解析を行い、構文解析部４０３で構文解析を行う。例文帳に追加

Lexical analysis of description of the management information body inputted by an input part 401 is performed by a lexical analysis part 402 and syntax analysis of it is performed by a syntax analysis part 403. - 特許庁

字句解析は,プログラミング言語をプロセスする最初の段階である．例文帳に追加

Lexical analysis is the first stage of processing a programming language.発音を聞く  - コンピューター用語辞典

tokenizeモジュールでは、Python で実装された Pythonソースコードの字句解析器を提供します。例文帳に追加

The tokenize module provides a lexical scanner for Python source code, implemented in Python. - Python

data type: xml.sax.sax2lib.LexicalHandler (Python 2 では未サポート)description: コメントなど字句解析イベント用のオプション拡張ハンドラ。例文帳に追加

data type: xml.sax.sax2lib.LexicalHandler (not supported in Python 2)description: An optional extension handler for lexical events like comments.発音を聞く  - Python

次節 (``字句解析'') における BNF はすべて字句定義のためのものです; それ以降の章では、構文定義のために使っています。例文帳に追加

All uses of BNF in the next chapter (``Lexical Analysis'') are lexical definitions; uses in subsequent chapters are syntactic definitions. - Python

字句解析処理部２２は、判別結果をメール処理動作制御部２３に通知する。例文帳に追加

The analysis processing part 22 notifies a discrimination result to the mail processing operation control part 23. - 特許庁

パーザへの入力は、字句解析器 (lexical analyzer) によって生成された一連の トークン (token) からなります。例文帳に追加

Input to the parser is a stream of tokens, generated by the lexical analyzer. - Python