「tokenize」に関連した英語例文の一覧と使い方 - Weblio英語例文検索

tokenize (standard module) 例文帳に追加

tokenize() (tokenize モジュール) - Python

in module tokenize 例文帳に追加

tokenize モジュール - Python

18.5 tokenize -- Tokenizer for Python source 例文帳に追加

18.5 tokenize -- Pythonソースのためのトークナイザ - Python

tokenize an input stream 例文帳に追加

入力記号列をトークン化する - 研究社 英和コンピューター用語辞典

The tokenize module provides a lexical scanner for Python source code, implemented in Python.例文帳に追加

tokenizeモジュールでは、Python で実装された Pythonソースコードの字句解析器を提供します。 - Python