研究社 英和コンピューター用語辞典

研究社

tokenize

動詞
トークン化する.
tokenizer 【名詞】 トークン化プログラム[ルーチン].
調べた例文を記録して、効率よく覚えましょう
Weblio会員無料で登録できます
履歴機能 過去に調べた単語を確認できる
語彙力診断 診断回数が4回に増加
マイ単語帳 便利な学習機能付き
マイ例文帳 文章で意味を理解できる
Weblio会員登録(無料)はこちらから▶

Wiktionary英語版

出典：Wiktionary

tokenizer

出典:『Wiktionary』 (2015/03/30 22:30 UTC 版)

語源

tokenize +‎ -er

名詞

tokenizer (複数形 tokenizers)

  1. (computing) A system that parses an input stream into its component tokens.

Weblio例文辞書

英和辞典・和英辞典 - Weblio辞書

tokenizer

1

記号

例文

a mark

2

切り札

例文

a trump card

3

標札

例文

a plate

4

ナレーター，語り手

例文

narrator

5

標号的

例文

symbolical―emblematical

6

籤引き

例文

drawing lots―lot-drawing―ballot

7

ト音記号

例文

the treble clef

8

ト音記号

例文

a G clef

9

編纂者

例文

the compiler

10

位牌

例文

a Buddhist memorial tablet

11

切符受取人

例文

a ticket-collector

12

切符所持人

例文

a ticket-holder

13

紋章

例文

armorial bearing

14

紋章

例文

armorial bearings

15

切符

例文

a ticket

16

切符切り

例文

（道具）a ticket-punch―（人）―a ticket-puncher

17

信託者

例文

the truster

18

副主筆

例文

subeditor

19

収税吏

例文

an exciseman

20

掛け算記号

例文

a multiplication sign

21

狂いのない射手

例文

an unerring marksman

22

評価人

例文

an appraiser

23

現金出納係という役割の人

例文

cashier

24

電車の車掌

例文

the conductor

25

譲渡人

例文

an assignor

26

鞘取屋

例文

an arbitragist

27

荷送り人

例文

the consignor

28

荷受け人

例文

the consignee

29

翻訳者

例文

the translator

30

纏い持ち

例文

the standard-bearer

Weblio例文辞書はプログラムで機械的に意味や英語表現を生成しているため、不適切な項目が含まれていることもあります。ご了承くださいませ。

閲覧履歴

全履歴クリア

・tokenizer
・oima
・udometer
・nativelike
・waba
・Master Data
・definers
・geswutelast
・unsharp
・fluidizing
単語帳に追加

tokenizerのページの著作権