关于"for"命令下子命令tokens的详细解释和使用方法

先了解for下的delims的用法。delims=xxx - 指分隔符集。这个替换了空格和跳格键的

默认分隔符集。明白之后再解释tokens.tokens=x,y,m-n - 指每行的哪一个符号被传递到每个迭代

的 for 本身。这会导致额外变量名称的分配。m-n

格式为一个范围。通过 nth 符号指定 mth。如果

符号字符串中的最后一个字符星号，

那么额外的变量将在最后一个符号解析之后

分配并接受行的保留文本。就是说，一段文字"a b c d e f g h”我们知道，for命令默认下以空格和跳格键作分隔符。那么，这段东西就给拆成了8个部分。现在，我们需要第6个部分。那么，就这样写：FOR /F "tokens=6" %A in ("a b c d e f g h”) DO ECHO %A那如果要多个呢？只要在tokens里多加点数就是了命令的帮助中说“会导致额外变量名称的分配”就是FOR /F "tokens=6,7" %A in ("a b c d e f g h”) DO ECHO %A那么第7项就要用A的下一个字母B来表示变量。 %i 在 for 语句中显式声明，%j 和 %k 是通过

tokens= 选项隐式声明的。可以通过 tokens= 一行

指定最多 26 个符号，只要不试图声明一个高于字母 "z" 或

"Z" 的变量。请记住，FOR 变量是单一字母、分大小写和全局的变量；

而且，不能同时使用超过 52 个。 从这段说明，也可以明白：tokens至多同时取出26段文字FOR /F "tokens=4-6" %A in ("a b c d e f g h”) DO ECHO %A则会取出第4、5、6项分别存入变量%A、%B、%C那如果，我们不按从小到大的顺序排呢？FOR /F "tokens=4-6,2,1" %A in ("a b c d e f g h") DO ECHO %AFOR命令会自己为我们重排序号，从小到大，然后再取那么编号重复？FOR /F "tokens=4-6,2,1,5" %A in ("a b c d e f g h") DO ECHO %AFOR会忽略重复的号码。 再看这句话：如果符号字符串中的最后一个字符星号，那么额外的变量将在最后一个符号解析之后分配并接受行的保留文本。什么意思呢？还是举例FOR /F "tokens=1,2*" %A in ("a b c d e f g h") DO ECHO %A此时1、2部分存入%A、%B。剩下的呢？全部存入了%C，而且连空格一起保留了。就是说n*就是把第n+1项和后面的所有内容(包括分隔符)一起，读入下一个空变量。那么FOR /F "tokens=1,3,2*" %A in ("a b c d e f g h") DO ECHO %A此时，FOR将再次重排顺序，这条命令等同于那么FOR /F "tokens=1,2,3*" %A in ("a b c d e f g h") DO ECHO %A基本没了吧

“For /f”中的tokens怎么用？

tokens=x,y,m-n - 指每行的哪一个符号被传递到每个迭代的 for 本身。这会导致额外变量名称的格式为一个范围。通过 nth 符号指定 m符号。如果字符串中的最后一个字符星号，那么额外的变量将在最后一个符号解析之后，分配并接受行的保留文本。

token里的x,y表示第x,y个字符被传递给for命令

m-n表示第m到第n个字符

举几个例子:

for /f \"skip=5 tokens=4\" %%a in ('dir') do echo %%a

对 dir 命令的结果，跳过前面5行，余下的每行取第4列

每列之间的分隔符为默认的\"空格\"

可以注意到 dir 命令输出的前5行是没有文件名的

for /f \"tokens=1,2,3 delims=- \" %%a in ('date /t') do (

echo %%a

echo %%b

echo %%c

)

对 date /t 的输出结果，每行取1、2、3列

第一列对应指定的 %%a ，后面的 %%b 和 %%c 是派生出来的，对应其它列

分隔符指定为 - 和\"空格\"，注意 delims=- 后面有个\"空格\"

其中 tokens=1,2,3 若用 tokens=1-3 替换，效果是一样的

for /f \"tokens=2* delims=- \" %%a in ('date /t') do echo %%b

取第2列给 %%a ，其后的列都给 %%b

论文中常提到的tokens是什么意思

在语料库语言学中，会计算文本的tokens和types。tokens指的是“形符”，就是文本中出现的所有词的个数；types指的是“类符”，就是文本中出现的不重样的词的个数。

比如，有一个两句话的文本：I am a boy. I am a boy.

那么这个文本里面有8个tokens，有4个types。两个数值可以对所建立的语料库进行描述，也可以计算二者之比，来计算语料库文本的复杂程度等等吧。

这是语言学方面，尤其是语料库语言学经常出现的tokens的意思。更详细的可以看一些语料库语言学方面的文章。

tokens是什么意思

意思：

1、n. 象征；标志；纪念品；代币；代价券；[语言学]语言符号

2、adj. 象征性的；装样子的

读音：英['təʊkən]、美['toʊkən]　

过去式：tokened

过去分词：tokened

现在分词：tokening

第三人称单数：tokens

例句：

1、He gave me a necklace as a token of his affection..

他给了我一根项链作为爱情的象征。

2、We sent the poor girl a birthday present in token of

friendship.

我们送给那个可怜的小女孩一份生日礼物作为友谊的表示。

扩展资料

近义词：

一、symbolic

读音：英[sɪm'bɒlɪk]、美[sɪm'bɒlɪk]　 　

意思：

1、adj. 象征的；符号的

2、n. 代号

例句：It is highly philosophical and symbolic.

其中蕴涵着深刻的哲理和丰富的象征。

二、emblematical

读音：英[emblɪ'mætɪkəl]、美[emblɪ'mætɪkəl]　

意思：adj. 象征的(典型的；作为标记的)

例句：It might be made emblematical of something.

那可能是某一事物的标志。

token中文啥意思

token

英 ['təʊk(ə)n]  美 ['tokən]

n. 表征；代币；记号

adj. 象征的；表意的；作为对某事的保证的

vt. 象征；代表

短语

Token Bus 令牌总线 ; 令牌总线网 ; 令牌总线方法 ; 令牌总线访问控制法

satisfied token 符合条件的符记

Token Dancer 古墓舞者 ; 图腾舞者 ; 舞蹈视角

扩展资料

同近义词

1、marks

英 [ma:rks]  美

n. 标记，记号；唛头，分数；台面标志

n. (Marks)人名；(英、德、意、瑞典、西、捷)马克斯；(俄)马克思

短语

Heather Marks 希瑟·马克斯 ; 马克斯 ; 希瑟 ; 希瑟马克斯

Mount Marks 马尔克斯山

Tread Marks 越野坦克 ; 梦幻坦克 ; 越野战斗坦克

2、sign

英 [saɪn]  美 [saɪn]

n. 迹象；符号；记号；手势

vi. 签署；签名

vt. 签署；示意

短语

sign language 手语 ; 符号语言 ; 手语法 ; 手势语

SIGN function [计] 符号函数 ; 正负号函数 ; 符号功能 ; 记号功能

currency sign 货币符号 ; [金融] 货币符 ; 货币记号 ; 通货符号