forked from mindspore-Ecosystem/mindspore
15 lines
517 B
ReStructuredText
15 lines
517 B
ReStructuredText
|
mindspore.dataset.text.AddToken
|
|||
|
|
===============================
|
|||
|
|
|
|||
|
|
.. py:class:: mindspore.dataset.text.AddToken(token, begin=True)
|
|||
|
|
|
|||
|
|
将分词(token)添加到序列的开头或结尾处。
|
|||
|
|
|
|||
|
|
参数：
|
|||
|
|
- **token** (str) - 待添加的分词(token)。
|
|||
|
|
- **begin** (bool, 可选) - 是否在序列的开头或结尾插入分词(token)。默认值：True。
|
|||
|
|
|
|||
|
|
异常：
|
|||
|
|
- **TypeError** - 如果 `token` 的类型不为str。
|
|||
|
|
- **TypeError** - 如果 `begin` 的类型不为bool。
|