昇思25天学习打卡营第4天|munger85

学习数据变换 Transforms

主要就是一些对数据的处理，变换。

这个就是生成一个合并的操作，在这个合并的操作中分别有对图像进行缩放。还有取分布，这个分布是正态分布的。正态分布的参数是均值和方差。最后就是把长宽，和渠道进行一个变换。C是渠道，H是高，W是宽。

使用起来就是用map进行一个使用。


44变成了0.172，可见是缩小了数值255倍。

上面是图片的。
下面开始是文字的处理

文字处理

很方便的分词。
构造个词表
vocab = text.Vocab.from_dataset(test_dataset)

每个词有index了
test_dataset = test_dataset.map(text.Lookup(vocab))
print(next(test_dataset.create_tuple_iterator()))
通过查询操作符得到他们的id，viz index
[Tensor(shape=[3], dtype=Int32, value= [1, 2, 0])]
当然他们mindspore支持自定义函数操作
test_dataset = GeneratorDataset([1, 2, 3], ‘data’, shuffle=False)
test_dataset = test_dataset.map(lambda x: x * 2)
print(list(test_dataset.create_tuple_iterator()))