datapipeline产品介绍

1. datapipeline产品介绍
2. pipeline算法

datapipeline产品介绍

1 Datapipeline是一种云计算服务产品，用于帮助企业在云端建立数据处理流水线。
2 Datapipeline可以方便地将不同的数据源、数据格式和数据目的地进行连接和转换，支持常见的数据传输协议和数据存储服务，如S3、RDS、Redshift、DynamoDB等，同时还可以运行自定义脚本和调用AWS的其他服务。
3 Datapipeline提供了灵活的管理和控制功能，可以方便地监控和调整数据处理流水线的状态，以满足数据处理的需求。
此外，Datapipeline还支持多个AWS账户的数据集成，帮助企业实现多云环境下的数据协同和集成。

pipeline算法

Pipeline处理机制就像是把所有模型塞到一个管子里，然后依次对数据进行处理，得到最终的分类结果，

例如模型1可以是一个数据标准化处理，模型2可以是特征选择模型或者特征提取模型，模型3可以是一个分类器或者预测模型（模型不一定非要三个，根据自己实际需要）。

Pipleline中最后一个之外的所有评估器都必须是变换器，最后一个评估器可以是任意类型（transformer，classifier，regresser）,若最后一个评估器是分类器，则整个pipeline就可以作为分类器使用，如果最后一个estimator是个回归器，则整个pipeline就可以作为回归器使用。