StreamSets实战之路(八)-基础篇- StreamSets-Destination类组件使用
主要介绍StreamSets-Destination类组件有哪些、分类、主要用途以及使用方法。
Destination类组件主要是将在StreamSets DC上的数据输出落地到指定的存储服务或其他服务等
Destination类组件主要包含以下:
Aerospike // Aerospike数据输出组件,将数据写到Aerospike(分布式KV库) 库中
Amazon S3 // S3数据输出组件,将数据写到S3上
Cassandra // Cassandra数据输出组件,将数据写到Cassandra库中
CoAP Client // CoAP 客户端,使用CoAP客户端将数据写到支持CoAP协议的服务端
Couchbase // Couchbase数据输出组件,将数据写到Couchbase库中
Databricks Delta Lake // Databricks 数据湖数据输出组件
Elasticsearch // ES数据组件
Einstein Analytics // 将数据输出上传到Einstein Analytics
Flume // 将数据输出到flume数据源中
Google BigQuery //
Google Bigtable
Google Cloud Storage
Google Pub/Sub Publisher
GPSS Producer
Hadoop FS // 将数据输出存储到HDFS上
HBase //将数据输出存储到HBase上
Hive Metastore // Hive元数据处理器和Hadoop FS或MapR FS目标一起使用,作为Hive漂移同步解决方案的一部分
Hive Streaming // 将数据写到Hive中使用ORC (Optimized Row Columnar)数据格式
HTTP Client // HTTP 客户端,将数据写入到支持HTTP协议的数据服务端
InfluxDB // 将数据写入到InfluxDB(时序数据库)
JDBC Producer // 以JDBC的方式写入到支持JDBC连接的数据库中
JMS Producer //将数据写入到JMS消息队列中
Kafka Producer // 将数据写入到Kafka指定的消息队列中
Kinesis Firehose
Kinesis Producer
KineticaDB
Kudu // 将数据输出到Kudu
Local FS // 将数据输出到本地磁盘
MapR DB
MapR DB JSON
MapR FS
MapR Streams Producer
MemSQL Fast Loader
MongoDB // 将数据输出到MongoDB
MQTT Publisher // 将数据输出到MQTT消息队列中
Named Pipe // 将数据输出到UNIX命名管道
Pulsar Producer // 将数据输出到Pulsar消息队列中
RabbitMQ Producer // 将数据输出到RabbitMQ消息队列中
Redis // 将数据输出到Redis
Salesforce // 将数据输出到Salesforce
SDC RPC //将数据传递到一个或多个SDC RPC源
Send Response to Origin // 用在微服务工作流中,将数据返回到用户端
SFTP/FTP/FTPS Client // Ftp客户端,将数据输出到ftp上
Snowflake // 将数据输出到Snowflake
Solr // 将数据输出到solr
Splunk // 将数据输出到Splunk
SQL Server 2019 BDC Bulk Loader // 将数据输出到SQL Server
Syslog //将syslog消息写入Syslog服务器
To Error //将数据流发送到管道错误处理
Trash // 垃圾桶组件,用于将数据丢弃到
WebSocket Client // WebSocket客户端,通过该组件将数据发送到WebSocket服务端
使用方法:
Streamsets实战之路正在更新中,尽情期待!!!
此文章为博主原创,转载请标明出处和原始链接,谢谢。