各组件命令

技术各组件命令 各组件命令【02】Kafka主题的增、删、查增: bin/kafka-topics.sh --create --topic flink_kafka --partitions 3 --re

各组件命令

【02】Kafka主题的增、删、查

增:本/卡夫卡-话题。sh-create-topic flink _ Kafka-分区3-复制因子2-引导服务器节点1:9092,节点2:9092,节点3:9092

删:本/卡夫卡-话题。sh-delete-topic大数据01-引导-服务器节点1:9092,节点2:9092,节点3:9092

查看Topic信息:本/卡夫卡-话题。sh-description-topic big data 01-bootstrap-服务器节点1:9092,节点2:9092,节点3:9092

列举Topic:本/卡夫卡-话题。列表引导服务器节点1:9092,节点2:9092,节点3:9092

启动Kafka自带的控制台生产者进程 或者 消费者进程

生产者:bin/Kafka-控制台-制作人。sh-topic flink _ Kafka-broker-list节点1:9092,节点2:9092,节点3:9092

注意:broker-list与bootstrap-server功能上一致,但语义上不一样,前者把它作为存储目录、后者把它作为读取目录

消费者:bin/Kafka-控制台-消费者。sh-topic flink _ Kafka-bootstrap-服务器节点1:9092,节点2:9092,节点3:9092 -从头开始

(不写-从头开始默认从最新的抵消消费)

=========MySQL==========

【01】.导入结构化查询语言文件数据

来源/opt/insurance.sql

MySQL-uroot-p-default-字符集=utf8 mb4 insurance/opt/insurance/1 _ data _ MySQL/insurance。结构化查询语言

【02】.备份关系型数据库数据库到一个结构化查询语言文件:

MySQL dump-uroot-p-databases insurance/opt/insurance/1 _ data _ MySQL/insurance。结构化查询语言

=【 Linux 】==

cat /etc/profile

dos2unix ./sqoop.sh

好吃安装dos2unix

好吃安装lrzsz

cat-v/sqoop。嘘

chmod x ./sqoop.sh

nc -lk 9999

=【 集群启动命令】==

【01】.启动Hadoop集群服务(HDFS和纱线):

/export/server/Hadoop/sbin/start-all。嘘

【02】.启动储备服务(蜂巢metastore和蜂巢服务器2):(JDBC :蜂巢2://节点3:10000)

nohup配置单元-服务元存储

nohup hiveserver2启动

【03】.启动火花三次服务器服务(JDBC :蜂巢2://节点3:10001)

/export/server/spark/sbin/start-thrift server。嘘

-配置配置配置。服务器2。节俭。端口=10001

-配置配置配置。服务器2。节俭。bind.host=节点3

-主本地[*]

文件系统:

HDFS ://节点1:8020/flink-检查点/检查站

文件://

JDBC

套路四步:

1、加载驱动类

上课。FOrname(' com。MySQL。JDBC。驱动程序')

2、定义变量(3个变量)

连接(水管道)

报表【准备报表】(阀门)

结果集(抽水机)

3、查询结构化查询语言

4、获取结果

5、关闭连接(关闭3个))

//定义变量

连接conn=null

语句stmt=null

结果集rs=空

//加载关系型数据库驱动

上课。FOrname(' com。MySQL。JDBC。驱动程序');

//获得数据库连接

连接连接器=驱动程序管理器。getconnection(' JDBC : MSSQL ://127。0 .0 .1:3306/三星',' root ',' 123456 ');

//创建语句\准备语句对象

语句stmt=conn . CreateStatement();

PS=conn . PrepareStatement(SQL);

//执行查询,获取数据集

结果集RS=stmt。execute query(SQL);

ResultSet rs=ps.executeQuery()

//关闭连接

rs.cloas

内容来源网络,如有侵权,联系删除,本文地址:https://www.230890.com/zhan/103395.html

(0)

相关推荐

  • Python中map、filter和reduce的函数怎么用

    技术Python中map、filter和reduce的函数怎么用这篇文章主要介绍Python中map、filter和reduce的函数怎么用,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!  1、m

    攻略 2021年11月24日
  • go restful接口开发步骤(go语言调用第三方restful api)

    技术gorm+gin怎么实现restful分页本篇内容主要讲解“gorm+gin怎么实现restful分页”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“gorm+gin怎么实

    攻略 2021年12月22日
  • 租用美国服务器之前要考虑的因素

    技术租用美国服务器之前要考虑的因素作为主流海外服务器之一,美国服务器一直以相对低廉便宜的租用价格和充足的硬件资源被很多需要业务出海的用户所青睐,然而在众多的美国服务器租用服务商中如何要考虑哪些因素才能租用到符合要求机器呢

    礼包 2021年12月6日
  • 为什么数据库会丢失数据

    技术为什么数据库会丢失数据今天就跟大家聊聊有关为什么数据库会丢失数据,可能很多人都不太了解,为了让大家更加了解,小编给大家总结了以下内容,希望大家根据这篇文章可以有所收获。数据库管理系统在今天已经是软件的重要组成部分,开

    攻略 2021年12月2日
  • html如何在文本上显示图片(html怎么在页面上显示图片)

    技术html中如何显示图片本篇内容介绍了“html中如何显示图片”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!

    攻略 2021年12月23日
  • 微信能传多大的视频,微信发视频一次最多能发多少秒

    技术微信能传多大的视频,微信发视频一次最多能发多少秒微信朋友圈发小视频只能发送时间在10s以内微信能传多大的视频、大小在3M以内的小视频,若大小超过3M则会自动压缩手机版微信发视频,单个视频最大不能超过20M,时间5mi

    生活 2021年10月20日