linux装机

装机

  

2019-09-16 02:47:03

        本来是想写一个关于GMS测试的一些东西,但是公司前段时间说了不能透露内部关于这方面的东西,于是作罢。前几天吧电脑弄坏了,找了好些人都没能解决,那只能重装了,接下来就分享一些装机时遇到的事情。         因为我第一次装机是公司的前辈带着装的...

关于Ubuntu的安装盘制作,这里就不进行赘述了,百度搜索:Ubuntu安装盘制作,有很多很多的教程,这里主要介绍装完Ubuntu之后,我们首先需要做哪些事。 注:本教程使用的是Ubuntu16.04,其他新版本大部分都兼容。 1、更换下载速度快的国内源 如果在安装时候选的简体中文,默认会是中国的源。不过由于是默认属性,实际上在真实下载的时候,会很慢。所以我们首先将其修改为清华源。具体操作其实在清...

hadoop安装

装机

  

2020-06-17 12:14:21

安装 Hadoop下载: 将Hadoop添加到环境变量 在profile文件末尾添加JDK路径:(shitf+g) 让修改后的文件生效 测试是否安装成功 配置集群 1. 配置:/opt/module/hadoop-2.7.2/etc/hadoop/hadoop-env.sh Linux系统中获取JDK的安装路径: 文件里加上JAVA_HOME 路径: 2.配置:core-site.xml 3.&n...

TOMCAT安装

装机

  

2020-06-17 14:19:20

  到bin下启动: 浏览器访问: 配置快捷操作和开机启动  ⾸先进⼊ /etc/rc.d/init.d ⽬录,创建⼀个名为 tomcat 的⽂件,并赋予执⾏权限   接下来编辑 tomcat ⽂件,并在其中加⼊如下内容:   加⼊开机启动:   这样后续对于Tomcat的开启和关闭只需要执⾏如下命令即可:    ...

rabbit mq安装

装机

  

2020-06-17 15:04:23

设置RABBITMQ开机启动 启动RABBITMQ服务  开启WEB可视化管理插件:  访问可视化管理界⾯:  浏览器输⼊: 你的服务器IP:15672 我们可以在后台先添加⼀个⽤户/密码对: 然后登录⽹⻚即可: rabbitmqctl add_user root yourpassword rabbitmqctl set_user_tags root administ...

hadoop集群基本操作

装机

  

2020-06-19 06:43:41

建立目录: 上传小文件: 上传大文件: 文件存放位置: 从集群下载: 显示文件列表 删除文件:    集群启动/停止方式总结 1. 各个服务组件逐一启动/停止   (1)分别启动/停止 HDFS 组件 (2)启动/停止 YARN  2. 各个模块分开启动/停止(配置 ssh是前提)常用 (1)整体启动/停止 HDFS (2)整体启动/停止 YARN...

hadoop群起集群

装机

  

2020-06-19 15:41:31

首先配ssh:    https://blog.csdn.net/zs391077005/article/details/106827331 要分别能和自己以及其他节点都能ssh成功。    配置 slaves  在该文件中删掉localhost,增加如下内容:  注意:该文件中添加的内容结尾不允许有空格,文件中不允许有空行。 ...

flink的部署-集群方式

装机

  

2020-06-23 01:30:40

修改/opt/module/flink/conf/flink-conf.yaml: 修改 /conf/slave文件  修改 /conf/masters文件  分发给另外两台机子 :   启动: 关闭:...

presto安装

装机

  

2020-06-24 15:56:24

将 presto-server-0.196.tar.gz 导入 hadoop102 的/opt/software 目录下,并解压到/opt/module目录 ,修改名称为 presto  进入到/opt/module/presto 目录,并创建存储数据文件夹  配置在/opt/module/presto/etc 目录下添加 jvm.config 配置文件 添加如下内容 ...

spark standalone集群部署

装机

  

2020-06-30 01:05:45

进入spark安装目录下的conf文件夹 修改配置文件名称 修改slave文件,添加work节点: 加入: 修改spark-env.sh文件,添加如下配置: 分发spark包 启动 网页查看: 因为默认的8080和tomcat冲突了,改这里可以换成8081: 1、cd SPARK_HOME/sbin 2、vi start-master.sh 3、定位到下面部分内容: if [ "$SPA...

flume安装

装机

  

2020-06-30 19:59:26

  在/opt/module/flume/conf 目录下创建 file-flume-kafka.conf 文件: 拦截器步骤:   Flume 的 ETL 和分类型拦截器 本项目中自定义了两个拦截器,分别是:ETL 拦截器、日志类型区分拦截器。  需要先将打好的包放入到 hadoop102 的/opt/module/flume/lib 文件夹下面。 下载地址: ht...

zookeeper本地模式安装

装机

  

2020-07-02 05:01:44

解压 配置修改 (1)将/opt/module/zookeeper-3.4.10/conf 这个路径下的 zoo_sample.cfg 修改为 zoo.cfg;  (2)打开 zoo.cfg 文件,修改 dataDir 路径 (3)在/opt/module/zookeeper-3.4.10/这个目录上创建 zkData 文件夹  操作 Zookeeper  查看进程是...

hadoop源码编译

装机

  

2020-07-02 06:59:09

 jar 包准备(hadoop源码、JDK8、maven、ant 、protobuf) (1)hadoop-2.7.2-src.tar.gz (2)jdk-8u144-linux-x64.tar.gz (3)apache-ant-1.9.9-bin.tar.gz(build 工具,打包用的) (4)apache-maven-3.0.5-bin.tar.gz (5)protobuf-2.5...

nginx安装

装机

  

2020-07-03 08:17:59

下载 预先安装额外的依赖  编译安装NGINX  nginx解压后放在/usr/local/nginx里,在/usr/local/nginx/nginx-1.18.0下, 启动nginx: 如果想停⽌Nginx服务,可执⾏:   如果修改了配置⽂件后想重新加载Nginx,可执⾏:   注意其配置⽂件位于:  ...