zoukankan      html  css  js  c++  java
  • 有关Linux服务器的一些配置

    1.Redis部署

    1.版本 redis-3.0.7
    2.上传解压
    3.编译 make && make install
    问题:/bin/sh: cc: command not found
    需要先安装好gcc : yum install gcc
    问题:In file included from adlist.c:34:0:
    执行:make MALLOC=libc -- 推测:编译库的问题。
    提示:make PREFIX=Path install --指定安装目录
    4.修改redis.conf配置文件
    -- 守护进行是否打开   本不支持后台运行,要想后台运行需要开启守护
    daemonize no   --> daemonize yes
    --添加bind ip为当前机器
    bind 192.168.245.130
    5.启动:在redis根目录执行
    启动:src/redis-server redis.conf //在后台运行了
    连接:src/redis-cli -h 192.168.245.130 -h代表host缩写
    查看key数据:keys *
    数据操作:set hello 123 ,get hello
    清楚数据:flushall
    停止服务:./redis-cli -h 192.168.245.130 -p 6379 shutdown

     

    2.Centos 7相关操作

    2.1 防火墙

    -- 可参考: https://www.cnblogs.com/moxiaoan/p/5683743.html
    firewalld的基本使用
    启动: systemctl start firewalld
    关闭: systemctl stop firewalld
    查看状态: systemctl status firewalld
    开机禁用 : systemctl disable firewalld
    开机启用 : systemctl enable firewalld

    2.2 主机名

    2--主机名修改 :https://blog.csdn.net/xuheng8600/article/details/79983927
    hostnamectl set-hostname xxx

    2.3 selinux

    SELinux(Security-Enhanced Linux) 是美国国家安全局(NSA)对于强制访问控制的实现,是 Linux历史上最杰出的新安全子系统。NSA是在Linux社区的帮助下开发了一种访问控制体系,在这种访问控制体系的限制下,进程只能访问那些在他的任务中所需要文件。

    但是这个安全策略会影响大数据学习时候,多个服务之间的数据交互。为了保证后续的学习,所有虚拟机都需要关闭SElinux,执行以下命令:

    关闭selinux
    vi /etc/selinux/config
    以下注释
    SELINUX=enforcing
    添加以下内容
    SELINUX=disabled

    2.4 ssh免密登录

    1.生成自己的密钥
    --在每台Linux中都要生成自己的密钥,执行以下命令:
    ssh-keygen -t rsa
    密钥的位置:/root/.ssh

    2.收集公钥   所有服务器执行
    ssh-copy-id linux01   //将密钥传给hadoop01服务器,hadoop01能访问所有服务器

    3.分发密钥   分给所有的服务器
    scp /root/.ssh/authorized_keys linux01:/root/.ssh/

    2.5 环境变量

    vi /etc/profile

    Java的配置==>在配置文件中添加以下配置:
    export JAVA_HOME=/export/servers/jdk1.8.0_141
    export PATH=:$JAVA_HOME/bin:$PATH

    配置生效:source /etc/profile

    2.6 tomcat

    查看Tomcat日志,执行命令:
    tail -f logs/catalina.out

    2.7 Mysql

    --mysql【5.7有变化】
    https://blog.csdn.net/u013541411/article/details/89516575
    安装完成之后
    mysql_upgrade -u root -p --force ;//后台运行
    set @@global.show_compatibility_56=ON;//解决兼容问题,后台运行


    --mysql【5.6】
    -- 检查是否存在mysql库
    rpm -qa | grep mysql
    -- 卸载mysql库    
    rpm -e --nodeps mysql-libs-5.1.71-1.el6.x86_64
    解压
    tar -xvf xx -C ?path
    安装  
    rpm -ivh *.rpm

    可能需要
    rpm -e mariadb-libs-1:5.5.60-1.el7_5.x86_64 --nodeps
    问题1: /usr/bin/perl is needed by MySQL-client-5.6.25-1.el6.x86_64
    -- yum install -y perl-Module-Install.noarch
    问题2:net-tools is needed by MySQL-server-5.6.25-1.el6.x86_64
    -- yum install net-tools -y

    启动mysql:service mysql start
    systemctl start mysqld.service
    查看初始密码:cat /root/.mysql_secret
    连接mysql:mysql -uroot -pXXXX
    修改密码:SET PASSWORD = PASSWORD('root');
    设置开机自启:chkconfig mysql on

    远程登录:
    格式:
    GRANT 【权限内容】 ON 【库名】.【表名】 TO 【用户名】@'【IP地址】'
    IDENTIFIED BY '【密码】' WITH GRANT OPTION;
    grant all privileges on *.* to 'root'@'%' identified by 'root' with grant option;

    flush privileges;

    2.8 网络配置

    修改其文件:/etc/sysconfig/network-scripts/ifcfg-ens33 
    DEVICE=ens33
    ONBOOT=yes
    BOOTPROTO=static
    IPADDR=192.168.245.130  ip地址
    NETMASK=255.255.255.0   子网掩码
    GATEWAY=192.168.245.2   网关
    DNS1=8.8.8.8
    
    修改完后生效:service network restart
    
    TYPE="Ethernet"
    BOOTPROTO=static
    NAME="ens33"
    UUID="1f093d71-99ep-4ad5-t424-98e13b4e99022"
    DEVICE="ens33"
    ONBOOT="yes"
    IPADDR=192.168.85.128
    NETMASK=255.255.255.0
    GATEWAY=192.168.85.2
    
    DNS1=8.8.8.8
    
    DNS2=8.8.8.4
    

    2.9 虚拟机克隆

    复制好文件之后
     -- 对复制的虚拟机生成新的MAC地址,然后启动
     -- 修改网卡配置
     	vi /etc/sysconfig/network-scripts/ifcfg-enxx
     	更改UUID 和 更改 IPADDR
    -- service network restart 
    -- 删除文件 /etc/udev/rules.d/70-persistent-net.rules 【存在的话】
    -- 设置主机名:hostnamectl set-hostname init1 
    -- 映射 vim /etc/hosts 
    
    

    2.10 Shell指令

    一:分解这个组合:“>/dev/null 2>&1” 为五部分。
    1:> 代表重定向到哪里,例如:echo "123" > /home/123.txt
    2:/dev/null 代表空设备文件
    3:2> 表示stderr标准错误
    4:& 表示等同于的意思,2>&1,表示2的输出重定向等同于1
    5:1 表示stdout标准输出,系统默认值是1,所以">/dev/null"等同于 "1>/dev/null"

    2.11 服务器的编码设置

      1.  locale查看服务器的编码

      2. locale -a 查看支持的编码有哪些

      3. vi  /etc/sysconfig/i18nvi  

        LANG=en_US.UTF-8
        SYSFONT=latarcyrheb-sun16

        #LANG="zh_CN.GBK"
        #SUPPORTED="zh_CN.UTF-8:zh_CN:zh"
        #SYSFONT="latarcyrheb-sun16"

     

    3.大数据相关组件

    3.1 Kafka的使用

    启动Zookeeper:
    /home/admin/modules/zookeeper-3.4.5/bin/zkServer.sh start
    
    启动Kafka:
    /home/admin/modules/kafka_2.11-0.11.0.2/bin/kafka-server-start.sh /home/admin/modules/kafka_2.11-0.11.0.2/config/server.properties 
    
    检查Kafka主题:
    /home/admin/modules/kafka_2.11-0.11.0.2/bin/kafka-topics.sh --zookeeper linux01:2181 --list
    
    创建Kafka主题:
    /home/admin/modules/kafka_2.11-0.11.0.2/bin/kafka-topics.sh --zookeeper linux01:2181 --topic traffic --create --replication-factor 1 --partitions 3
    
    控制台消费数据测试:
    /home/admin/modules/kafka_2.11-0.11.0.2/bin/kafka-console-consumer.sh --zookeeper linux01:2181 --topic traffic --from-beginning
    
    删除主题:
    /home/admin/modules/kafka_2.11-0.11.0.2/bin/kafka-topics.sh --delete --zookeeper linux01:2181 --topic traffic
    

     

    3.2 Zookeeper的部署

    https://www.cnblogs.com/zhaojiankai/p/7126181.html
    
    1.首先安装jdk,配置环境变量
    2.主机名与ip的映射    hosts文件
    3.创建日志存放目录dataDir  和 事务日志存放目录dataLogDir 
    	注意】:如果不配置dataLogDir,那么事务日志也会写在dataDir目录中。这样会严重影响zk的性能。因为在zk吞吐量很高的时候,产生的事务日志和快照日志太多。
    4.修改配置文件 conf/sample.cfg--->zoo.cfg
    	dataDir=xx
    	dataLogDir=xx
    	server.1=xx:2888:3888
    	server.2=xx:2888:3888
    	server.3=xx:2888:3888
    5.创建标识id文件 myid
    	在我们配置的dataDir指定的目录下面,创建一个myid文件,里面内容为一个数字,用来标识当前主机,conf/zoo.cfg文件中配置的server.X中X为什么数字,则myid文件中就输入这个数字:
    	 echo "1" > /usr/service/zookeeper-3.4.14/dataDir/myid
    
    6.复制zk到其他节点上,并修改对应的myid
    	 scp -rp zookeeper-3.4.14 root@linux02:/usr/service/
    
    7.启动和关闭zk
    	xx/bin/zkServer.sh start 	xx/bin/zkServer.sh stop
    	./zkServer.sh status 查看状态
    	日志可查询:/usr/local/zookeeper-3.4.6/bin/zookeeper.out
    
    8.连接zookeeper集群
    	./zkCli.sh -server  linux[x]:2181
    
    9.脚本定期清理zk快照和日志文件
    	正常运行过程中,ZK会不断地把快照数据和事务日志输出到dataDir和dataLogDir这两个目录,并且如果没有人为操作的话,ZK自己是不会清理这些文件的。 我这里采用脚本切割。
    vi clean_zklog.sh
    	#!/bin/bash
        ###Description:This script is used to clear zookeeper snapshot file and transaction logs.
        ###Written by: jkzhao - jkzhao@wisedu.com  
        ###History: 2016-04-08 First release.
        # Snapshot file dir.
        dataDir=/usr/service/zookeeper-3.4.14/dataDir/version-2
        # Transaction logs dir.
        dataLogDir=/usr/service/zookeeper-3.4.14/dataLogDir/version-2
        # Reserved 5 files.
        COUNT=5
        ls -t $dataDir/snapshot.* | tail -n +$[$COUNT+1] | xargs rm -f
        ls -t $dataLogDir/log.* | tail -n +$[$COUNT+1] | xargs rm -f
    chmod +x clean_zklog.sh
    crontab -e	:每个星期日的0点0分执行
    0 0 * * 0 /usr/service/zookeeper-3.4.14/clean_zklog.sh
    
    
    

     

    4.SVN部署

    1、安装SVN
    	yum -y install subversion
    2.创建svn仓库目录
    	mkdir -p /data/svn/repositories/eaglesvn
    3.创建svn版本库
    	svnadmin create /data/svn/repositories/eaglesvn/
    4、进入conf目录配置相关信息
    	 authz      //权限控制文件
    	 passwd     //账号密码文件
    	 svnserve.conf  //SVN服务配置文件
    	创建用户	//在里面增加用户,格式为:用户名 = 密码
    		vi /data/svn/repositories/eaglesvn/conf/passwd
    	设置权限
    		vi /data/svn/repositories/eaglesvn/conf/authz
    		例如: //eaglesvn表示版本库
    			[eaglesvn:/]
    			zhangyh = rw
    	修改svnserve.conf文件
    		vi /data/svn/repositories/eaglesvn/conf/svnserve.conf
    		//放出一下注释代码   要顶置,不能出现空格
            anon-access = read //匿名用户可读
            auth-access = write //授权用户可写
            password-db = passwd //使用哪个文件作为账号文件
            authz-db = authz //使用哪个文件作为权限文件
            realm =  /data/svn/repositories //认证空间名,版本库所在目录
    5.启动svn
    svnserve -d -r /data/svn/repositories/  //启动svn,注意目录,不包括eaglesvn
    ps aux | grep svnserve      //查看启动情况
    
    注意:如果有需要,在防火墙开放3690端口或者关闭防火墙
    vim /etc/sysconfig/iptables
    //在里面增加以下代码
    -A INPUT -p tcp -m state --state NEW -m tcp --dport 3690 -j ACCEPT
    
    ·
    6、测试SVN是否启动   //svn访问路径:svn://服务器ip/eaglesvn
    	svn co svn://192.168.0.190/eaglesvn
    
    


    资源链接 https://www.cnblogs.com/cz-zjy/p/11125432.html
  • 相关阅读:
    Editplus中添加System.out.println()快捷键
    API使用
    项目有两个红点
    no console to display at this time
    startup.bat闪退问题
    filter的dispatcher节点
    【DP专题】——洛谷P2467地精部落
    输入年月日,计算这是该年中第几天
    输出N以内的完整数
    python中关于EOF的tips
  • 原文地址:https://www.cnblogs.com/jokmangood/p/11844978.html
Copyright © 2011-2022 走看看