热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

大数据学习环境搭建

大数据学习环境安装关于防火墙​centos7使用的是firewalld,centos之前使用的是iptablesCentOS7关闭防火墙查看防火墙状态sudosy

大数据学习环境安装

关于防火墙

​ centos7使用的是firewalld,centos之前使用的是iptables

CentOS7关闭防火墙


  • 查看防火墙状态

    sudo systemctl status firewalld

  • 临时关闭防火墙,下次开机防火墙自启

    sudo systemctl stop firewalld

  • 永久关闭防火墙

    systemctl disable firewalld

    关闭SElinux

  • 查看SElinux状态,显示Enforcing表示开启

    getenforce

  • 临时关闭

    [root@localhost ~]# setenforce usage: setenforce [ Enforcing | Permissive | 1 | 0 ] 1表示启动,0表示关闭[root@localhost ~]# setenforce 0 临时关闭[root@localhost ~]# getenforce 查看状态Permissive 关闭状态

  • 永久关闭,修改配置文件

    vi /etc/selinux/config**将SELINUX修改未SELINUX=disabled


免密登录


  1. 所有虚拟机生成公钥和私钥

    **三台虚拟机分别生成公钥和私钥,按Enter使用默认
    ssh-keygen -t rsa

  2. 拷贝到node01上

    **分别在node01、node02、node03上执行复
    ssh-copy-id node01

  3. 远程拷贝/root/.ssh中的公钥文件到node02、node03上

    **在node01上执行,远程拷贝到node02、node03上
    scp /root/.ssh/authorized_keys node02:/root/.ssh

  4. 使用ssh node02、ssh node01、ssh node03切换


虚拟机时钟同步


  1. 以一台虚拟机的时钟为准进行同步

  2. 以服务器的时钟同步

    • 安装网络时钟

      yum install -y ntp

    • 修改

      crontab -e
      ##*/1 * * * * /usr/sbin/ntpdate ntp4.aliyun.com;
      ##表示每一分钟就和阿里的服务器保持时间同步


安装JDK1.8


  1. 卸载自带的openjdk

    ##查看openjdk
    rpm -qa | grep java
    ##卸载
    ##--nodeps是忽略依赖的影响,不加的话会有问题
    rpm -e ###上个指令查出的三个包的名字,以空格符隔开 ### --nodeps

  2. 创建软件安装包目录和安装目录

    ##创建安装包目录
    mkdir -p /export/softwares
    ##创建安装目录
    mkdir -p /export/servers

  3. 上传jdk到/export/softwares(这里使用ftp软件—速度快)

  4. 解压安装包 到 /export/servers

    tar -xvf 安装包名 -C ../servers/

  5. 配置环境变量

    vim /etc/profile
    #在最后添加如下内容,jdk为自己安装的版本
    export JAVA_HOME=/export/servers/jdk1.8.0_221
    export PATH=:$JAVA_HOME/bin:$PATH
    #保存退出

  6. 刷新内容生效

    source /etc/profile

  7. 查看jdk是否安装成功

    java -version

    安装mysql

    1. 安装mysql相关依赖包

      yum install mysql mysql-server mysql-devel

    2. 启动mysql服务

      service mysqld start

      如果出现问题:Failed to start mysqld.service: Unit not found.

      • 首先安装mariadb-server

        yum install -y mariadb-server

      • 启动服务

        systemctl start mariadb.service

      • 开机自启

        systemctl enable mariadb.service

    3. 通过mysql安装自带的脚本设置

      /usr/bin/mysql_secure_installation
      ##允许root远程登录
      ##设置新密码

    4. 赋予远程访问权限

      ##允许任意IP使用root账户登录
      grant all privileges on *.* to 'root'@'%' identified by '5201314asd' with grant option;
      ##刷新权限
      flush privileges;


推荐阅读
  • 搭建Jenkins、Ant与TestNG集成环境
    本文详细介绍了如何在Ubuntu 16.04系统上配置Jenkins、Ant和TestNG的集成开发环境,涵盖从安装到配置的具体步骤,并提供了创建Windows Slave节点及项目构建的指南。 ... [详细]
  • 在高并发需求的C++项目中,我们最初选择了JsonCpp进行JSON解析和序列化。然而,在处理大数据量时,JsonCpp频繁抛出异常,尤其是在多线程环境下问题更为突出。通过分析发现,旧版本的JsonCpp存在多线程安全性和性能瓶颈。经过评估,我们最终选择了RapidJSON作为替代方案,并实现了显著的性能提升。 ... [详细]
  • Symfony是一个功能强大的PHP框架,以其依赖注入(DI)特性著称。许多流行的PHP框架如Drupal和Laravel的核心组件都基于Symfony构建。本文将详细介绍Symfony的安装方法及其基本使用。 ... [详细]
  • ElasticSearch 集群监控与优化
    本文详细介绍了如何有效地监控 ElasticSearch 集群,涵盖了关键性能指标、集群健康状况、统计信息以及内存和垃圾回收的监控方法。 ... [详细]
  • 本文探讨了仅对图像文件的内容进行加密的方法,而不加密整个文件。通过这种方式,可以保护图像中的敏感信息,同时保持文件的其他部分不受影响。 ... [详细]
  • 本文详细介绍了如何解压并安装MySQL集群压缩包,创建用户和组,初始化数据库,配置环境变量,并启动相关服务。此外,还提供了详细的命令行操作步骤和常见问题的解决方案。 ... [详细]
  • 使用WinForms 实现 RabbitMQ RPC 示例
    本文通过两个WinForms应用程序演示了如何使用RabbitMQ实现远程过程调用(RPC)。一个应用作为客户端发送请求,另一个应用作为服务端处理请求并返回响应。 ... [详细]
  • 请看|间隔时间_Postgresql 主从复制 ... [详细]
  • NFS(Network File System)即网络文件系统,是一种分布式文件系统协议,主要用于Unix和类Unix系统之间的文件共享。本文详细介绍NFS的配置文件/etc/exports和相关服务配置,帮助读者理解如何在Linux环境中配置NFS客户端。 ... [详细]
  • 本文介绍如何在Linux系统中卸载预装的OpenJDK,安装指定版本的JDK 1.8,并配置防火墙以确保系统安全性和软件兼容性。 ... [详细]
  • 由二叉树到贪心算法
    二叉树很重要树是数据结构中的重中之重,尤其以各类二叉树为学习的难点。单就面试而言,在 ... [详细]
  • 本文详细介绍了钩子(hook)的概念、原理及其在编程中的实际应用。通过对比回调函数和注册函数,解释了钩子的工作机制,并提供了具体的Python示例代码,帮助读者更好地理解和掌握这一重要编程工具。 ... [详细]
  • 本文详细比较了CSS选择器和XPath在Selenium中通过页面结构定位元素的优劣,并提供了具体的代码示例,帮助读者理解两者在不同场景下的适用性。 ... [详细]
  • 软件工程课堂测试2
    要做一个简单的保存网页界面,首先用jsp写出保存界面,本次界面比较简单,首先是三个提示语,后面是三个输入框,然 ... [详细]
  • Ubuntu GamePack:专为游戏爱好者打造的Linux发行版
    随着Linux系统在游戏领域的应用越来越广泛,许多Linux用户开始寻求在自己的系统上畅玩游戏的方法。UALinux,一家致力于推广GNU/Linux使用的乌克兰公司,推出了基于Ubuntu 16.04的Ubuntu GamePack,旨在为Linux用户提供一个游戏友好型的操作环境。 ... [详细]
author-avatar
欢颜是胖妞妞08
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有