一、硬件情况 操作系统：CentOS Linux release 7.6.1810 (Core)  最小安装 8C16G（8线程cpu 16G内存） 500G硬盘 （系统和数据就一个盘） 二、网络设置 #enp0s3是网卡名，默认一般是eh0。 可以通过ip addr 命令查看获得 vi /etc/sysconfig/network-scripts/ifcfg-enp0s3 #将文件里ONBOOT=no 改成 ONBOOT=yes 保存退出 service network restart #重启网卡 三、安装相关工具 yum groupinstall -y “development tools...

下载地址： http://kafka.apache.org 1、解压文件 >tar zxvf kafka_2.11-0.9.0.0.tgz >mv kafka_2.11-0.9.0.0 kafka >cd kafka 2、Kafka使用Zookeeper所以你可能先要安装一个ZooKeeper.你可以使用kafka中打包好的脚本或者一个配置好的Zookeeper. >nohup bin/zookeeper-server-start.sh config/zookeeper.properties & 3、启动kafka >nohup bin/kafka-server-start.sh config/server.properties & 4、创...

下载地址： http://zookeeper.apache.org/releases.html tar zxvf zookeeper-3.4.8.tar.gz mv zookeeper-3.4.8 zookeeper mkdir zookeeperData cd zookeeper vi ～／.bash_profile export ZOOKEEPER_HOME=/data/zookeeper export PATH=$PATH:$ZOOKEEPER_HOME/bin:$ZOOKEEPER_HOME/conf 保存退出 cd conf vi zoo.cfg tickTime=2000 dataDir=/data/zookeeperData clientPort=2181 退出 在这个文件中，我们需要指定 dataDir 的值，...

我们上面讲了多线程，今天我们用Socket结合多线程实现一个简单IM。 1、服务器代码 package com.test.soctket; import java.io.IOException; import java.net.ServerSocket; import java.net.Socket; /** * * IM 服务器 * * @author victor * */ public class IMServer { private int port = 8081; // 默认端口 /** * 默认构造方法 */ public IMServer() { } /** * * @param port * 端口 */ public IMServer(int port) { this.po...

Hadoop2.0 配置SSH 安装 在线安装ssh #sudo apt-get install openssh-serveropenssh-client 手工安装ssh 存储ssh密码 #ssh-keygen -t dsa -P ” -f ~/.ssh/id_dsa #cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys #sudo chmod go-w $HOME $HOME/.ssh #sudo chmod 600 $HOME/.ssh/authorized_keys #sudo&nb...

我在前面已经分享了hadoop和hbase的安装，完成了我们使用hbase之前的准备工作。我整理一些hbase shell的基本命令分享给大家。 来体验一下hbase吧。 1、进入命令状态 #hbase shell 2、查看服务器状态 >status 3、查看版本 >version 4、创建一张表 >create ‘test1′,’test_id’,’adds’,’info’ (注：第一个是表名字，后面全是列名) create ‘testw’,’tes...

上篇文章我们已经讲了Hadoop的安装， 这篇文章我们将Hadoop以及Hbase的安装整体作个介绍，其中还包括zookeeper的安装。 准备工作： 下载jdk ： http://www.oracle.com/technetwork/cn/java/javase/downloads/index.htm下载hadoop： https://ccp.cloudera.com/display/SUPPORT/CDH4+Downloadable+Tarballs 下载zookeeper ：https://ccp.cloudera.com/display/SUPPORT/CDH4+Downloadable+Tarballs 下载hbase ：https://ccp.cloude...

Hadoop俨然已经成为大数据的标准，搭建一个Hadoop平台成为实施大数据计划的第一步。 那么我们就先来看看，如何来部署一个Hadoop。本文我们主要讲讲在Linux环境下Hadoop的安装操作过程。 一、准备工作： 下载jdk ： http://www.oracle.com/technetwork/cn/java/javase/downloads/index.html 下载hadoop ：https://ccp.cloudera.com/display/SUPPORT/CDH4+Downloadable+Tarballs 二、开始安装： （注：这里是按照hadoop2.0的版本...