大数据开发-第2课环境准备（大数据大环境）

1.centos安装

1.下载 iso
https://mirrors.aliyun.com/centos/7/isos/x86_64/CentOS-7-x86_64-Minimal-2207-02.iso
2.安装 
分区
/boot  512m
swap 8192m
剩下给 /
3. 配置
配置网络
数据源
curl -o /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo
curl -s -o /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-7.repo
yum clean cache
yum makecache
关闭防火墙
systemctl disable firewalld
禁用 selinux
vi /etc/selinux/config
SELINUX=disabled

2.docker安装

curl -fsSL https://get.docker.com | bash -s docker --mirror Aliyun

3.安装完基本配置

1. docker mirror

第一步：新建或编辑daemon.json

vi /etc/docker/daemon.json

第二步：daemon.json中编辑如下

{

"registry-mirrors": ["http://hub-mirror.c.163.com"]

}

第三步：重启docker

systemctl restart docker.service

第四步：执行docker info查看是否修改成功

docker info

基它mirror

https://registry.cn-hangzhou.aliyuncs.com

https://mirror.ccs.tencentyun.com

https://registry.docker-cn.com

http://hub-mirror.c.163.com

2. docker远程登录

# vim /usr/lib/systemd/system/docker.service

[Service]

ExecStart=

ExecStart=/usr/bin/dockerd -H tcp://0.0.0.0:2375 -H unix://var/run/docker.sock

systemctl daemon-reload

systemctl restart docker

ps -ef|grep docker

netstat -tulp

docker -H tcp://192.168.2.10:2375 images

4常用工具

yum install tree nmap dos2unix lrzsz nc lsof wget tcpdump htop iftop iotop sysstat nethogs -y

tree：tree以树形结构显示文件和目录

nmap：nmap扫描端口的工具

dos2unix 转换脚本格式的工具

lrzsz 包含上传（rz）下载（sz）文件工具

nc 文件传输、端口检查

lsof 反查端口进程，以及服务开发文件工具

wget 下载软件包工具

tcpdump 抓包、监听等重要排错工具

htop 系统进程相关信息查看工具

iftop 查看主机网卡带宽工具

iotop

sysstat 含有sar，iostat等重要系统性能查看工具

nethogs 显示进程的网络流量

yum install epel-release

yum install psmisc net-tools bash-completion vim-enhanced -y

psmisc：含有killall、pstree等命令

net-tools：含有netstat、ifconfig、route、arp等命令

bash-completion：tab补全功能工具包

vim-enhanced：vim编辑器工具包

查看安装情况命令：

（1）yum groups mark convert

（2）yum grouplist