【若澤大數據實戰第一天】大數據測試平臺搭建

若澤大數據測試平臺環境搭建

1、介質需求：

虛擬機：VMware Workstation  14.1.1.28517 大小：465.2MB

操做系統：CentOS-6.5-x86_64-bin-DVD1.iso 大小：4.16GB

 

2、測試環境搭建：

 

一、虛擬機安裝：

打開VMware Workstation Pro 點擊 ：''下一步 ''

勾選''我接受許可協議中的條款(A)'' 點擊 ：''下一步 ''

我E盤是SSD

點擊： ''下一步 ''

 

取消''√''選項 點擊 ''下一步 ''

點擊 ：''下一步 ''

點擊 ''安裝 ''

 

點擊： ''完成 ''

 

VMware Workstation 14 Pro永久激活密鑰 ：點擊 ''完成 ''

CG54H-D8D0H-H8DHY-C6X7X-N2KG6

ZC3WK-AFXEK-488JP-A7MQX-XL8YF

 

 

 

二、新建虛擬機：

選擇''自定義(高級)'' ：點擊 ''下一步 ''

 

 

選擇向下兼容的虛擬機版本：點擊 ''下一步 ''

選擇安裝介質，選擇稍後安裝操做系統：點擊 ''下一步 ''

選擇須要安裝的操做系統版本，選擇 CentOS 6 64位 ：點擊 ''下一步 ''

虛擬機命名及選擇安裝路徑：點擊 ''下一步 ''

 

選擇處理器及核心數：點擊 ''下一步 ''

大數據測試環境內存大小設置爲4G：點擊 ''下一步 ''

選擇網卡模式，這裏選擇NAT : 點擊 ''下一步 ''

選擇磁盤物理模式 : 點擊 ''下一步 ''

選擇磁盤類型 : 點擊 ''下一步 ''

建立新的虛擬磁盤：點擊 ''下一步 ''

設置磁盤大小及磁盤文件存儲類型：

咱們設置爲50G,選擇存儲爲單個文件，不當即分配全部空間：點擊 ''下一步 ''

設置磁盤文件名：點擊 ''下一步 ''

點擊 ''完成 '' 虛擬機建立結束

建立完成的虛擬機以下圖：

設置安裝介質，保存並退出：

三、安裝操做CentOs 6.5：

選擇第一個 install or upgrade an existing system： 回車

點擊Skip，跳過磁盤檢測：回車

點擊：next

選擇安裝語言，Chinese(Simplified) (中文（簡體）) 點擊：next

選擇鍵盤語言，美國英語式 點擊 ''下一步 ''

選擇存儲設備，咱們選擇 base storage  devices 點擊 ''下一步 ''

選擇 是，忽略全部數據 點擊 ''下一步 ''

 

主機名：hadoop01

ip地址：192.168.56.10 /24    192.168.56.1  點擊：應用 ''下一步 ''

選擇時區，咱們選擇亞洲，上海：點擊 ''下一步 ''

設置root用戶的密碼，咱們設置爲oracle,選擇不管如何都使用：點擊 ''下一步 ''

選擇安裝類型，咱們選擇自定義佈局：點擊 ''下一步 ''

建立分區：

swap : 8192

boot : 200MB

/ : 使用剩餘全部空間，強制主分區

選擇 格式化 → 將更改寫入到磁盤：點擊 ''下一步 ''

選擇引導驅動器：點擊 ''下一步 ''

選擇 Desktop 如今自定義 安裝 ：

做爲DBA的我喜歡把許多包都打上 選擇 Database Server

基本系統：兼容程序（全勾選）繼承UNIX兼容性（勾選 telnet選項）

服務器

Web服務

數據庫 勾所有取消

系統管理：系統管理（全勾選）

虛擬化

桌面：第一個不選擇，剩餘選項 全選

應用程序：EMACS（勾選） 互聯網瀏覽器（勾選）

開發：開發工具 所有勾上軟件包 附加開發（全溝）

語言：中文，英語

 

點擊 ''下一步 ''

安裝軟件包ing

點擊 ''從新引導 ''

點擊 ''前進 ''

點擊 ''前進 ''

 

設置普通的用戶名和密碼，權限比root小：點擊  '' 前進 ''

設置日期和時間：點擊  '' 前進 ''

不啓用 kdump：點擊  '' 完成 ''

操做系統已經安裝完畢

 

 

3、測試環境參數配置：

修改CentOS 6.5主機名

1. vi /etc/sysconfig/network

[root@localhost ~]# vi /etc/sysconfig/network
NETWORKING=yes
HOSTNAME=hadoop01
2.hostname  直接命名
[root@localhost ~]#hostname hadoop01
3. vi /etc/hosts
[root@localhost ~]# vi /etc/hosts
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
192.168.137.30 hadoop01

4、CentOS6.5  配置靜態 IP  和可訪問外網

關閉windows 7 防火牆

 

關閉CentOS 6.5防火牆

開啓VMware兩個服務

無線網卡的網絡( 或者插網線的網絡) 上設置網絡共享，選擇 VM8

使用 ipconfig -all  命令查看 DNS 、IPv4 

配置 VM8  的選擇  使用配置 ip

進入 vmnet8, 單擊菜單欄的 編輯-->虛擬網絡編輯器

hadoop01  配置 NAT 

進入hadoop01編輯，ifcfg-eth0

vi /etc/sysconfig/network-scripts/ifcfg-eth0

網絡配置文件參數(參考)

將hadoop01網絡重啓

虛擬機能夠鏈接外網

 

5、操做系統優化

配置本地yum源

mkdir /iso
mount /dev/cdrom /mnt
mount -a
# 屏幕出現掛載信息 mount: block device /dev/sr0 is write-protected, mounting read-only # 表示已經掛載 mkdir /etc/yum.repos.d/bak/ mv /etc/yum.repos.d/CentOS-* /etc/yum.repos.d/bak/ # 將原來的配置文件移動走 cat >/etc/yum.repos.d/p.repo<<EOF [p] name=p baseurl=file:///iso/ enabled=1 gpgcheck=0 EOF # 新建配置文件，其中baseurl使用file參數指定本機的/iso/目錄 # enabled=1 表示啓用 # gpgcheck=0 表示不作gpg的對比檢查 yum clean all yum makecache # 看到進度條表示配置成功 yum -y install wget wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-6.repo # 下載阿里雲的yum源配置文件 yum clean all yum makecache # 這樣本地yum源和網絡yum源就配置成功了

如下命令按本身需求，不要隨便使用，開不了機，後果自負 

優化關閉開機啓動項

chkconfig blk-availability off chkconfig ip6tables off chkconfig lvm2-monitor off chkconfig netfs off chkconfig postfix off chkconfig mdmonitor off # 還有一些開機啓動優化項能夠在從此作優化選擇 chkconfig kdump off chkconfig NetworkManager off chkconfig abrt-ccpp off chkconfig abrtd off chkconfig acpid off chkconfig certmonger off chkconfig cpuspeed off chkconfig cups off chkconfig nfslock off chkconfig portreserve off chkconfig rpcbind off chkconfig rpcgssd off chkconfig rpcidmapd off

設置自動任務校準時間

yum -y install ntpdate
ntpdate -u ntp1.aliyun.com
# 使用阿里雲的ntp服務器作時間校準 echo '/usr/sbin/ntpdate -u ntp1.aliyun.com'>>/etc/rc.local crontab -l>/tmp/crontab.tmp echo '#OS Time Sync'>>/tmp/crontab.tmp echo '0 * * * * /usr/sbin/ntpdate -u ntp1.aliyun.com>>/root/ntpdate.log 2>&1;/sbin/hwclock -w'>>/tmp/crontab.tmp cat /tmp/crontab.tmp |crontab rm -rf /tmp/crontab.tmp # 設置開機啓動時間校準和自動任務時間校準 cp -av /usr/share/zoneinfo/Asia/Shanghai /etc/localtime # 若是忘記設置時區，能夠手動設置時區爲東八區

大數據課程推薦：