暑期第六周总结()

大数据hadoop基础

本周安装了Vmware虚拟机环境,安装了centos7的Linux系统环境
安装了三个虚拟机,node1,node2,node3,并且配置了网关,本地域名,关闭防火墙、配置SSH免密、hosts映射、安装lrzsz,
在三台虚拟机上安装了hadoop软件,学了hadoop中的基础HDFS–分布式文件存储系统,了解了其实现的基本原理,
通过一个nameNode管理多个datanode,实现文件的分布式存储,在这里的存储是实实在在的将文件物理上分割下来,存储到多台机器上
在namenode上存储元数据(即描述数据的数据,包括数据在哪个计算机上存储,该数据被分割成几块,在哪个计算机上有备份)

本周安装了Vmware虚拟机环境,安装了centos7的Linux系统环境
安装了三个虚拟机,node1,node2,node3,并且配置了网关,本地域名,关闭防火墙、配置SSH免密、hosts映射、安装lrzsz,
在三台虚拟机上安装了hadoop软件,学了hadoop中的基础HDFS–分布式文件存储系统,了解了其实现的基本原理,
通过一个nameNode管理多个datanode,实现文件的分布式存储,在这里的存储是实实在在的将文件物理上分割下来,存储到多台机器上
在namenode上存储元数据(即描述数据的数据,包括数据在哪个计算机上存储,该数据被分割成几块,在哪个计算机上有备份)

在分享一个工具finalshell一个国产的通过ssh连接linux环境的软件,可以更清晰的在linux上书写命令,并做一些同步的操作,也可以通过可视化界面观看文件系统,
下面分享一段代码,可以通过机器码,获得finalshell的激活码



import java.io.IOException;
import java.security.MessageDigest;
import java.security.NoSuchAlgorithmException;
import java.util.Scanner;

public class FinalShell {
    public static void main(String[] args) throws NoSuchAlgorithmException, IOException {
        System.out.print("请输入FinalShell的离线机器码:");
        @SuppressWarnings("resource")
        Scanner reader = new Scanner(System.in);
        String machineCode = reader.nextLine();
        generateKey(machineCode);
    }

    public static void generateKey(String hardwareId) throws NoSuchAlgorithmException {
        String proKey = transform(61305 + hardwareId + 8552);
        String pfKey = transform(2356 + hardwareId + 13593);
        System.out.println("请将此行复制到离线激活中:" + proKey);
    }

    public static String transform(String str) throws NoSuchAlgorithmException {

        @SuppressWarnings("unused")
        String md5 = hashMD5(str);

        return hashMD5(str).substring(8, 24);
    }

    public static String hashMD5(String str) throws NoSuchAlgorithmException {
        MessageDigest digest = MessageDigest.getInstance("MD5");
        byte[] hashed = digest.digest(str.getBytes());
        StringBuilder sb = new StringBuilder();
        for (byte b : hashed) {
            int len = b & 0xFF;
            if (len < 16) {
                sb.append("0");
            }
            sb.append(Integer.toHexString(len));
        }
        return sb.toString();
    }
}

————————

大数据hadoop基础

本周安装了Vmware虚拟机环境,安装了centos7的Linux系统环境
安装了三个虚拟机,node1,node2,node3,并且配置了网关,本地域名,关闭防火墙、配置SSH免密、hosts映射、安装lrzsz,
在三台虚拟机上安装了hadoop软件,学了hadoop中的基础HDFS–分布式文件存储系统,了解了其实现的基本原理,
通过一个nameNode管理多个datanode,实现文件的分布式存储,在这里的存储是实实在在的将文件物理上分割下来,存储到多台机器上
在namenode上存储元数据(即描述数据的数据,包括数据在哪个计算机上存储,该数据被分割成几块,在哪个计算机上有备份)

本周安装了Vmware虚拟机环境,安装了centos7的Linux系统环境
安装了三个虚拟机,node1,node2,node3,并且配置了网关,本地域名,关闭防火墙、配置SSH免密、hosts映射、安装lrzsz,
在三台虚拟机上安装了hadoop软件,学了hadoop中的基础HDFS–分布式文件存储系统,了解了其实现的基本原理,
通过一个nameNode管理多个datanode,实现文件的分布式存储,在这里的存储是实实在在的将文件物理上分割下来,存储到多台机器上
在namenode上存储元数据(即描述数据的数据,包括数据在哪个计算机上存储,该数据被分割成几块,在哪个计算机上有备份)

在分享一个工具finalshell一个国产的通过ssh连接linux环境的软件,可以更清晰的在linux上书写命令,并做一些同步的操作,也可以通过可视化界面观看文件系统,
下面分享一段代码,可以通过机器码,获得finalshell的激活码



import java.io.IOException;
import java.security.MessageDigest;
import java.security.NoSuchAlgorithmException;
import java.util.Scanner;

public class FinalShell {
    public static void main(String[] args) throws NoSuchAlgorithmException, IOException {
        System.out.print("请输入FinalShell的离线机器码:");
        @SuppressWarnings("resource")
        Scanner reader = new Scanner(System.in);
        String machineCode = reader.nextLine();
        generateKey(machineCode);
    }

    public static void generateKey(String hardwareId) throws NoSuchAlgorithmException {
        String proKey = transform(61305 + hardwareId + 8552);
        String pfKey = transform(2356 + hardwareId + 13593);
        System.out.println("请将此行复制到离线激活中:" + proKey);
    }

    public static String transform(String str) throws NoSuchAlgorithmException {

        @SuppressWarnings("unused")
        String md5 = hashMD5(str);

        return hashMD5(str).substring(8, 24);
    }

    public static String hashMD5(String str) throws NoSuchAlgorithmException {
        MessageDigest digest = MessageDigest.getInstance("MD5");
        byte[] hashed = digest.digest(str.getBytes());
        StringBuilder sb = new StringBuilder();
        for (byte b : hashed) {
            int len = b & 0xFF;
            if (len < 16) {
                sb.append("0");
            }
            sb.append(Integer.toHexString(len));
        }
        return sb.toString();
    }
}