前面写了这么多，其实都是铺垫，实际上我们今天才是正题，hadoop生态系统，一个开源的大数据系统。 =====================我是一个分割线===================== hadoop生态系统包含了很多很杂乱的组建，在我学习的时候，hadoop的2.8.1版本刚刚正式发布，在这篇文章开始写的时候，hadoop都发布03版本的第四个预览版了。 技术，就学最新的。我们从03版本开始学习源代码。 首先hadoop是什么？hadoop的百度百科。大家阅读完百度百科其实对hadoop就已经有一个初…
搭建yum源在以前的文章里面提起过，但是讲的是手动操作，这次我们高大上一点，自动化shell脚本。 首先，我的服务器是一台桌面版的ubuntu（自己在上面写代码用的），需要为自己的虚拟机（centos）提供yum源的rpm包安装，以及部分常用的其他tar.gz包文件。所以我将ubuntu划分为了三部分 第一部分 ：yum源 nginx或者apache来提供http方式的在线yum，采用rsync同步公网的yum源。 按照这个思想，我把yum源放到了/var/yum/centos目录下面。为了方便同局域网的人，yum…
这真的只是个入门级别的bash脚本编写教程，希望大佬指教。 ================这是正文开始的分割线================ Shell是用户与内核进行交互操作的一种接口，用C语言实现，目前最流行的Shell称为bash shell；Shell是一门编程语言，解释型的语言，Shell脚本就是在用linux的Shell命令来编程；一个系统可以存在多个Shell，可以通过cat /etc/shells命令查看系统中安装的Shell；sh是Unix的解释器，bash是目前用的最多的，dash比bash…
最近因为需要yum安装很多文件，所以想起来建立一个本地yum仓库，正好手头有一个1000Mbps的ubuntu系统，那我就拿它来作为yum的存储吧。 首先删除以前存储的私人文件，看着删除，反正桌面环境，看哪里不顺眼就去删除那里。 好了，东西删除完成后就可以开始我们的yum源配置过程， 1.安装nginx（老是用apache，怕你们吐槽我，换换口味） apt-get install nginx 安装完成后用另外一台电脑访问一下ip，出现 Welcome to nginx! ok，这就是没有问题。 2.安装create…
欢迎回到linux小白入门系列教程，继续欢迎大家的指正和批评，今天我们讲更多的linux命令。 这是我的linux小白入门系列的第四篇文章了，这里面写的都是我曾经遇到过和学习过的一部分linux知识，希望大家喜欢。 第一个命令： wget（空格）下载资源的网址 wget是一个单线程的下载工具，在linux上下载静态资源可以使用，对于动态资源，wget解析的不好，大部分时候下载不下来。举个例子： 在静态资源状态下，下载一个zip文件，可以 wget https://cn.wordpress.org/wordpress…
这篇文章将会干巴巴的讲很多centos命令，希望你们有点心理准备。 当然欢迎大家留言讨论，如有错误欢迎指正，谢谢大家合作。 centos系统开机以后第一件事情就是登陆，当界面出现login字符的时候，输入用户名，这里当然就是root了，然后回车（在命令行上，回车就是执行命令），然后出现password字符，这时输入密码，回车后我们就登陆成功了。 对于新人，我（老司机）要惊醒你们，不要尝试rm -rf /命令，这个命令会删除你centos系统上的“几乎”所有的内容，这个命令相当危险，在执行前请再三确认。 我们第一个命…
合适Linux小白入门的第二篇文章，第一篇文章很多理论上的东西，所以我们现在来实际操作一下，关于vmware的安装，网上有很多教程我就不再继续重复了，就说一说我们BIOS的设置，我们需要把intel或者amd的虚拟化设置打开，比如Intel的虚拟化设置，叫Virtualization Technology，设置成enable状态，然后讲VT-d设置成enable，就能顺利完成vmware的安装了，如果你不想设置BIOS，或者不懂BIOS的设置，你可以尝试一下Oracle公司的VirtualBox软件，小巧易用。 当…
题记：本篇文章是应大学同学的请求(让我每周至少写一篇)，开始写一些linux入门的知识。本人知识linux刚刚入门的小菜，希望以后的几篇文章能够引导未入门的linux小白达到入门级别，大神勿喷，谢谢合作，如有错误，请指正。 什么是linux？ linux是一个操作系统的内核，正如我们现在在使用的windows系统，它的内核就是windows NT，而且对于内核来说，正如windows的NT内核版本，windows7是NT6.0内核，windows8是NT7.0内核，依次类推，linux内核也是有如此命名法则，每次有…
目前在服务器上安装mysql服务，通过围观大佬的操作。总结出有三种方法： 第一种： 安装mysql的分支：mariadb， 其命令是： yum install mariadb-server mariadb MariaDB数据库管理系统是MySQL的一个分支，主要由开源社区在维护，采用GPL授权许可。开发这个分支的原因之一是：甲骨文公司收购了MySQL后，有将MySQL闭源的潜在风险，因此社区采用分支的方式来避开这个风险。MariaDB的目的是完全兼容MySQL，包括API和命令行，使之能轻松成为MySQL的代替品。…
在网上看了很多大神的blog，突然决定自己从零开始安装个blog来写文章，于是你们看到我的blog（笑）。 我的blog采用的是最简单的wordpress，感觉还不错。 安装分为几部分， 第一部分： 购买服务器，大家可以挑选自己喜欢的服务器提供商，进行购买。大家买自己喜欢的就可以了。 第二部分： 服务器，买好了就可以就可以开始准备一些小型工具，准备安装我们的Blog了。 其实就是我们需要一个连接服务器的ssh工具，比如说putty或者Xshell，都可以，大家随意就可以。 我们连上我们的服务器后一定要注意自己的权限…