linux基础篇大数据开发基础
Spark修炼之道（基础篇）——Linux大数据开发基础：第一节、Linux介绍、安装及使用...
由于本课程针对想从事大数据开发的初学者，后期也需要在Ubuntu中配置Intellij IDEA Spark、Scala开发环境，在Linux系统上进行Spark、Scala应用程序开发，因此之故本教程决定采用Ubuntu Desktop版本进行教学。2.Linux系统整体介绍 下图给出...
Spark修炼之道（基础篇）——Linux大数据开发基础：第二节：Linux文件系统、目录（一...
初始显示情况 root@ubuntu:/home/xtwy#tail-f hello.txt hello linux/向文件中追加内容 root@ubuntu:/home/xtwy#echo"hello linux linux">>hello.txt/追加后的输出情况 root@ubuntu:/home/xtwy#tail-f hello.txt hello linux hello linux ...
Spark修炼之道（基础篇）——Linux大数据开发基础：第十五节：基础正则表达式（一)
参考书目：鸟哥的LINUX私房菜基础学习篇（第三版）Linux Shell Scripting Cookbook 本节主要内容 基础正则表达式 1.基础正则表达式(1)^行开始符^匹配一行的开始，例如’^Spark’匹配所有Spark开始的行/grep-n表示查找到的结果显示行号 root...
Spark修炼之道（基础篇）——Linux大数据开发基础：第四节：Linux文件系统（二）
它其实是链接到test1.txt文件/然后显示相应内容 root@ubuntu:/home/xtwy#cat test1link file acl in acltst/创建完硬链接后，链接数+1 root@ubuntu:/home/xtwy/acltest#ls-l total 4-rw-r-r-+2 root root 19 2015-08-23 00:59 test1.txt/再...
Spark修炼之道（基础篇）——Linux大数据开发基础：第七节：进程管理
进程管理简介（1）进程概念 进程是操作系统中非常重要的一个概念，进程是程序的执行过程，相对于程序，进程是动态的，在linux系统中，它与用户权限相关，程序与进程并没有一一对应，一个程序可能对应多个进程，例如：/ps命令列出当前所有...
Spark修炼之道（基础篇）——Linux大数据开发基础：第八节：网络管理
这个功能或许对普通用户来说没有多大意义，但大型服务商会常常利用这个功能。如果你想为VMnet1网段提供路由功能，那就需要使用RRAS，而不能使用XP或2000的ICS，因为ICS会把内网的IP地址改为192.168.0.1，但虚拟机是不会给VMnet1虚拟网卡...
Spark修炼之道（基础篇）——Linux大数据开发基础：第十四节：Shell编程入门（六)
bin/sh#uname-s获取linux系统内核 SYSTEM=`uname-s` case$SYSTEM in Linux)echo"My system is Linux"echo"Do Linux stuff here.;FreeBSD)echo"My system is FreeBSD"echo"Do FreeBSD stuff here.;echo"Unknown system:$SYSTEM"echo"I don't...
Spark修炼之道（基础篇）——Linux大数据开发基础：第三节：用户和组
usually found in/dev)b Block device(a hardware device driver,usually found in/dev)后面紧跟着的是用户权限、组权限及其它权限，其中r表示读权限，w表示写权限，x表示可执行权限，再后面的数字表示的是链接数，这个放到下一节中介绍 紧...
Spark修炼之道（基础篇）——Linux大数据开发基础：第十二节：Shell编程入门（四)
本节主要内容 shell脚本调试 shell函数 shell控制结构初步 1.shell脚本调试 当脚本出错时，需要对脚本进行调试，学会脚本调试是每个linux系统使用者必备技能。shell脚本调试无需任何额外的工具，只需要要在脚本文件前加-x选项即可，创建...
Spark修炼之道（基础篇）——Linux大数据开发基础：第九节：Shell编程入门(一)
本节主要内容 shell编程简介 变量定义 常用特殊变量 1.shell编程简介 学习linux操作系统最让人着迷的事情莫过于shell脚本编程，这是因为如果要完成某些复杂的功能，单纯地通过GUI操作不可能达到，shell脚本可以直接与操作系统内核打交道，...
