baiyabai-CSDN博客

原创 Java基础之集合

Java基础之集合1. Java集合框架2. Collection接口API3. Iterator迭代器接口（遍历）4. Collection子接口之 Set接口5. Collection子接口之 List接口6. Map接口7. Collection工具类（集合）Collections8. 总结集合存储结构注意： LinkedList通过链表,频繁的插入或删除元素的操作，建议使用LinkedL...

2019-07-11 22:53:52 295

原创 Java基础之IO流

Java基础之IO流1. java.io.File类的使用2. IO原理及流的分类3. 文件流4. 缓冲流5. 转换流6. 对象流7. 随机存取流8.标准输入输出流9. 字符编码1. java.io.File类的使用java.io.File类：文件和目录路径名的抽象表示形式，与平台无关File 能新建、删除、重命名文件和目录，但 File 不能访问文件内容本身。如果需要访问文件内容本身，则需...

2019-07-10 22:50:23 800

原创 Java基础之面向对象

Java基础之面向对象一、面向对象与面向过程二、类和对象三、类的成员之属性四、类的成员之方法五、类的成员之构造器六、类的成员之初始化块七、类的成员之内部类八、面向对象特征之封装九、面向对象特征之继承十、面向对象特征之多态一、面向对象与面向过程二者都是一种思想，面向过程强调的是功能行为；面向对象将功能封装进对象，强调具备了功能的对象。二、类和对象类是对一类事物的描述，是抽象的、概念上的...

2019-07-10 21:53:21 342

原创 java基础语法总结

java基础语法一、Java概述二、Java基础语法1.变量2. 运算符三、引用数据类型四、流程控制语句五、数组1. 一维数组2. 二维数组一、Java概述JRE：java运行时的环境。JDK：java开发环境。JDK包含了JRE，JRE包含jvm。二、Java基础语法1.变量变量：变量是内存中装载数据的小盒子，只能存取数据。存储单元：1B（byte字节） = 8bit1...

2019-07-08 22:03:53 386

原创 WordCount

各种WordCountjava1.2.Scalaspark1.2.3.java1. public static void main(String[] args) { //step01 SparkConf conf = new SparkConf(); conf.setMaster("local[*]"); conf....

2019-06-22 10:50:04 237

原创 Scala总结之基础练习和面向对象

Scala总结二之基础练习和面向对象一. scala基础练习1.1. 字符串转换为数字1.2. 使用scala完成选择排序1.3. 使用scala完成二分查找二. scala面向对象2.1. 类的基本操作2.1.1. 类的创建与对象的构造2.1.2. 成员变量的封装getter和setter2.1.3. case class模拟javabean2.1.4. scala类的构造器2.1.5. 嵌套类...

2019-06-22 10:24:11 749

原创 Spark 总结一

spark 总结一一、Spark 简介RDD的解释二、Spark的核心概念2.1 名词解释2.1.1 ClusterManager2.2.2 Worker2.2.3 Driver2.2.4 Executor2.2.5 SparkContext2.2.6 RDD2.2.7 DAG Scheduler2.2.8 TaskScheduler2.2.9 Stage2.2.10 Task2.2.11 Tra...

2019-06-21 19:54:54 524

原创 Scala的快速排序

Scala 快排/** * 快速排序 * 9,8,7,1,2,3,4,5,6 * 折半进行排序，每次都是基于一个基准元素mark进行比较， * 把小于基准元素mark的放置到左侧，大于mark放置到右侧。 * 通过这一次转换，我们就能够找到mark在本集合中的恰当的位置。 * */object QuickSort { def main(args: Ar...

2019-06-17 20:07:20 1339

原创 java单例模式、Scala单例模式

单例java的两种单例模式Scala的单例模式java的两种单例模式/** * 单例 * * 一个类只能创建一个对象， * 定义的步骤： * 恶汉式： * 1、私有构造器 * 2、提供一个public的static的返回值为本类引用的方法 * 3、为了给第2步中提供实例，创建一个private的s...

2019-06-17 09:02:25 1160

原创 Hadoop的介绍

Hadoop介绍一、hadoop的产生背景：二、hadoop解决的问题三、hadoop 是什么？1. 组成模块：1.1 包含模块（代码结构）：1.2 功能分模块：四、hadoop的组成：1. hdfs：分布式存储2. mapreduce3. yarn一、hadoop的产生背景：1.google 搜索引擎的海量的网页数据如何存储的问题？海量网页数据如何计算?海量网页数据快速查询?解决...

2019-06-14 20:22:34 232

原创什么是大数据？

大数据介绍一、大数据的简概念二、大数据的特点：三、大数据的价值四、大数据中的几个核心概念1. 集群2. 分布式2.1 分布式存储2.2 分布式数据库2.3 分布式计算3. 负载均衡五、数据的处理流程1. 数据采集（数据来源）1.1 业务数据自己的数据1.2 爬虫1.3 数据买卖2. 数据的处理：2.1 缺失字段的数据2.2 敏感数据一、大数据的简概念顾名思义，大数据就是概念大而复杂的数据...

2019-06-14 19:58:10 456

原创 Linux基础知识二

Linux基础知识二一、用户和组1.什么是用户和组2.用户的分类3.查看用户4.操作用户5.组分类6.查看组7.组操作二、配置sudoer权限1.修改权限文件 vim /etc/sudoers2.操作三、文件权限1.文件类型和权限2.修改权限3.修改文件所属权(root下)四、打包和压缩1.压缩2.打包3.打包并压缩4.解包并解压缩七、httpd1.查看后台进程2.访问服务器3.资源目录4.额外...

2019-06-13 22:52:34 351

原创 Linux基础知识一

Linux一、什么是Linux？二、linux产生背景三、Linux的优点四、Linux系统架构五、虚拟机软件六、文件系统和目录结构1、文件系统2、目录结构2、1常见目录七、终端和常见命令1、终端2、常见命令2.1.帮助手册查看2.2磁盘管理2.2.1 cd: 实现目录切换2.2.2 pwd: 打印当前所在目录2.2.3 ls:展示目录内容(文件,目录)2.2.4 du:查看文件或者目录磁盘占用...

2019-06-13 21:48:21 306

Baiyabai的博客