stella_wu1017-CSDN博客

原创 idea里遇到的一些问题

1. scala文件出现大量错误一般是系统的scala版本低于了idea的scala插件版本，重新升级系统scala版本即可 2. 在idea里用maven编译jar，遇到报maven-complier-plugin的问题 a. 可以先尝试在pom里制定该包版本 b. 可能本地repo里jar包下载不全，可以删除那个目录再重新编译 c. 强制更新 mvn -U idea:idea d...

2020-05-06 22:21:23 301

原创阿里云ECS Spark安装

续上篇Hbase 下载spark2.11.0和scala 以下是对spark的版本描述 Spark runs on Java 7+, Python 2.6+/3.4+ and R 3.1+. For the Scala API, Spark 2.1.1 uses Scala 2.11. You will need to use a compatible Scala version (

2017-07-03 19:41:42 1333

续上篇： http://blog.csdn.net/stella_wu1017/article/details/72843841 在hadoop部署完成后，开始部署Zookeeper，zookeeper的安装环境需求： http://zookeeper.apache.org/doc/trunk/zookeeperAdmin.html#sc_requiredSoftware 首先Zo

2017-06-15 10:44:50 3424

原创阿里云ECS部署hadoop

创建实例选取阿里云ECS产品，4台机器，配置为：1核、1G内存、CentOS 6.8 64位阿里云操作系统的选择，以及系统软件安装命令查看一下系统信息： uname -a 结果： Linux xxx 2.6.32-696.1.1.el6.x86_64 #1 SMP Tue Apr 11 17:13:24 UTC 2017 x86_64 x86_64 x86_

2017-06-02 14:11:46 2144

原创 Linux CentOS7和windows通过samba4.2以上共享文件

linux和windows的文件共享需要通过samba，首先需要查看linux上是否有安装samba，通过命令行来监测： rpm -qa|grep smaba搜索查看是否安装 chkconfig --list|grep smb查看在运行状态下是否开启 service smb restart重启smb服务 service smb stop停止smb服务 service smb start

2017-03-28 11:06:57 659

转载滴滴大赛的帖子

滴滴算法大赛算法解决过程 - 方案设计 https://www.cnblogs.com/TextEditor/p/5527124.html https://www.ishuo.cn/doc/srmpafqf.html GBDT算法 http://www.doc88.com/p-6941533630446.html

2017-03-06 17:58:58 353

原创 maven的setting配置

D:/XXXX/.m2 <!-- server | Specifies the authentication information to use when connecting to a particular server, identified by | a unique name within the system (referred to by the 'i

2017-02-27 11:57:24 421

原创 maven的pom配置样例

4.0.0 com.xxx parent 2 ../pom.xml com.xxx.algorithm classifier 0.0.1-SNAPSHOT classifier-tool jar 4.12 1.7.5 UTF-8 UTF-8 1.7 maven2-reposi

2017-02-27 11:43:40 416

原创在eclipse中创建git+maven项目

创建新的maven+git项目 1. 先在eclipse中新建git项目，可以直接选择你打算创建maven项目的路径。创建完后，会在对应的目录里生成.git的隐藏文件夹 2. 在eclipse中选择新建maven项目，勾选”create a simple project”，去除勾选”use defaultworkspace location”，然

2017-02-27 10:47:04 5254

转载 ID3算法

ID3算法我们统计了14天的气象数据(指标包括outlook，temperature，humidity，windy)，并已知这些天气是否打球(play)。如果给出新一天的气象指标数据:sunny,cool,high,TRUE，判断一下会不会去打球。 outlook temperature humidity windy play

2017-02-22 16:40:34 937

转载机器学习实战：ch02-1

''' kNN.py ''' from numpy import * from operator def createDataSet(): group = array([[1.0,1.1],[1.0,1.0],[0,0],[0,0.1]]) labels = ['A','A','B','B'] return group,labels ''' intX: 输入向量,与d

2017-02-21 15:29:31 301

转载如何杀死defunct僵尸进程

转载：点击打开链接原文： How to kill defunct process 译者： youngsterxyf defunct进程是指出错损坏的进程，父子进程之间不会再通信。有时，它们会演变成“僵尸进程”，存留在你的系统中，直到系统重启。可以尝试 “kill -9” 命令来清除，但多数时候不管用。为了杀死这些defunct进程，你有两个选择：重启你的

2016-10-18 14:35:14 2287

原创阿里云CentOS7.264位下Node.js环境部署

阿里云CentOS7.264位下Node.js环境部署查看用于编译工具的gcc以及gcc+是否安装 rpm -qa|grep gcc rpm -qa|grep gcc-c++ rpm -qa|grep openssl-devel 查看可用于安装的gcc yum list gcc 由于这里版本可以，就不需要再升级了，如果升级的话使用命令 yum -y install gcc g

2016-10-17 16:25:59 338