striverpan-CSDN博客

原创 aaa

@TOCEnglish English Study 音标我们对Markdown编辑器进行了一些功能拓展与语法支持，除了标准的Markdown编辑器功能，我们增加了如下几点新功能，帮助你用它写博客：全新的界面设计，将会带来全新的写作体验；在创作中心设置你喜爱的代码高亮样式，Markdown 将代码片显示选择的高亮样式进行展示；增加了图片拖拽功能，你可以将本地的图片直接拖拽到编辑区域直接展示；全新的 KaTeX数学公式语法；增加了支持甘特图的mermaid语法1 功能；增加了多屏幕编

2020-07-16 22:35:59 288

原创单例模式

第一种方式（必然使用该实例） public class Singleton { 　private Singleton() {} 　private static final Singleton 　　instance = new Singleton(); 　public static Singleton getInstance() { 　　return instance; 　} } 2.第

2018-01-31 16:13:32 232

转载数据库连接池配置

数据库连接池优化配置： dbcp c3p0 http://blog.csdn.net/hetaohappy/article/details/51861015

2018-01-17 13:42:56 266

原创自定义 UDF

1.hive自定义UDF

2017-09-12 15:09:08 378

原创 KafKa

一启动kafka 1.启动zookeeper D:\kafka_2.10-0.10.2.0\bin\windows>zookeeper-server-start.bat D:\kafka_2.10.10.2.0\config\zookeeper.properties 2.启动server D:\kafka_2.10-0.10.2.0\bin\windows>kafka-serve

2017-09-12 15:06:17 266

原创 maven

1 groupId 是项目组的ID，一般是com.公司组织名.项目名2 artifactId 是该项目在项目组中的ID,比如当前的项目是项目组的一个代理项目，就可以叫做myproxy3 version 是项目的版本号，用于维护项目的升级和发布

2017-06-30 10:08:42 252

原创 hive数据迁移导表

!/bin/bashhive -e “use ana_crmpicture;show tables;” > tables.txt sleep 3 cat tables.txt |while read eachline do hive -e “show create table ana_crmpicture.$eachline” >>tablesDDL.txt done

2017-06-26 20:34:07 799

转载 pandas库

**import pandas as pd 导入数据 pd.read_csv(filename)：从CSV文件导入数据 pd.read_table(filename)：从限定分隔符的文本文件导入数据 pd.read_excel(filename)：从Excel文件导入数据 pd.read_sql(query, connection_object)：从SQL表/库导入数据 pd.read_json(j

2017-06-07 13:29:03 360

原创 sql

sql是基本功复杂的sql还是需要时间学习 sql很常用能完成很多工作 #select * FROM store_information #SELECT DISTINCT * FROM store_information #where 查询 #SELECT * from store_information where sales > 1000; #多条件查询 #SELECT * from sto

2017-06-06 10:40:42 263

原创 python 科学计算

1.当前时间start = time.clock()2.matplotlib 画图 import matplotlib.pyplot as plt import numpy as np x = np.linspace(0, 10, 1000) y = np.sin(x) z = np.cos(x**2) plt.figure(figsize=(8,4)) plt.plot(x,y,la

2017-04-10 16:32:26 363

原创 python对html过滤处理

##过滤HTML中的标签 #将HTML中标签等信息去掉 #@param htmlstr HTML字符串. def filter_tags(htmlstr): #先过滤CDATA re_cdata=re.compile('//<!\[CDATA\[[^>]*//\]\]>',re.I) #匹配CDATA re_script=re.compile('<\s*script[^>]*

2017-03-17 16:37:42 3973

原创蓄水池抽样

蓄水池抽样def reservoir_sampling(vec, k): if k >= len(vec): return vec arr = vec[:k] for i, e in enumerate(vec[k:]): r = np.random.randint(0, k + i + 1) if r <= k-1

2017-03-17 10:28:35 358

原创 python 对key为时间的dict排序

python 对key为时间的dict排序

2017-03-16 11:06:33 5943 3

原创机器学习1 KNN文本分类

1.思想找到与数据最相近K个数据（根据余弦相似度） 2.分别找出K条数据的类别，同类别相加，得到最大值，则该类别为测试数据的所属类。代码# encoding=utf-8 from pylab import * reload(sys) def createDataSet(): group = [[1.0, 1.1], [2.0, 2.1], [1.1, 1.2], [2.2, 2.2]]

2017-02-15 23:35:27 1342

原创 spark学习1

1.算子的分类大致可以分为三大类算子。 1）Value数据类型的Transformation算子，这种变换并不触发提交作业，针对处理的数据项是Value型的数据。 2）Key-Value数据类型的Transfromation算子，这种变换并不触发提交作业，针对处理的数据项是Key-Value型的数据对。 3）Action算子，这类算子会触发SparkContext提交Job作业。1.1

2017-01-23 14:32:37 313

原创推荐算法

package com.pan.sparksql import org.apache.spark.{SparkConf, SparkContext} import org.apache.spark.mllib.recommendation.{ALS, Rating} import org.apache.spark.sql.Row import org.apache.spark.sql.hive.

2016-11-17 14:26:11 297

原创 spark sql

package com.pan.sparksql import org.apache.spark.SparkConf import org.apache.spark.SparkContext /** * Created by pan on 2016/11/11. */ object Demo { case class SgmRating(uid:Int,gid:Int,rat

2016-11-14 11:44:24 509

原创 hive学习

1.初始化 derby数据库schematool -initSchema -dbType derby

2016-11-07 14:41:02 279

原创 Scala学习

//1.定义函数 def max(x:Int,y:Int)=if(x>y) x else y; //2.if while语句 var i=0; while (i 10 ){ i = i+1; print(i); if(i==10){ println(); } } //3.for,foreach遍历 var array = Array(

2016-10-11 10:42:31 232

原创 hbase学习

package com.hbase; import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.HBaseConfiguration; import org.apache.hadoop.hbase.HColumnDescrip

2016-09-29 16:44:49 273

原创 shell学习

#!/usr/bin/env bash name="pan" //定义变量 echo "aa{$name}aa" //使用变量 for p in a,b,c,d;do echo $p done //for循环 readonly pass="password" //定义变量为只读 greeting="hello my

2016-09-20 22:43:50 313

原创架构学习OOP

深入学习才是成为大牛的方法 OOP 面向对象按照对象的方式思考问题~ OOP基类与子类原则：变与不变的原则(separate code that change from doesn't) 区分好什么是要变的什么是不变的

2016-01-23 23:44:02 440

原创偶有所感

１．高內聚　低耦合当前类中所有方法　都应处理自己的属性　否则放到其他类中

2015-11-19 21:18:20 458

原创 git常见问题

常见问题 1、如果在本地没有创建分支的情况下修改并commit了代码。解决办法（1）创建分支 git branch master --track origin/master （2）切换到master分支上 git checkout master （3）查看log git reflog （4）将提交的内容合并到master分支 git cherry-p

2015-11-19 21:08:39 411

原创 android收集

注意Context – 在我们前面也看到了，Activity是非常容易造成内存泄露的。在Android中，最容易造成内存泄露的当属Activity。并且这些内存泄露会浪费大量的内存，因为他们持有着他们UI中所有的View，而这些View通常会占据很多的控件。在开发过程中的很多操作需要Context，而我通常也会使用Activity来传递。所以一定要搞清楚你对这个Activity做了什么。如果一个引

2015-11-13 21:48:15 385

原创 java Compare

package com.study.util; import java.util.ArrayList; import java.util.Collections; import java.util.Comparator; import java.util.HashMap; import java.util.List; public class MyCompare {

2015-10-21 11:40:20 819

原创 eclipse快捷键

1.提示 ctrl+/ 2.查找文件 ctrl+shift+R 只查找某个java文件ctrl+shift+T 3.ctrl+k ctrl+shift+k 查找选定的内容 4.ctrl+shift+G 快速查找某个方法被引用的地方

2015-10-08 20:46:18 319

原创 git的学习

好的学习网站 http://www.bootcss.com/p/git-guide/ http://www.liaoxuefeng.com/wiki/0013739516305929606dd18361248578c67b8067c8c017b000 你的本地仓库由 git 维护的三棵“树”组成。第一个是你的工作目录，它持有实际文件；第二个是缓存区（Index），它像个缓存区域，临时

2015-09-30 20:11:51 280

原创 android学习

1 adb打开 fragment： adb shell am start -n com.android.settings/com.android.settings.SubSettings -e :android:show_fragment com.android.settings.accessibility.ToggleCaptioningPreferenceFragment

2015-09-25 16:50:00 843

原创空格替换

请编写一个方法，将字符串中的空格全部替换为“%20”。假定该字符串有足够的空间存放新增的字符，并且知道字符串的真实长度(小于等于1000)，同时保证字符串由大小写的英文字母组成。给定一个string iniString 为原始的串，以及串的长度 int len, 返回替换后的string。测试样例： "Mr John Smith”,13 返回："Mr%20John%20Smit

2015-09-04 18:37:03 363

原创 git使用

git add file git commit - s -a |||| git commit --amend git checkout -- file repo upload .

2015-08-19 23:36:19 332

原创链接不上小米手机

http://www.cnblogs.com/lucky-tom/p/3449700.html

2015-08-11 15:24:35 497

原创 C++文件操作

ifstream fis("ReadMe.txt"); if(fis.fail()){ exit(1); } ofstream fos("test2.txt"); string s; while( getline(fis,s) ) { cout fos fos } fis.close(); fos.close();

2015-08-08 20:29:24 363

原创一个完整的C++类

#include #include using namespace std; #pragma once namespace pan{//命名空间 class Person { friend void ff(); private: string name; string age; static int count1;//static类变量 string* gname;//g

2015-08-05 20:04:27 1186

原创继承与多态

基类： #pragma once class Figure { public: Figure(void); virtual void draw()=0; virtual ~Figure(void)=0; }; #include "StdAfx.h" #include "Figure.h" void Figure::draw(){//如果不是纯虚函数必须

2015-08-05 20:01:17 361

原创 C++ 字符串

//string字符串转化为c字符串 string s="abcd"; char ap[10]; strncpy(ap,s.c_str(),strlen(ap)); cout

2015-07-30 17:22:07 279

原创 vector的访问

//for size()遍历 int _tmain(int argc, _TCHAR* argv[]) { vector v; v.push_back('a'); v.push_back('b'); v.push_back('c'); v.push_back('d'); v[2]='v'; for(int i=0;i cout }

2015-07-29 16:58:52 409

原创 C++静态成员与函数

头文件：Person.h #include using namespace std; #pragma once class Person { private: string name; string age; static int count1;//static类变量 public: const string getAge(); void setAg

2015-07-29 16:03:57 384

原创 C++引用

#include #include using namespace std; void rchange(int& a,int& b){ int temp; temp=a; a=b; b=temp; } int main() { int a=0,b=1; rchange(a,b); cout

2015-07-27 20:50:57 345

原创 C++ 模板类

//头文件 #ifndef PERSON_H #define PERSON_H template class Person { public: Person(); virtual ~Person(); T fun1(T a); void fun2(T a); protected: private: }; #endif // PE

2015-07-27 19:21:49 377