pyzheng的专栏

[size=large][color=darkblue]Python 字符编码判断[/color][/size] [url]http://blog.sina.com.cn/s/blog_44c781ec0100sgsh.html[/url] [url]http://my.oschina.net/eonezhang/blog/125440[/url] [code="python"]def...

[url]http://jayzotion.iteye.com/blog/349654[/url] python类型转换 函数 描述 [code="python"]int(x [,base ]) 将x转换为一个整数 long(x [,base ]) 将x转换为一个长整数 float(x ) ...

[color=red][size=x-large]python requests 下载图片[/size][/color] [code="python"]def downloadImageFile(imgUrl): local_filename = imgUrl.split('/')[-1] print "Download Image File=", local_filenam...

JSON 1. import json 2. json.dumps() json obj => string 3. json.load() string => json obj Base64 [code="python"]import base64 import StringIO a = "this is a test" b = base64.encodestring(a)...

[url]http://www.qttc.net/201209207.html[/url] [color=darkblue]import os[/color] 主要涉及到三个函数 1、[color=darkblue]os.path.exists[/color](path) 判断一个目录是否存在 2、[color=darkblue]os.makedirs[/color](path) 多层创建...

例子没有加入[color=darkblue]失败后重做的功能[/color]，这个也可以考虑增加。 第三个例子加入了[b][color=red]访问频率控制[/color][/b] 遍历图片的例子[color=red]加入多线程，明显爬得快很多[/color] [color=red][size=x-large]解析163新闻列表的例子：[/size][/color] [code="py...

解决一： [url]http://stackoverflow.com/questions/15431044/can-i-set-max-retries-for-requests-request[/url] [code="python"]requests.adapters.DEFAULT_RETRIES = 5[/code] 解决二： [url]http://obroll.com/max...

[url]http://www.cnblogs.com/tqsummer/archive/2011/01/25/1944771.html[/url] 一、Python中的线程使用： Python中使用线程有两种方式：函数或者用类来包装线程对象。 1、 函数式：调用thread模块中的start_new_thread()函数来产生新线程。如下例： [code="python"]...

python GUI开发 工具选择 [url]http://blog.csdn.net/kiki113/article/details/4066828[/url] python学习笔记——Tkinter GUI编程——简介[url]http://blog.sina.com.cn/s/blog_4b5039210100eoq7.html[/url] Python GUI编程(Tkinter)...

原文：[url]http://my.oschina.net/qihh/blog/74266[/url] 利用python的subprocess模块执行外部命令,并捕获stdout,stderr的输出: [code="python"]import subprocess #print ’popen3:’ def external_cmd(cmd, msg_in=''): try:...

[color=red][b]1. Label里面的文本对齐方式[/b][/color]：[url]http://www.hiadmin.org/code/python_tkinter_label[/url] Label(root, text="www.hiadmin.org",bg="red",width=20,height=2, wraplength=80,anchor="w",[color=...

[url]http://my.oschina.net/u/852445/blog/398931[/url]

[size=x-large][color=red]连接 list 与分割字符串[/color][/size][url]http://woodpecker.org.cn/diveintopython/native_data_types/joining_lists.html[/url] 连接 list 与分割字符串 3.7.1. 字符串方法的历史注解 您有了一个形如 key=value 的 ke...

[Python Tip]如何计算时间差 [url]http://blog.donews.com/limodou/archive/2005/02/16/278221.aspx[/url] Q:如何方便的计算两个时间的差，如两个时间相差几天，几小时等 A:使用datetime模块可以很方便的解决这个问题，举例如下： [code="python"]>>> import datetime >>...

[url]http://www.open-open.com/lib/view/1325297750139[/url] Nutch 是一个开源Java 实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜索和Web爬虫。 尽管Web搜索是漫游Internet的基本要求, 但是现有web搜索引擎的数目却在下降. 并且这很有可能进一步演变成为一个公司垄断了几乎所有的web搜索...

[url]http://my.oschina.net/zplswf/blog/95093[/url] [color=darkblue][b]Larbin[/b][/color] 开发语言：C++ http://larbin.sourceforge.net/index-eng.html larbin是个基于C++的web爬虫工具，拥有易于操作的界面，不过只能跑在LINUX下，在一台普通PC下...

[url]http://bingozhao.com/blog/?p=53[/url] 研究淘宝产品数据抓取的时候遇到动态内容读取的问题（淘宝上的价格，评论信息是通过JS动态加载的），Nutch在这方面并未考虑。 对应的解决方案是基于Webkit/Geko等浏览器核心创建的Headless Browser Agent，比如casperjs（基于pantomjs），可以灵活实现各种模拟用户操作...

[Python]网络爬虫（一）：抓取网页的含义和URL基本构成 [url]http://blog.csdn.net/pleasecallmewhy/article/details/8922826[/url] [Python]网络爬虫（二）：利用urllib2通过指定的URL抓取网页内容 [url]http://blog.csdn.net/pleasecallmewhy/article/de...

看这里的回复 [url]http://www.v2ex.com/t/62657[/url] 42 回复 | 直到 2013-03-18 23:08:21 PM 1 for4 200 天前 ♥ 3 [color=darkblue]Python +requests +lxml +celery[/color] 2 xdeng 200 天前...

[color=red][size=x-large]比urllib好用的requests[/size][/color] [url]http://www.bsdmap.com/2013/01/13/python-requests/[/url] 更多见官方文档： [url]http://docs.python-requests.org/en/latest/user/quickstart/[/url]...

[url]http://www.pythonclub.org/modules/beautifulsoup/start[/url] [color=red]使用yumex安装[/color] 官方文档：[url]http://www.crummy.com/software/BeautifulSoup/bs4/doc/[/url]，version=4 中文文档：[url]http://www....

[url]http://blog.csdn.net/kernelspirit/article/details/2650696[/url] 1.需要在[b][color=red]第一行或第二行指定编码声明[/color][/b]。把ChineseTest.py文件的编码重新改为ANSI，并加上编码声明： # coding=gbk 2. 在中文字符串前面[color=red][b]加上u...

[color=red][size=large]python字符串连接[/size][/color] 先介绍下效率比较低的，有些新手朋友就会犯这个错误： [code="python"]a = ['a','b','c','d'] content = '' for i in a: content = content + i print content[/code] 说下为什么效...

[url]http://www.iteye.com/topic/573092[/url] 平时的主要编程语言是Java，开发时也主要用Mysql，经常为了测试，调试的目的需要操作数据库，比如备份，插入测试数据，修改测试数据，有些时候不能简单的用SQL就能完成任务，或都很好的完成任务，用Java写又有点太麻烦了，就想到了Python。Python语法简洁，不用编译，可以经较好的完成任务。今天看了下...

使用由 Python 编写的 lxml 实现高性能 XML 解析 [url]http://blog.csdn.net/yatere/article/details/6667043[/url] [color=darkblue][size=x-large]用lxml解析HTML[/size][/color][url]http://www.cnblogs.com/descusr/archive/2...

新版文档地址 [url]http://webmagic.io/docs/zh/[/url], [url]http://webmagic.io/docs/zh/posts/ch1-overview/README.html[/url] webmagic的使用文档：[url]https://github.com/code4craft/webmagic/blob/master/user-manual.m...