python中的多线程
2007-07-15
python中的多线程（2）
关键字: python thread threading
我们在上一章中看到使用threading.Thread.join()可以避免主程序在等待其它线程结束的过程中得到时间片。事实上，在线程编程中经常会遇到一个线程需要等待另一个线程中的情况。在这种情况下，需要重申的是，我们不希望等待的线程获得时间片。
解决的办法是使用条件变量，就像它的名称，代码使用它们来等待一些条件的成立。大多数线程系统都支持条件变量，python的threading包也不例外。
例如，pthreads包，使用pthread_cond来代表这种变量，并且有函数pthread_cond_wait()，它代表一个线程调用等待一个事件的发生；另一个函数,pthread_cond_signal()，另一个线程调用，代表声明等待的线程事件已经发生。
python中的条件变量较之C语言中的来说更容易使用，对于第一层次的条件变量来说，可以使用类threading.Condition,它能够在大多数的线程系统中良好的工作，但是使用这种条件变量需要进行额外的解锁和闭锁操作。
python提供了一种更高层次的类，threading.Event,它是对于threading.Condition的一种封装，而且在后台自动处理有关的锁操作。
接下去的例子将使用多线程来实现一个端口扫描器，多端口并行扫描，每个端口对应一个线程，同时程序可以控制线程的个数。如果主线程准备对一个新的端口进行扫描操作但是已经达到线程数的上限时，主线程会等待线程数减少到线程数上限以下再进行新端口的扫描，这个步骤通过条件变量来实现。
1 # portscanner.py: checks for active ports on a given machine; would be
2 # more realistic if checked several hosts at once; different threads
3 # check different ports; there is a self-imposed limit on the number of
4 # threads, and the event mechanism is used to wait if that limit is
5 # reached
6
7 # usage: python portscanner.py host maxthreads
8
9 import sys, threading, socket
10
11 class scanner(threading.Thread):
12 tlist = [] # list of all current scanner threads
13 maxthreads = int(sys.argv[2]) # max number of threads we’re allowing
14 evnt = threading.Event() # e
相关文档：
以下为我在处理网页编码问题看的文章，现在写爬虫自己处理网页编码问题确实比较麻烦，网页也没有规定
一定要在META头信息里带编码信息，而很多人写的探测编码就是获取META，这是不可取的，而有的人则是分析HTTP返回的数据包里边的
charset，如（a.headers.getparam('charset')），而HTTP包没有规定一定要带charset，所� ......
http://blog.alexa-pro.cn/?p=197
1.打开文件代码如下：
>>> f = open(”d:test.txt”, “w”)
说明：第一个参数是文件名称，包括路径；第二个参数是打开的模式mode’r'：只读（缺省。如果文件不存在，则抛出错误）’w'：只写（如果文件 不存在，则自动创建文件）’a'：附� ......
server:
import sys
import socket
host = sys.argv[1]
port = int(sys.argv[2])
s = socket.socket(socket.AF_INET, socket.SOCK_DGRAM)
s.setsockopt(socket.SOL_SOCKET, socket.SO_REUSEADDR, 1)
s.bind((host,port))
while 1:
try:
&n ......
安装文件下载:
MySQL-python-1.2.2.win32-py2.6.exe
https://docs.google.com/leaf?id=0B-C0ABoe2nuLMDlhZjI5OTQtMWNmYy00ZTNlLWJjNzMtYTc2Y2EzMGFjMzcy&hl=zh_CN
需要的额外dll文件下载:
libmmd.dll
https://docs.google.com/leaf?id=0B-C0ABoe2nuLZTk2M2RiZTAtYzY5My00NzNjLTg5ZWEtMzRkZGEyYjUxNThh&hl=zh_C ......
网络臭虫亦即网络信标，是通过某种手段隐式获取信息的的方法。
在bottle framework中可用下面的方法实现：
首先在你要用户浏览器显示的页面tpl上嵌入一个1*1像素的图片，或更小。
这个图片地址指向你服务器上某个特定位置，如static/webtrack.png。
用户打开网页，就会访问这个图片（通过浏览器如http://abc.abc.com/st ......
