python之模拟鼠标键盘动作具体实现
上个月就打算开发个还算好玩的项目,但是一直没时间。这篇是此项目用到的一部分,
处理好此部分基本还差通信等方面的了。首先模拟鼠标键盘按下释放的动作,本人利用X11
这个库,所以要了解X11编程;其次,本身用c或者c++就可以实现了,但是由于本人是py
粉,所以总想把代码搬进python,所以本人就要实现python模块,本篇用的ctypes,以后会
把python的c扩展模块附上来的。
1.X11编程
首先简单的介绍一下X11吧,网上有介绍,本人就不重复了。我们知道X是以server与client
的方式提供服务的,我们想要使用其功能,我们就需要与server通信。使用
Display *XOpenDisplay(char *display_name)获得一个Display类型的句柄指针就可以了。
display_name可以是DISPLAY环境变量,用echo $DISPLAY输出是:0(这是本人linux mint输
出的)。如果display_name为NULL接口默认使用环境变量保存的值。X11编程常用的几个头
文件:
#include <X11/Xlib.h>
#include <X11/Xutil.h>
#include <X11/Xos.h>
本人用到的是#include <X11/Xlib.h>和 #include <X11/extensions/XTest.h>.
XTest.h有我们模拟鼠标和键盘需要的接口XTestFakeButtonEvent、 XTestFakeMotionEvent和
XTestFakeKeyEvent。想了解更多信息只需要在终端上man加函数名即可获得。
比如XTestFakeMotionEvent接口:
int XTestFakeMotionEvent(display, screen_number, x, y,delay);
Display *display; //此值就是从XOpenDisplay获得
int screen_number; //让其为-1即可表示当前的屏幕
int x, y; //屏幕位置
unsigned long delay; //延迟毫秒,让其为CurrentTime表示不延迟
最后我们要关闭Display句柄:XCloseDisplay(Display *display)。
接口实现如下:
#include <stdio.h>
#include <X11/extensions/XTest.h>
#include <X11/Xlib.h>
Display *dspopen(){
Display *dsp = XOpenDisplay(NULL);
if(!dsp) {
printf("open display failed\n");
return NULL;
}
return dsp;
}
int presskey(Display *dsp,int s){ //键盘按
if(dsp==NULL)
return -1;
// KeySym keysym=XStringToKeysym(s);
KeyCode key=XKeysymToKeycode(dsp,s);
if(key==NoSymbol)
return -1;
XTestFakeKeyEvent(dsp,key,1,CurrentTime);
XFlush(dsp);
return 0;
}
int move(Display *dsp,int x,int y) //鼠标移动
{
if(0==XTestFakeMotionEvent(dsp,-1,x,y,CurrentTime))
{
printf("Cannot move!\n");
return -1;
}
return 0;
}
int buttonpress(Display *dsp,int type) //鼠标按,type=1表示左键,3是右键,2是中键
{
if(0==XTestFakeButtonEvent(dsp,type,1,CurrentTime))
{
printf("press failed\n");
return -1;
}
return 0;
}
int buttonrelease(Display *dsp,int type) //鼠标释放
{
if(0==XTestFakeButtonEvent(dsp,type,0,CurrentTime))
{
printf("release failed\n");
return -1;
}
return 0;
}
int releasekey(Display *dsp,int s){ //键盘release
if(dsp==NULL)
return -1;
// KeySym keysym=XStringToKeysym(s);
KeyCode key=XKeysymToKeycode(dsp,s);
if(key==NoSymbol)
return -1;
XTestFakeKeyEvent(dsp,key,0,CurrentTime);
XFlush(dsp);
return 0;
}
void dspclose( Display *dsp ){
if(dsp!=NULL){
XCloseDisplay(dsp);
}
}
//int main(){ //测试用的会在程序结束后,在光标前输出c
// Display *dsp=dspopen();
// presskey(dsp,'c');
// releasekey(dsp,'c');
// dspclose(dsp);
// return 0;
//}
上面注释掉的main函数可以作为测试用的,好了,我们把上面的代码保存为display.c
编译成一个共享库,需要X11和Xtst库。
gcc -fPIC -shared -o libdisplay.so display.c -lX11 -lXtst
编译后会生成libdisplay.so 。现在我们ctypes模块使用这个动态共享库。
2.ctypes简单介绍和使用
我们知道python中的类型与c中类型是不一样的,应该说没有一样的,就拿int想来说,
python也是把它看作PyObject类型来处理的。那么我们需要使用ctype提供的接口做类型的
转换。见:http://docs.python.org/2/library/ctypes.html#fundamental-data-types
此链接有张图详细的展现类型转换对应的接口。下面演示具体的操作吧。
我们通过CDLL()接口载入库:
lc=CDLL("./libdisplay.so")
然后就可以使用库中提供的接口了,但是上面dspopen()接口的返回值是Display类型的指针,
所以我们需要用c_void_p()转换一下:
d=c_void_p(lc.dspopen())
之后就可以用d做处理了,代码如下:
from ctypes import *
import time
class MOUSE:
LEFT=1
MiDDLE=2
RIGHT=3
lc=CDLL("./libdisplay.so")
d=c_void_p(lc.dspopen())
time.sleep(5);
lc.buttonpress(d,c_int(MOUSE.RIGHT))
lc.buttonrelease(d,c_int(MOUSE.RIGHT))
lc.dspclose(d)
上面的代码会在5秒后在鼠标指针处打开右键菜单。
利用ctypes使用c编写的库就讲这么多吧。以后会把c代码的部分写成python的c扩展再分享吧。
利用上面的模拟键盘和鼠标的接口可以做一些有意思的事情....