python之模拟鼠标键盘动作


上个月就打算开发个还算好玩的项目,但是一直没时间。这篇是此项目用到的一部分,
 
处理好此部分基本还差通信等方面的了。首先模拟鼠标键盘按下释放的动作,本人利用X11
 
这个库,所以要了解X11编程;其次,本身用c或者c++就可以实现了,但是由于本人是py
 
粉,所以总想把代码搬进python,所以本人就要实现python模块,本篇用的ctypes,以后会
 
把python的c扩展模块附上来的。
 
  1.X11编程
 
    首先简单的介绍一下X11吧,网上有介绍,本人就不重复了。我们知道X是以server与client
 
的方式提供服务的,我们想要使用其功能,我们就需要与server通信。使用
 
Display *XOpenDisplay(char *display_name)获得一个Display类型的句柄指针就可以了。
 
display_name可以是DISPLAY环境变量,用echo $DISPLAY输出是:0(这是本人linux mint输
 
出的)。如果display_name为NULL接口默认使用环境变量保存的值。X11编程常用的几个头
 
文件:
 
  #include <X11/Xlib.h>
  #include <X11/Xutil.h>
  #include <X11/Xos.h>
 
本人用到的是#include <X11/Xlib.h>和 #include <X11/extensions/XTest.h>.
 
XTest.h有我们模拟鼠标和键盘需要的接口XTestFakeButtonEvent、 XTestFakeMotionEvent和
 
XTestFakeKeyEvent。想了解更多信息只需要在终端上man加函数名即可获得。
 
比如XTestFakeMotionEvent接口:
 
int XTestFakeMotionEvent(display, screen_number, x, y,delay);
 
Display *display;  //此值就是从XOpenDisplay获得
int screen_number; //让其为-1即可表示当前的屏幕
int x, y;          //屏幕位置
unsigned long delay; //延迟毫秒,让其为CurrentTime表示不延迟
最后我们要关闭Display句柄:XCloseDisplay(Display *display)。
 
接口实现如下:
 
 
 1 #include <stdio.h>
 2 #include <X11/extensions/XTest.h>
 3 #include <X11/Xlib.h>
 4 Display *dspopen(){   
 5     
 6     Display *dsp = XOpenDisplay(NULL);
 7     if(!dsp) {
 8         printf("open display failed\n");
 9         return NULL;
10     }
11     return dsp;
12 }
13 int presskey(Display *dsp,int s){  //键盘按
14     if(dsp==NULL)
15         return -1;
16 //    KeySym keysym=XStringToKeysym(s);
17     KeyCode key=XKeysymToKeycode(dsp,s);
18     if(key==NoSymbol)
19         return -1;
20     XTestFakeKeyEvent(dsp,key,1,CurrentTime);
21     XFlush(dsp);
22     return 0;
23 }
24 int move(Display *dsp,int x,int y) //鼠标移动
25 {
26     if(0==XTestFakeMotionEvent(dsp,-1,x,y,CurrentTime))
27     {
28         printf("Cannot move!\n");
29         return -1;
30     }
31     return 0;
32 }
33 int buttonpress(Display *dsp,int type) //鼠标按,type=1表示左键,3是右键,2是中键
34 {
35     if(0==XTestFakeButtonEvent(dsp,type,1,CurrentTime))
36     {
37         printf("press failed\n");
38         return -1;
39     }
40     return 0;
41 }
42 int buttonrelease(Display *dsp,int type) //鼠标释放
43 {
44     if(0==XTestFakeButtonEvent(dsp,type,0,CurrentTime))
45     {
46         printf("release failed\n");
47         return -1;
48     }
49     return 0;
50 }
51 int releasekey(Display *dsp,int s){ //键盘release
52     if(dsp==NULL)
53         return -1;
54 //    KeySym keysym=XStringToKeysym(s);
55     KeyCode key=XKeysymToKeycode(dsp,s);
56     if(key==NoSymbol)
57         return -1;
58     XTestFakeKeyEvent(dsp,key,0,CurrentTime);
59     XFlush(dsp);
60     return 0;
61 }
62 void dspclose( Display *dsp ){
63     if(dsp!=NULL){
64         XCloseDisplay(dsp);
65         
66     }
67 }
68 //int main(){     //测试用的会在程序结束后,在光标前输出c
69 //    Display *dsp=dspopen();
70 //    presskey(dsp,'c');
71 //    releasekey(dsp,'c');
72 //    dspclose(dsp);
73 //    return 0;
74 //}
 
上面注释掉的main函数可以作为测试用的,好了,我们把上面的代码保存为display.c
 
编译成一个共享库,需要X11和Xtst库。
 
gcc -fPIC -shared -o libdisplay.so display.c -lX11 -lXtst
编译后会生成libdisplay.so 。现在我们ctypes模块使用这个动态共享库。
 
     2.ctypes简单介绍和使用
 
    我们知道python中的类型与c中类型是不一样的,应该说没有一样的,就拿int想来说,
 
python也是把它看作PyObject类型来处理的。那么我们需要使用ctype提供的接口做类型的
 
 
 
此链接有张图详细的展现类型转换对应的接口。下面演示具体的操作吧。
 
我们通过CDLL()接口载入库:
 
 lc=CDLL("./libdisplay.so")
然后就可以使用库中提供的接口了,但是上面dspopen()接口的返回值是Display类型的指针,
 
所以我们需要用c_void_p()转换一下:
 
d=c_void_p(lc.dspopen())
之后就可以用d做处理了,代码如下:
 
 
from ctypes import *
import time
class MOUSE:
    LEFT=1
    MiDDLE=2
    RIGHT=3
lc=CDLL("./libdisplay.so")
d=c_void_p(lc.dspopen())
time.sleep(5);
lc.buttonpress(d,c_int(MOUSE.RIGHT))
lc.buttonrelease(d,c_int(MOUSE.RIGHT))
lc.dspclose(d)
 
上面的代码会在5秒后在鼠标指针处打开右键菜单。
 
    利用ctypes使用c编写的库就讲这么多吧。以后会把c代码的部分写成python的c扩展再分享吧。
 
利用上面的模拟键盘和鼠标的接口可以做一些有意思的事情....

评论关闭