Linux,如何捕捉屏幕,并模拟鼠标移动

我需要以某种方式捕获屏幕(如打印屏幕),以便访问像素颜色数据,进行一些图像识别,然后我需要在屏幕上生成鼠标事件,例如左键单击,拖放(移动鼠标同时按下按钮,然后释放它)。 一旦完成,图像将被删除。

注意:我需要捕获整个屏幕,用户可以看到的所有内容,而且我需要模拟程序窗口外的点击(如果它有任何区别)

规格:Linux ubuntu语言:C ++

性能不是很重要,“打印屏幕”功能每10秒钟执行一次。 该过程的持续时间可以长达24小时,所以方法需要稳定并且内存泄漏免费(如usuall :)

我能够在Windows下与胜利GDI和一些Windows事件,但我不知道如何在Linux中做到这一点。

非常感谢


//sg

//Solution using Xlib for those who use Linux
#include <X11/Xlib.h>
#include<stdio.h>
#include<unistd.h>
#include <stdlib.h>
#include <string.h>

#include <unistd.h>

#include <X11/Xlib.h>
#include <X11/Xutil.h>

void mouseClick(int button)
{
    Display *display = XOpenDisplay(NULL);

    XEvent event;

    if(display == NULL)
    {
        fprintf(stderr, "Cannot initialize the displayn");
        exit(EXIT_FAILURE);
    }

    memset(&event, 0x00, sizeof(event));

    event.type = ButtonPress;
    event.xbutton.button = button;
    event.xbutton.same_screen = True;

    XQueryPointer(display, RootWindow(display, DefaultScreen(display)), &event.xbutton.root, &event.xbutton.window, &event.xbutton.x_root, &event.xbutton.y_root, &event.xbutton.x, &event.xbutton.y, &event.xbutton.state);

    event.xbutton.subwindow = event.xbutton.window;

    while(event.xbutton.subwindow)
    {
        event.xbutton.window = event.xbutton.subwindow;

        XQueryPointer(display, event.xbutton.window, &event.xbutton.root, &event.xbutton.subwindow, &event.xbutton.x_root, &event.xbutton.y_root, &event.xbutton.x, &event.xbutton.y, &event.xbutton.state);
    }

    if(XSendEvent(display, PointerWindow, True, 0xfff, &event) == 0) fprintf(stderr, "Errorn");

    XFlush(display);

    usleep(100000);

    event.type = ButtonRelease;
    event.xbutton.state = 0x100;

    if(XSendEvent(display, PointerWindow, True, 0xfff, &event) == 0) fprintf(stderr, "Errorn");

    XFlush(display);

    XCloseDisplay(display);
}
int main(int argc,char * argv[]) {

    int x , y;
    x=atoi(argv[1]);
    y=atoi(argv[2]);
    Display *display = XOpenDisplay(0);

    Window root = DefaultRootWindow(display);
    XWarpPointer(display, None, root, 0, 0, 0, 0, x, y);
    mouseClick(Button1);
    XFlush(display);
    XCloseDisplay(display);
    return 0;
}

建立它,然后在x,y上模拟点击:

$ ./a.out x y

$ g ++ -lX11 sgmousesim2.cpp

$ ./a.out 123 13

以防万一你仍然感兴趣。


Swinput是模拟鼠标/键盘事件的解决方案。 你需要为你的内核编译它。 Xorg提供了一些用于记录鼠标/键盘事件的标题,但我认为目前它已被打破。 有一个C代码evtest,可用于捕获/dev/input/eventX/dev/input/mice文件中的事件。 这可能会有所帮助。

编辑:

这个错误在Xorg记录扩展中得到解决,所以它也可以工作。

链接地址: http://www.djcxy.com/p/14227.html

上一篇: Linux, how to capture screen, and simulate mouse movements

下一篇: Multiple webcam capture in one avi with c# (windows forms)