Linux屏幕取词翻译 – 思路及实现

二：屏幕字符提取

关于屏幕字符提取，想到几种方法，

一是截图识别，不过准确率不够，实施起来也不算简单；

二是看能否从帧缓冲设备着手直接提取选中的字符，不过，太过底层，涉及的东西又多还都是知识盲区暂时不考虑；

三是用简单粗暴的办法，模拟按键发送Ctrl-C或者Ctrl-Shift-C来完成文本的复制。这个时候需要解决的问题有：

1. 如何获取剪贴板内容
2. 如何获取当前窗口的应用名称
3. 如何模拟按键发送复制操作

因为电脑是Arch+Gnome，底层提供窗口等的服务用的是Xlib，可以从这里入手，另外模拟键盘操作也可以向键盘设备文件写入一定格式的一定数据来完成。

获取窗口应用名称可以打开一个管道执行现有命令，并读取其输出即可。至于为何要获取应用名，是因为对于终端来说，复制操作是ctrl-shift-c而不是ctrl-c，既要区别对待，必然需要先识别出当前窗口属于哪个应用。