wpf C# 操作DirectUI窗口 SendMessage+MSAA

简介: 原文:wpf C# 操作DirectUI窗口 SendMessage+MSAA 最近做一个抓取qq用户资料的工具,需要获取qq窗口上的消息,以前这种任务是用句柄获取窗口中的信息,现在qq的窗口用的是DirectUI,只有窗口句柄,没有控件句柄,句柄这条路走不通了。
原文: wpf C# 操作DirectUI窗口 SendMessage+MSAA

最近做一个抓取qq用户资料的工具,需要获取qq窗口上的消息,以前这种任务是用句柄获取窗口中的信息,现在qq的窗口用的是DirectUI,只有窗口句柄,没有控件句柄,句柄这条路走不通了。不过较新版的qq的部分控件实现了微软的IAccessible接口(称为Microsoft Active Accessibility技术,简称MSAA),可以用另一套函数获取qq窗口的信息。不过要对窗口进行输入还是要靠句柄,上面说过,DirectUI的窗口只有一个句柄,因此模拟输入的时候不需要查找到具体的控件句柄,但要注意获取控件焦点,可能相对传统WinForm的窗口要简单点。

            

先介绍下和句柄操作相关的函数:

using System.Runtime.InteropServices;

        [DllImport("user32.dll", SetLastError =true)]

        static extern IntPtr FindWindow(string lpClassName,string lpWindowName);

根据类名和窗口标题查找句柄

 

        [DllImport("user32.dll", SetLastError =true)]

        public static extern IntPtr FindWindowEx(IntPtr parentHandle,IntPtr childAfter, string className, string windowTitle);

根据父句柄,前一个句柄,类名和窗口标题查找句柄,这几个信息可以通过VS自带的spy++查询。

 

        [DllImport("user32.dll", EntryPoint ="GetDesktopWindow", CharSet = CharSet.Auto, SetLastError = true)]

        static extern IntPtr GetDesktopWindow();

返回桌面窗口句柄,被我用来当前一个函数的父句柄。

 

        [DllImport("user32.dll")]

        public extern static int GetWindowText(IntPtr hWnd,StringBuilder lpString, int nMaxCount);

获取指定窗口的标题,WinForm里的控件都是window,但在我们讨论的情况下window就只是窗口了。需要结合StringBuider类使用,不熟悉的可以去预习下。

        [DllImport("User32.dll")]

        public static extern int GetClassName(int hWnd,StringBuilder lpClassName, int nMaxCount);

获取指定窗口的类名,也是用到StringBuider类。

        [DllImport("USER32.DLL")]

        public static extern bool SetForegroundWindow(IntPtr hWnd);

将一个窗口显示到最前端。

 

        [DllImport("user32.dll", CharSet =CharSet.Auto, ExactSpelling = true)]

        public static extern IntPtr GetForegroundWindow();

返回最前端窗口的句柄。

 

        [DllImport("user32.dll", EntryPoint ="SendMessage")]

        static extern int SendMessage(IntPtr hWnd,uint Msg, int wParam, int lParam);

模拟键盘或鼠标的输入,最常用的就是它了,后面具体介绍。

 

        [DllImport("user32.dll", EntryPoint ="PostMessage")]

        public static extern IntPtr PostMessage(IntPtr hwnd,uint msg,int wparam, int lparam);

作用和上一个类似,不过SendMessage是等窗口处理完事件后返回,这个是发送消息后立即返回。顺便一提,原型本来是LRESULT SendMessage( HWND hWnd, UINT Msg, WPARAM wParam, LPARAM lParam);类型改了一下,并不影响功能,只是方便写,其它函数也类似。

 

        [DllImport("user32.dll")]

        [return: MarshalAs(UnmanagedType.Bool)]

        static extern bool GetWindowRect(IntPtr hWnd,ref RECT lpRect);

返回一个表示指定窗口位置大小的结构,结构声明如下:

        [StructLayout(LayoutKind.Sequential)]

        public struct RECT

        {

            public int Left;//最左坐标

            public int Top;//最上坐标

            public int Right;//最右坐标

            public int Bottom;//最下坐标

        }

这里要说一下DirectUI的窗口一般都是用微软的api建立一个窗口,然后隐藏窗口,自己画一个窗口出来,所以窗口的实际大小要比看到的要大,拖动窗口时看到的那个虚线框才是真实的大小。

 

接下来是MSAA的相关函数:需要引用Accessibility,并using Accessibility;

        [DllImport("Oleacc.dll")]

        public static extern int AccessibleObjectFromWindow(

        IntPtr hwnd,

        int dwObjectID,

        ref Guid refID,

        ref IAccessible ppvObject);

通过句柄获取窗口对于的IAccessible对象,知道我为什么要先介绍句柄相关的函数了吧。用的时候需要包装一下:

        private void GetAccessibleWindow(System.IntPtr imWindowHwnd,out IAccessible IACurrent)

        {

            Guid guidCOM = new Guid(0x618736E0, 0x3C3D, 0x11CF, 0x81, 0xC, 0x0, 0xAA, 0x0, 0x38, 0x9B, 0x71);

            AccessibleObjectFromWindow(imWindowHwnd, -4, ref guidCOM, ref IACurrent);     

        }

 

        [DllImport("Oleacc.dll")]

        public static extern int AccessibleChildren(

        Accessibility.IAccessible paccContainer,

        int iChildStart,

        int cChildren,

        [Out] object[] rgvarChildren,

        out int pcObtained);

获取IAccessible对象的子对象数组,一般包装成下面的形式:

        private IAccessible[] GetAccessibleChildren(IAccessible paccContainer)

        {

            IAccessible[] rgvarChildren =new IAccessible[paccContainer.accChildCount];

            int pcObtained;

            AccessibleChildren(paccContainer, 0, paccContainer.accChildCount, rgvarChildren,out pcObtained);

            return rgvarChildren;

        }

        

        public IAccessible GetAccessibleChild(IAccessible paccContainer,int[] array)

        {

            if (!array.Length.Equals(0))

            {

                IAccessible[] children=GetAccessibleChildren(paccContainer);

                IAccessible result = children[array[0]];

                if (result.accChildCount == 0)

                {

                    lb.Text += "error: parent:" + ((IAccessible)result.accParent).accChildCount +" role:" + result.accRole + " state:" + result.accState;

                    return null;

                }

                int[] array_1 = new int[array.Length - 1];

                for (int i = 0; i < array.Length - 1; i++)

                {

                    array_1[i] = array[i + 1];

                }

                return GetAccessibleChild(result, array_1);

            }

            else

            {

                return paccContainer;

            }

        }

按层级找到某个对象,array代表需要查找的层级,就是调用了前面的函数。

 

介绍几个IAccessible类的属性和函数:

accessible.accChildCount     子控件数

accessible.accValue; accessible.accName    控件数值和名字这两个属性vs提示是有的,不过不知为何运行时会报错,要换成下面两个函数才行,还有其它几个属性应该也是这样。

result.get_accValue(0);result.get_accName(0)    VS对参数的提示是[object VarChild =Type.Missing],然而填Type.Missing报错,这参数好像表示子空间的序号,0表示查询本控件,嗯,填0就好。

Inspect.exe和AccExplorer32.exe都可以查询窗口的IAccessible层级结构和IAccessible控件的具体信息,第一个功能比较多,后一个有汉化版,大家自己取舍。


再介绍详细介绍一下SendMessage的用法。static extern int SendMessage(IntPtr hWnd,uint Msg, int wParam, int lParam);

Msg 代表操作类型,很好查的,常用的有:

        //按下按钮

        const int WM_KEYDOWN = 0x100;

        //放开按钮

        const int WM_KEYUP = 0x101;

        //发送字符

        const int WM_CHAR = 0x102;

        //应用程序发送此消息来设置一个窗口的文本   

        const int WM_SETTEXT = 0x0C;

        //当一个窗口或应用程序要关闭时发送一个信号   

        const int WM_CLOSE = 0x10;

        //当用户选择结束对话框或程序自己调用ExitWindows函数   

        const int WM_QUERYENDSESSION = 0x11;

        //用来结束程序运行,会关闭窗口所属的整个程序

        const int WM_QUIT = 0x12;

        //按下鼠标左键   

        const int WM_LBUTTONDOWN = 0x201;

        //释放鼠标左键   

        const int WM_LBUTTONUP = 0x202;

        //双击鼠标左键   

        const int WM_LBUTTONDBLCLK = 0x203;

        //使用鼠标滚轮

        const int WM_MOUSEWHEEL = 0x020A;

wParam和lParam是32位数。

按钮事件,wParam代表键值,具体可以查;lParam代表点击的点击次数、组合键等信息,msdn上有张表介绍各个位的作用,不过我没用过。

发送字符,每次发送一个char,wParam代表char的值转换成int类型就行,lParam为0。

对于鼠标点击事件,wParam代表组合键,没有的话为0;lParam代表点击的位置,低字为x坐标,高字为y坐标,即x+(y<<16),这个坐标是相对于屏幕而言的。

对于鼠标滚轮事件,wParam高字代表滚动距离,向上为正,向下为负,低字代表组合键,没有的话为0;lParam代表点击的位置,低字为x坐标,高字为y坐标,即x+(y<<16),这个坐标是相对于窗口而言的。

由于只有窗口句柄,使用滚轮事件,发送字符和按钮事件时,需要获取相应区域的焦点,我是用鼠标点击事件做的。

向DirectUI发送文本这件事困扰了我好久,试过SetText事件,没有作用,只能将文本拆成char数组发送字符。但发送中文就会乱码,SendMessage发送中文用的是GBK编码,String是Unicode编码,需要进行转换,相应的函数是有的,要先把String转换成Byte数组再转换成Char数组,解码器有好几种,试了好久发现下面这种组合是可以的。

using System.Text;

char[] charsC = UnicodeEncoding.Unicode.GetChars(UnicodeEncoding.GetEncoding("GBK").GetBytes(strText));

高兴了好久发现,这样字母和数字乱码了。所以把正常的Unicode字符放入另一个数组,两个混着用。

char[] chars = strText.ToCharArray();

英文字符是用八位表示的,中文字符用16位,c#里char是16位的,在charsC里,相邻2个英文字符被放到了一个char里。所以,两个数组的长度是不一样的。GBK编码的中文字符从0x8140到0xfea0,键盘上的英文字符最大为0x7e,用0x7e7e作为分界区分中文和英文字符。啊,这样中英文都能发了。

不过后来的测试中发现有些汉字这样发送也会乱码,于是我决定自己把Byte数组转换成Char数组,以0x7e为界,大于的就属于中文字符,和下一个字节一切放到一个Char里,否则就是英文字符,直接转换成Char类型。

最后我在测试的时候发现直接把Byte数组发过去就行了。。以下是最终的函数:

private void sendText(IntPtr hwnd,String strText)

{

    byte[] charCByte = UnicodeEncoding.GetEncoding("GBK").GetBytes(strText);

    for (int i = 0; i < charCByte.Length; i++)

    {

        SendMessage(hwnd, WM_CHAR, (int)charCByte[i], 0);

    }

}

本文由本人查询资料整理加工而得,既为方便自己查阅,也为方便他人搜索。水平有限,如有错漏,希望大神能指点,既是帮我,也是帮了其他看贴的同志。

目录
相关文章
|
1月前
|
数据处理 C# Windows
WPF中实现弹出进度条窗口
【11月更文挑战第14天】在WPF中实现弹出进度条窗口,需创建进度条窗口界面(XAML)和对应的代码-behind(C#)。通过定义`ProgressWindow`类,包含`ProgressBar`和`TextBlock`,并在主窗口或逻辑代码中调用,模拟长时间任务时更新进度条,确保UI流畅。
C# WPF 中 外部图标引入iconfont,无法正常显示问题 【小白记录】
本文介绍了在C# WPF应用程序中引入外部iconfont图标时可能遇到的显示问题及其解决方法:1) 检查资源路径和引入格式是否正确,确保字体文件引用格式为“#xxxx”,并正确指向字体文件位置;2) 确保图标资源被包含在程序集中,通过设置字体文件的生成操作为Resource(资源)来实现。
C# WPF 中 外部图标引入iconfont,无法正常显示问题 【小白记录】
|
3月前
|
编解码 C# 数据库
C# + WPF 音频播放器 界面优雅,体验良好
【9月更文挑战第18天】这是一个用 C# 和 WPF 实现的音频播放器示例,界面简洁美观,功能丰富。设计包括播放/暂停按钮、进度条、音量控制滑块、歌曲列表和专辑封面显示。功能实现涵盖音频播放、进度条控制、音量调节及歌曲列表管理。通过响应式设计、动画效果、快捷键支持和错误处理,提升用户体验。可根据需求扩展更多功能。
147 3
|
4月前
|
开发者 C# UED
WPF多窗口应用程序开发秘籍:掌握窗口创建、通信与管理技巧,轻松实现高效多窗口协作!
【8月更文挑战第31天】在WPF应用开发中,多窗口设计能显著提升用户体验与工作效率。本文详述了创建新窗口的多种方法,包括直接实例化`Window`类、利用`Application.Current.MainWindow`及自定义方法。针对窗口间通信,介绍了`Messenger`类、`DataContext`共享及`Application`类的应用。此外,还探讨了布局控件与窗口管理技术,如`StackPanel`与`DockPanel`的使用,并提供了示例代码展示如何结合`Messenger`类实现窗口间的消息传递。总结了多窗口应用的设计要点,为开发者提供了实用指南。
300 0
|
4月前
|
C#
C# WPF 将第三方DLL嵌入 exe
C# WPF 将第三方DLL嵌入 exe
100 0
|
4月前
|
前端开发 C# 容器
WPF/C#:实现导航功能
WPF/C#:实现导航功能
103 0
|
4月前
|
设计模式 测试技术 C#
WPF/C#:在WPF中如何实现依赖注入
WPF/C#:在WPF中如何实现依赖注入
90 0
|
4月前
|
前端开发 C# Windows
WPF/C#:如何实现拖拉元素
WPF/C#:如何实现拖拉元素
60 0
|
4月前
|
存储 C# 索引
WPF/C#:BusinessLayerValidation
WPF/C#:BusinessLayerValidation
37 0
|
4月前
|
C#
WPF/C#:数据绑定到方法
WPF/C#:数据绑定到方法
53 0