1

我正在为 Metro 应用程序开发 UI 自动化客户端(C++)。我能够在地铁 UI 上获取元素。我正在使用 Raw Tree Walker

  1. 获取自动化树

    automation->get_RawViewWalker(&pTreeWalker);
    
  2. 然后我正在迭代并在 Metro 应用程序上获取元素

  3. 检索 UI 元素的属性

    我在列表项旁边有图像和文本项。单击该启动网页。

    列表项、图像和文本项没有调用功能。所以我正在尝试获取可点击点,以便我可以单击该点。我也在使用 Inspect.exe 来查看 UI 元素。

    inspect.exe 确实显示列表项、图像和文本项的可点击点。但是当我

    有问题地尝试使用 GetClickablePoint() 我得到 gotClickable = 0 并且 POINT 字段保持 0.hr = S=OK

    POINT clickable;   
    BOOL gotClickable;     
    hr = p1->GetClickablePoint(&clickable,&gotClickable);
    

我想在调用 mouse_event 时使用可点击点

   VOID WINAPI mouse_event(__in  DWORD dwFlags, __in  DWORD dx, __in  DWORD dy, __in  DWORD dwData,
   __in  ULONG_PTR dwExtraInfo  );
4

1 回答 1

3

检查项目的 hwnd 是否为零。这对我来说经常出现。

您仍然可以通过将光标移动到元素的中间并发送鼠标单击事件来单击。

您可以根据边界矩形计算位置。根据您的情况,您可能需要将客户端转换为屏幕坐标。

边界矩形部分类似于:

x = left + (right - left) / 2
y = top + (bottom - top) / 2 

要转换为屏幕坐标,您必须使用具有 hwnd 的元素并应用必要的偏移量。

编辑

要将光标放在矩形上,我使用 PInvoke:

这是我使用的东西(C#):

    public static void Click()
    {
        User32.mouse_event(WindowsConstants.MouseEventLeftDown, 0, 0, 0, IntPtr.Zero);
        User32.mouse_event(WindowsConstants.MouseEventLeftUp, 0, 0, 0, IntPtr.Zero);
    }

    public static void RightClick()
    {
        User32.mouse_event(WindowsConstants.MouseEventRightDown, 0, 0, 0, IntPtr.Zero);
        User32.mouse_event(WindowsConstants.MouseEventRightUp, 0, 0, 0, IntPtr.Zero);

    }

    public static void DoubleClick()
    {
        User32.mouse_event(WindowsConstants.MouseEventLeftDown, 0, 0, 0, IntPtr.Zero);
        User32.mouse_event(WindowsConstants.MouseEventLeftUp, 0, 0, 0, IntPtr.Zero);
        Thread.Sleep(150);
        User32.mouse_event(WindowsConstants.MouseEventLeftDown, 0, 0, 0, IntPtr.Zero);
        User32.mouse_event(WindowsConstants.MouseEventLeftUp, 0, 0, 0, IntPtr.Zero);
    }

    public const UInt32 MouseEventLeftDown = 0x0002;
    public const UInt32 MouseEventLeftUp = 0x0004;
    public const UInt32 MouseEventRightDown = 0x0008;
    public const UInt32 MouseEventRightUp = 0x00010;


    [DllImport("user32.dll")]
    public static extern void mouse_event(UInt32 dwFlags, UInt32 dx, UInt32 dy, UInt32 dwData, IntPtr dwExtraInfo);
于 2012-08-13T16:16:27.733 回答