Problème d'automatisation de la souris et d'interaction avec les applications Flash

Question

J'ai écrit un outil C# qui simule un utilisateur interagissant avec un environnement Windows 7. Cela fonctionne sauf lorsque vous interagissez avec un couple d'applications flash en ligne. Les mouvements de la souris et les clics sont générés, mais les applications Flash ne les reçoivent pas. Je pense que j'ai besoin de générer des événements de souris de niveau inférieur, mais je ne peux pas le confirmer.

J'ai essayé plusieurs mécanismes différents:

[DllImport("user32.dll")] 
static extern void mouse_event(int dwFlags, int dx, int dy, int dwData, int dwExtraInfo); 

[DllImport("user32.dll", SetLastError = true)] 
private static extern uint SendInput(uint nInputs, INPUT[] pInputs, int cbSize); 

Quelqu'un at-il rencontré ce problème? Des idées comment je peux générer des événements de souris qui s'inscriraient avec une application Flash?

Mise à jour: Il semble que les applications flash reçoivent un clic de souris. Leurs animations de clic sont présentées lorsqu'un clic de souris est envoyé par l'application C#. Pourtant, il ne se passe rien, même si l'animation du clic de souris de l'application Flash s'affiche.

Answer 1

Avez-vous étudié le test FlexMonkey for Flex/AIR UI? Nous avons eu du succès avec ça. http://www.gorillalogic.com/flexmonkey

Answer 2

Différentes applications flash répondent aux différents mouse_events. Avez-vous essayé d'envoyer mousedown, mouseup, etc? En outre, vous devrez parfois utiliser mousemove en premier. J'ai vu quelques applications flash où certains boutons fonctionnent par mousedown et d'autres par mouseup. Envisagez également de désactiver le clavier et la souris juste avant d'envoyer les événements et de les réactiver après.

Answer 3

Essayez également de masquer le pointeur de la souris et de surveiller les cordons du pointeur de la souris (x & Y) dans une zone de texte en essayant Event.ENTER_FRAME simple. Je pense que le problème est avec le navigateur, pas l'application flash réelle. Le navigateur que vous utilisez pour l'affichage flash, je pense qu'il doit avoir des propriétés qui permettent de capturer les données de la souris par Flash.

Answer 4

J'ai rencontré exactement le même problème. la solution que j'ai trouvé était de ne pas utiliser le mode absolu lors de l'appel SendInput, et à la place, n'utiliser que relatif. Cela met plus de travail dans votre code (vous avez besoin d'écrire du code d'interpolation), mais fait en sorte que le code de détection de passage de la frontière en flash soit renvoyé.

En outre, si vous déplacez le pointeur sur le même fil que l'application flash (par exemple dans un contrôle du navigateur), assurez-vous de Application.DoEen