文本输入相关问题咨询

[zzhaofengg]

在体验的时候遇到了一个问题～我想请问下大佬

v2版本在输入文本的时候给出的策略是唤醒输入法框再进行文本输入，但实际执行的只能执行单步点击操作，而不是直接用adb输入指定的文字。这种情况需要我调整prompt和知识来解决吗，还是说目前v2版本不支持这类的文本输入能力

下面是执行日志

################################################## Reflcetion ##################################################

Thought

The operation action involved tapping on the input box located at coordinates (440, 2648). After analyzing both screenshots, the screen reflects the expected change. The text "人工" appears following this action, and the interface shows content relevant to entering a message for the Taobao customer service.

This indicates the input box was successfully tapped, enabling text input, which confirms that the "operation action" met the "operation thought."

Answer

A: The result of the "Operation action" meets my expectation of "Operation thought". ################################################################################################################ ################################################## Planning ##################################################

Completed contents

Opened the Taobao app, accessed the official customer service page, and tapped on the input box. ############################################################################################################## ################################################## Decision ##################################################

Thought

In order to input text into the text box, I need to activate the keyboard first. To accomplish this, I should again tap on the input box at the bottom of the screen.

Action

Tap (440, 2648)

Operation

I will tap on the input box again to activate the keyboard. ############################################################################################################## ################################################## Memory ##################################################

Important content

人工 ############################################################################################################

[junyangwang0410]

您好。由于需要兼容输入中文的需求，我们是基于ADB键盘来进行键盘检测的。也就是说，如果您想输入文字，需要先安装ADB键盘，然后将该键盘设置为默认输入法。当Agent点击输入框之后，屏幕底部会显示ADB键盘启动的提示，此时Agent便可以输入文字