Episode ID: 16028621605914040000.622-779.View cart section and go back
Step ID: 0
Goal: View cart section and go back

Previous Actions:


Current Screen:
UI Annotations Text: ['' '' 'newegg.com' '' '' '' 'ewegg' 'Q' 'Keywords,' 'Model' '#,' 'Item #'
 '' 'Hello Select address' 'Newegg Creat' "Today's Best" 'Deals'
 'Best Sellers' 'Newwegg LIVE' 'GAMETOBR' 'TAKE THE FINAL ROUND'
 'UP TO 65% OFE' 'Categorles' 'Gnors' 'Wisa' '' '' '' "TODAY'S BEST DEALS"
 'Ending in:' '03:' '09:' '13' 'Save 1755' 'Limttod Time Otfer' 'Ag Th'
 '$519' 'Team Group T-FORCE VUL.' '' 'Save 258%S3off w/ Code'
 'GIGAEYTE Gefarce GT' '710' '$9.99' '2G8' 'DDR3' 'PCI' 'Express 2.0...'
 '$29 9' 'L' 'S4247' 'SAMSUNG 256GE BAR' 's255' 'Sove 595' 'Ss0 O'
 'w Code' 'Se 21%' 'Froc GIrt' '' '' '' '' '' '' '' '' '' '']
UI Annotations Types: ['ICON_HOME' 'ICON_THREE_DOTS' 'TEXT' 'ICON_SHOPPING_CART' 'ICON_PERSON'
 'ICON_THREE_BARS' 'TEXT' 'ICON_MAGNIFYING_GLASS' 'TEXT' 'TEXT' 'TEXT'
 'TEXT' 'ICON_LOCATION' 'TEXT' 'TEXT' 'TEXT' 'TEXT' 'TEXT' 'TEXT' 'TEXT'
 'TEXT' 'TEXT' 'TEXT' 'TEXT' 'TEXT' 'ICON_STOP' 'ICON_HEART'
 'ICON_V_FORWARD' 'TEXT' 'TEXT' 'TEXT' 'TEXT' 'TEXT' 'TEXT' 'TEXT' 'TEXT'
 'TEXT' 'TEXT' 'ICON_NOTIFICATIONS' 'TEXT' 'TEXT' 'TEXT' 'TEXT' 'TEXT'
 'TEXT' 'TEXT' 'TEXT' 'TEXT' 'ICON_CHAT' 'TEXT' 'TEXT' 'TEXT' 'TEXT'
 'TEXT' 'TEXT' 'TEXT' 'TEXT' '' '' '' '' '' '' '' '' '' '']
Positions: [0.04       0.03703704 0.03166667 0.03333334 0.04166667 0.9222222
 0.03       0.01851852 0.05166667 0.2074074  0.015      0.21851853
 0.09166667 0.77407408 0.03333334 0.04444445 0.09166667 0.91111112
 0.03333334 0.03333334 0.095      0.04814815 0.03       0.03703704
 0.10333333 0.16666667 0.02       0.11851852 0.14666666 0.05925926
 0.02166667 0.02592593 0.15166667 0.11111111 0.01666667 0.14444445
 0.15333334 0.27037036 0.01166667 0.07777778 0.15333334 0.37037036
 0.01333333 0.02222222 0.15333334 0.4074074  0.01333333 0.08888889
 0.19166666 0.02592593 0.02333333 0.02222222 0.19666667 0.02962963
 0.01666667 0.35555556 0.23833333 0.77407408 0.01666667 0.22222222
 0.24166666 0.01851852 0.01333333 0.18888889 0.24166666 0.22222222
 0.01       0.07777778 0.24166666 0.34444445 0.01       0.17037037
 0.24166666 0.55925924 0.01333333 0.18888889 0.27000001 0.15925926
 0.03666667 0.74444443 0.31833333 0.41111112 0.01166667 0.51111114
 0.33833334 0.57037038 0.01666667 0.35185185 0.45666668 0.75185186
 0.015      0.14074074 0.45833334 0.13333334 0.00833333 0.09259259
 0.45833334 0.44074073 0.01       0.06296296 0.47       0.16296296
 0.035      0.03703704 0.47499999 0.48148149 0.02666667 0.03703704
 0.5316667  0.94074076 0.03       0.02592593 0.54166669 0.03333334
 0.01666667 0.42962962 0.56999999 0.03333334 0.015      0.13333334
 0.57166666 0.19629629 0.01166667 0.04814815 0.57333332 0.25925925
 0.01       0.04814815 0.57333332 0.32222223 0.01       0.02222222
 0.60166669 0.51111114 0.015      0.12592593 0.60333335 0.02962963
 0.01166667 0.24444444 0.66500002 0.09259259 0.01166667 0.1
 0.69833332 0.53333336 0.01333333 0.0962963  0.72166669 0.52962965
 0.01333333 0.38518518 0.72500002 0.95555556 0.025      0.02592593
 0.75333333 0.50740743 0.01833333 0.35185185 0.82833332 0.05185185
 0.01       0.31481481 0.82833332 0.3888889  0.01       0.04814815
 0.83333331 0.52962965 0.01166667 0.09259259 0.84833336 0.05185185
 0.01       0.05555556 0.84833336 0.12222222 0.01       0.07777778
 0.84833336 0.21481481 0.01       0.04074074 0.84833336 0.27037036
 0.01333333 0.18518518 0.85333335 0.53333336 0.01166667 0.0962963
 0.85666668 0.89629632 0.02833333 0.03333334 0.87       0.05185185
 0.015      0.0962963  0.87333333 0.53333336 0.01333333 0.32222223
 0.875      0.17037037 0.01       0.08888889 0.90499997 0.50370371
 0.01666667 0.12222222 0.90499997 0.65185183 0.01666667 0.07777778
 0.90499997 0.75185186 0.01666667 0.10740741 0.9066667  0.03333334
 0.01333333 0.12592593 0.91166669 0.19629629 0.00833333 0.10740741
 0.         0.         0.         0.         0.         0.
 0.         0.         0.         0.         0.         0.
 0.         0.         0.         0.         0.         0.
 0.         0.         0.         0.         0.         0.
 0.         0.         0.         0.         0.         0.
 0.         0.         0.         0.         0.         0.
 0.         0.         0.         0.        ]


What should the Android do next?

Action: {"action_type": 4, "action_description": "Describe what the action means if needed", "coordinates_touch": [0.10934767872095108, 0.800663948059082], "coordinates_lift": [0.10934767872095108, 0.800663948059082], "text_input": [""]}