Автоматизация рутины с AutoHotKey. Часть 2: Распознавание экрана.⁠⁠

Кажется ничего сложного там нет. Принцип игры такой же как Clicker Heroes, как я понял. Если помощь нужна минут на 5, я помогу так. А написание полноценного автоматизированного скрипта займет хер знает сколько времени. Время уйдет на ознакомление с игрой, механикой, чтением тематических форумов на предмет оптимального маршрута фарминга и т.д.

За это я возьму деньги. Готовы платить?

Капча намекает, что добиваться девушки лучше цветами и шоколадками, а не лайками.

Для лайка всех постов скриншотишь сердечко, обрезаешь, сохраняешь.

Находишь координаты области, где обычно располагаются сердечки.

У мена получилось так:

F6::

Loop,

{

Loop, 3

{

ImageSearch, xp, yp, 573, 124, 640, 761, *50 heart.png

If xp > 0

Click %xp% %yp%

Sleep 200

}

Send {PgDn}

Sleep 1000

}

Return

F10::ExitApp

Скрипт пытается кликнуть до трех сердечек на экране, затем проматывает вниз, кликает еще и т.д.

Это для лайка постов.

затем

F1::

Loop,

{

Loop,200

{

Click 812, 158

Sleep 20

}

Loop, 5

{

Click 772, 521

Sleep 20

}

ImageSearch, xp, yp, 477, 627, 521, 672, *50 upgrade.png

If not xp>0

{

SendMode Event

MouseClickDrag, left, 772, 571, 772, 521, 5

SendMode Input

}

}

Return

F12::Reload

Сначала посылает двести кликов на монстра, затем 5 кликов на кнопку апгрейда героя.

После проверяет, видна ли иконка улучшения оружия внизу. Если нет, значит открылся новый герой, тянем полосу героев вверх командой MouseClickDrag.

Естественно, координаты нужно будет подправить.

Выход из цикла F12.

1. https://autohotkey.com/docs/commands/FileAppend.htm

позволяет делать записи во внешний файл. Если указанного файла нет, создает файл с заданным именем в рабочей папке скрипта.

F1::FileAppend 123456, file.txt

Этот скрипт создал у меня на рабочем столе file.txt с текстом 123456 внутри.

2. Я бы хранил координаты в двух переменных. Если есть способ хранить их в одной, прошу поделиться.

3. Считывание данных из файла с помощью

https://autohotkey.com/docs/commands/FileRead.htm

Да вроде ничего сложного. Сейчас посмотрим насколько сложный интерфейс у игры.

SetControlDelay, -1

ControlClick, x800 y400, Clicker Heroes

посылает клик в координаты 800-400 в окно с заголовком Clicker Heroes.

Окно может быть неактивно, но должно быть развернуто, по-моему.

SetControlDelay нужен чтоб команда не глючила.

https://autohotkey.com/docs/commands/ControlClick.htm

ControlSend ,,{Home}, Clicker Heroes

посылает клавишу Home в окно Clicker Heroes даже если оно свернуто или неактивно.

https://autohotkey.com/docs/commands/ControlSend.htm

Там нужно просто дойти до уровня 3199. Если поднимешься выше, то система определит тебя в совсем другую группу, там ад. Там все читеры, победить там нереально. В результате никто не хочет пересекать эту черту, делят первые места с уровнем 3199.

Я уже понял всю механику игры. Качаешь ауру согласно этому оптимальному правилу

https://www.reddit.com/r/TapTitans/comments/4725s4/ua_leveli...

Качаешь артефакты на урон согласно калькулятору yatto.me

Благодаря боту я могу делать престиж 5-6 раз в день. Оптимизировал до предела. Прокачку артефактов тоже оптимизировал. Мне скучно.

Я лишь делюсь своим опытом. Я не ставлю задачу "отыскать наиболее простой для новичка путь и объяснить его".

Плюс эта его простота потом обернется боком. Насколько я понял, функциональность там меньше, и если юзер захочет расти вверх, захочет больше функционала, то ему все равно придется перейти на более серьезные вещи.

Лайкать фотки можно руками. Стрелка вправо, клик мышкой. Очень быстро.

F1::

DllCall("SystemParametersInfo", UInt, 0x71, UInt, 0, UInt, 3, UInt, 0)

KeyWait F1 ; This prevents keyboard auto-repeat from doing the DllCall repeatedly.

return

F1 up::DllCall("SystemParametersInfo", UInt, 0x71, UInt, 0, UInt, 10, UInt, 0)

Взято отсюда

https://autohotkey.com/board/topic/5296-set-the-mouse-speeds...

При нажатии F1 замедляет мышь, при отжатии возвращает в исходное состояние.

Соответственно, для клика колеса заменить F1 на MButton, правая кнопка мыши RButton.

Скрипт по умолчанию отсчитывает координаты не от границ рабочего стола, а от границ активного окна. Так что ничего не изменится.

Можно изменить так, чтобы отсчитывал от рабочего стола. Тогда перемещение окна будет влиять.

Я знаю кто сможет вам помочь.

Спасибо!

В статье приведены подробные шаги. Увы, я не могу дать вам готовое решение - не будет работать. Вы должны проделать все своими руками, так как работоспособность скрипта нужно проверять на каждом шагу. Сначала создать хоткей и научить его выводить сообщение на экран

F1:: MsgBox, 1

Потом научить его распознавать образец изображения

F1::

ImageSearch, xp, yp, 75, 61, 97, 83, *50 smert.png

If xp > 0

MsgBox, 1

Return

Потом вместо msgbox сделать

Sleep 500

Send X

Что конкретно в сумме больше 45? Что на экране происходит?

1. Тестировали в других приложениях? В том же сапере, например?

2. Выньте из своего кода проблемный участок и потестите его отдельно. Допустим,

F8::

ImageSearch FoundX, FoundY, 470, 913, 505, 1012, *20 1stskill.bmp

if errorLevel = 0

tooltip, ok!

Return

Так вы поймете где проблема, из-за того что imagesearch не находит картинку или в другой части кода.

Return зря убрал. Это оператор, завершающий горячую клавишу.

F1::

;какой-то код

Return

F2::

;еще код

Return

F12::Suspend, Toggle нужно для временного отключения горячих клавиш, мало ли. Зря убрал.

Else
MsgBox, WellDone...
Return
F12::Suspend, Toggle

Если после горячей клавиши идет всего одна строка кода, то Return не нужен.

Сам на каком максимальном уровне находишься?

Это пример. Чтобы пользователи научились идее поиска скриншота. Цель не выполнить задачу максимально простым путем, цель наглядно показать, как пользоваться инструментом.

F1::Send {Volume_Down}

F2::Send {Volume_Up}

F4::Send {Browser_Home}

При нажатии соответствующих клавиш регулируется звук и запускается браузер.

Полный список мультимедийных клавиш тут

https://autohotkey.com/docs/KeyList.htm

в разделе мультимедиа.

Клавишей вызова можно назначить любую другую клавишу, например {Tab}, {Backspace}, либо буквенные клавиши, но к ним лучше обращаться по их виртуальному коду, читайте первую часть этой статьи.

Также можно использовать сочетания клавиш.

Я использую

^!Right::Send {Volume_Up}

^!Left::Send {Volume_Down}

это Ctrl Alt стрелка влево и вправо.

Если я буду разрабатывать какие-нибудь требовательные к ресурсам приложения и мне понадобятся более быстрые решения, я обращусь к детектору Виолы-Джонса, спасибо.

Захожу на пикабу гораздо реже уже. Спрашивайте.

По данной теме не планируется. По другим темам - да. Но нескоро.

Можно. Следуйте инструкциям из поста.

@k800ym61, ответ вам ^

Ну, не сказать бы что совсем мертвая. Мне как автору поста приходят все комментарии к нему.

Попробуй самостоятельно написать хоть пару строчек кода, с результатом попробуем помочь.

Такой уж я, люблю людей.

Надо себе будильник поставить на год вперед чтобы крикнуть JKL88 "Сегодня!"

Даже не знаю. Все что хотел сказать - сказал. Рассказал про некоторый инструмент, добавил картинки и пояснения как его использовать. Вроде все понятно, зачем делать пост-дубликат.

Скрипт может нажимать только простейшие кнопки (вперед, влево, вверх, вниз), тыкать экран. И то для того, чтобы тыкать кнопки на экране (распознавать когда они появляются), он должен их видеть, т.е. у вас должно быть как минимум два монитора.

Команда Break - выход из цикла. Соответственно вместо него надо поставить желаемую команду, тогда цикл будет бесконечным, пока скрипт не обновят или не прервут кнопкой F10. Будет

{

ImageSearch, xp, yp, 321, 869, 377, 928, *50 123.png

If xp > 0

SoundPlay, *16

Sleep 3000

}

Не занимаюсь таким

Не понял вопроса

Если время не критично, например скрипт работает, а вы ушли, то можно напихать слипов побольше, чтобы перестраховаться.

А если критично, то можно поставить условие "нажми кнопку - подожди пока прогрузится страница - работай дальше".

Как скрипт будет понимать когда страница прогрузилась - либо через тот же ImageSearch, либо через WinWaitActive.

Когда браузер перейдет на другую страницу, у него наверняка поменяется заголовок. Вот скриптик для считывания заголовков:

^F2::

WinGetActiveTitle, Title

MsgBox, %Title%

Clipboard = %Title%

Return

потом делаете так

MouseClick, left, x, y

WinWaitActive, Сайт Вани Пупкина

Send ^{Tab}

Только убедитесь, что искомый сайт появится, иначе скрипт будет ждать его вечно. Или задайте время в течение которого скрипт будет ждать его.

Блок команд для каждой страницы нужно убирать в конструкции

If <условие>

{

<команды>

}

Иначе получается что скрипт заходит на первую страницу, выполняет команды, предназначенные для первой страницы И второй И третьей, затем начинает снова.

ImageSearch, x, y, 1732, 519, 1769, 606,*50 lupa.png

If x>0    ;если скрипт не нашел лупу, то иксу  присвоится пустое значение, условие не выполнится

              ;и блок команд не будет выполняться. То, что нужно

{

Sleep, 300

Send, {Control down}

MouseClick, left, x, y

Send, {Control up}

Sleep, 800

Send ^{Tab}

Sleep, 300

Send {End}

Sleep 800

}

--------------------------------------------

Далее. Проверял второй и третий imagesearch по отдельности?

F6::

ImageSearch,finddx, finddy, 697, 984, 1206, 1018,*150 sohranit.png

if finddx>0

MsgBox, OK

Return

при нажатии F6 выдает ОК?

ImageSearch, x, y, 100, 100, 200, 200, *20 zaryad1.png

If x>0

Click 300, 300

ImageSearch, x, y, 100, 100, 200, 200, *20 zaryad2.png

If x>0

Click 300, 300

Если скрипт видит картинку заряд1 или заряд2 в указанной области, то выполняет действия мышкой.

Попробую.

Играл несколько дней подряд. Были проблемные места, hh => kk, kk => pp, покупка последнего героя. Но я сделал упор на прокачку урона, теперь эти места проходятся автоматически, без моего вмешательства.

Последние два дня игра сводилась к следующему: запускаешь скрипт, приходишь через 3 часа, делаешь престиж 60к реликвий, вкладываешь их в Загадочную Ауру, запускаешь скрипт опять. Мне это быстро надоело.

Вот скрипт, который ищет сундуки. Начинает битву с боссом и сразу выходит из нее. Если найдет сундук, делает паузу 25 секунд, затем начинает процесс снова.

Я калибровку делаю просто и сердито.

Если желаемый элемент не имеет постоянных координат,

я встаю на этот элемент курсором и считываю координаты:

F1::MouseGetPos A, B

F2::

;код с использованием координат, например

Click %A% %B%

Return

Таким образом можно настроить место, куда кликает кнопка F2 без редактирования самого скрипта. Просто и без всяких записей в файл.

По поводу считывания из файла - никогда раньше не делал, но наверняка в Интернете есть. Гугл выдал это

https://www.youtube.com/watch?v=eeaVPyb5d2M

Хм, у меня ничего не появляется. Спокойно масштабирую блокнот, проводник, браузер.

Нету маркера (label), на который вы говорите скрипту прыгнуть.

Нет строки, начинающейся на Remove_Splash:

@Blanco неполный код вам дал.

#comment_90137129

Тоже пользовался ею. Помню как приходилось качать мегабайт 50, а еще устанавливать Java.

KeyWait "F1"

F1 нужно писать без кавычек.

https://autohotkey.com/docs/commands/KeyWait.htm

Модальное окно рассматривается автохоткеем как отдельное окно. Соответственно для клика по элементу в модальном окне нужны его координаты относительно этого окна, а не родительского окна.

Ну или спросите на форуме

http://forum.script-coding.com/viewforum.php?id=2

И отпишитесь здесь, если найдете решение. Или не найдете. Интересно.

Хм. Первое, что приходит на ум - запустить Java в виртуальной машине, и автохоткеем считывать изображение из исходной операционной системы. Тогда можно обойти ограничение, создаваемое, например, DirectX или чем-то там еще.

Либо использовать не виртуальную винду, а эмулятор Java, не знаю, существуют ли такие.

Гуглопоиск ничего путного не дал.

Либо можно попробовать ControlClick и ControlSend:

https://autohotkey.com/docs/commands/ControlClick.htm

https://autohotkey.com/docs/commands/ControlSend.htm

Еще инфа:

https://autohotkey.com/board/topic/62870-how-can-i-give-inpu...

Не сталкивался. Но попробуй вот это:

#comment_90137129

Мне лень =)

Прочтите первую часть, если непонятно.

А что именно непонятно?

"заткнись! заткнись!" - это откуда?