【Python（PyAutoGUI）で作る業務自動化アプリ入門】スクリーンショット自動化、画像検索機能を使ってみる

pip install pyautogui

#　https://pyautogui.readthedocs.io/en/latest/screenshot.html

#!usr/bin/env python
# -*- coding: utf-8 -*-

import pyautogui

# 画面のスクリーンショットを撮り、my_screenshot.pngというファイル名で保存する
im2 = pyautogui.screenshot('my_screenshot.png')

# (0,0)を左上として幅=300、高さ=400の領域で、画面のスクリーンショットを撮り、my_screenshot2.pngというファイル名で保存する
im3 = pyautogui.screenshot('my_screenshot2.png',region=(0,0, 300, 400))

#　電卓の「２」ボタンの座標を検索する
button_2_location = pyautogui.locateOnScreen('2.png')
#　電卓の「６」ボタンの座標を検索する
button_6_location = pyautogui.locateOnScreen('6.png')
#　電卓の「＋」ボタンの座標を検索する
button_plus_location = pyautogui.locateOnScreen('plus.png')
#　電卓の「＝」ボタンの座標を検索する
button_equal_location = pyautogui.locateOnScreen('equal.png')

#　電卓の「２」ボタンの座標を表示する
print(button_2_location)
print(button_2_location[0])
print(button_2_location.top)

#　電卓の「２」ボタンの中心座標を検索する
button_2_point = pyautogui.center(button_2_location)
button_2x, button_2y = button_2_point

#　電卓の「６」ボタンの中心座標を検索する
button_6_point = pyautogui.center(button_6_location)
button_6x, button_6y = button_6_point

#　電卓の「＋」ボタンの中心座標を検索する
button_plus_point = pyautogui.center(button_plus_location)
button_plusx, button_plusy = button_plus_point

#　電卓の「＝」ボタンの中心座標を検索する
button_equal_point = pyautogui.center(button_equal_location)
button_equalx, button_equaly = button_equal_point

#　電卓の「２」ボタンの座標を表示する
print(button_2_point)
print(button_2_point.x)

#　電卓の「２」ボタンをクリックする
pyautogui.click(button_2x, button_2y)
#　電卓の「＋」ボタンをクリックする
pyautogui.click(button_plusx, button_plusy)
#　電卓の「６」ボタンをクリックする
pyautogui.click(button_6x, button_6y)
#　電卓の「＝」ボタンをクリックする
pyautogui.click(button_equalx, button_equaly)