Tutorial: Membuat AI Automasi Tugas di Komputer

4. AI Automasi Tugas – Seperti AI yang bisa menjalankan tugas otomatis di komputer.

Tutorial: Membuat AI Automasi Tugas di Komputer

(Seperti Bot yang Bisa Klik, Ketik,

AI Automasi Tugas sangat berguna untuk mengotomatisasi pekerjaan berulang ,
✅ Mengisi formulir otomatis 📝
✅ Mengklik tombol di website 🖱️
✅ Mengontrol aplikasi Windows 🖥️
✅ Menjalankan tugas rutin seperti mengunduh file, mengirim email, dll. 📧

1. Konsep Dasar AI Automasi

AI ini bekerja dengan teknik seperti:
🔹 RPA (Robotic Process Automation) → Bot meniru aktivitas manusia di komputer.
🔹 OCR (Optical Character Recognition) → AI membaca teks dari gambar atau layar.
🔹 Scripting (Python, JavaScript, dll.) → Untuk mengontrol keyboard dan mouse.

2. Instalasi & Persiapan

Kita akan menggunakan beberapa pustaka Python:

bash
pip install pyautogui opencv-python pytesseract selenium keyboard

🔹 PyAutoGUI → Mengontrol mouse & keyboard.
🔹 OpenCV & pytesseract → Membaca teks dari layar.
🔹 Selenium → Automasi web.
🔹 Keyboard → Mendeteksi & mengontrol keyboard.

3. Membuat Bot Klik & Ketik Otomatis

🔹 Bot ini bisa klik tombol, mengetik teks, dan membuka aplikasi.

Langkah 1: Gerakkan Mouse & Klik Tombol

python
import pyautogui
import time

# Geser mouse ke posisi tertentu (X, Y)
pyautogui.moveTo(500, 500, duration=1)

# Klik kiri
pyautogui.click()

# Klik kanan
pyautogui.rightClick()

# Klik ganda (double click)
pyautogui.doubleClick()

✅ Coba jalankan! Mouse akan bergerak & klik otomatis.

Langkah 2: Mengetik Teks Otomatis

python
# Tunggu 3 detik sebelum mulai
time.sleep(3)

# Ketik teks otomatis
pyautogui.write("Halo, ini diketik otomatis!", interval=0.1)

# Tekan tombol Enter
pyautogui.press("enter")

✅ Bot ini bisa mengetik sendiri! Coba jalankan dan pindah ke aplikasi Notepad.

4. Automasi Website (Seperti Login Otomatis!)

🔹 Gunakan Selenium untuk mengisi formulir atau login otomatis di website.

Langkah 1: Buka Website & Isi Formulir

python
from selenium import webdriver
from selenium.webdriver.common.keys import Keys

# Buka browser
driver = webdriver.Chrome()  # Pastikan chromedriver sudah terinstall
driver.get("https://www.google.com")

# Cari elemen input dan ketik sesuatu
search_box = driver.find_element("name", "q")
search_box.send_keys("ChatGPT AI")
search_box.send_keys(Keys.RETURN)

# Tunggu beberapa detik
import time
time.sleep(5)

# Tutup browser
driver.quit()

✅ Bot ini bisa membuka Google, mengetik pencarian, dan menekan Enter otomatis!

5. Membaca Teks dari Gambar atau Layar (OCR AI)

🔹 Gunakan OpenCV & pytesseract untuk membaca teks dari layar.

Langkah 1: Pasang Tesseract OCR

👉 Download & install Tesseract:

Windows: https://github.com/UB-Mannheim/tesseract/wiki
Mac: brew install tesseract

Langkah 2: Ambil Screenshot & Baca Teks

python
import pytesseract
import pyautogui
from PIL import Image

# Ambil screenshot
screenshot = pyautogui.screenshot()

# Simpan & proses gambar
screenshot.save("screenshot.png")
text = pytesseract.image_to_string(Image.open("screenshot.png"))

print("Teks yang terbaca:", text)

✅ Bot ini bisa membaca teks di layar secara otomatis!

6. Automasi Keyboard & Shortcut (Hotkey AI)

🔹 Gunakan keyboard untuk menekan tombol tertentu atau shortcut otomatis.

python
import keyboard

# Tekan tombol "Ctrl + A" (Pilih semua)
keyboard.press_and_release("ctrl + a")

# Tekan "Enter" setelah 3 detik
keyboard.wait(3)
keyboard.press_and_release("enter")

✅ Coba jalankan! Bot akan otomatis menekan shortcut seperti manusia.

7. Otomatisasi Windows & Aplikasi

🔹 Buka & tutup aplikasi dengan Python.

Langkah 1: Buka Notepad & Ketik Otomatis

ular piton 
import os
import time
import pyautogui

# Buka aplikasi Notepad
os.system("notepad.exe")

# Tunggu aplikasi terbuka
time.sleep(2)

# Ketik otomatis
pyautogui.write("Halo, ini ditulis otomatis di Notepad!", interval=0.1)

✅ Bot ini bisa membuka Notepad & mengetik teks otomatis!

Kesimpulan & Pengembangan Lanjutan

✅ Kita telah membuat AI Automasi Tugas untuk mengontrol komputer!
✅ Bisa digunakan untuk klik otomatis, mengetik, login, membaca teks, dan shortcut.
✅ Bisa dikembangkan untuk: