Produk7 menit baca

AI yang bekerja di komputer: browser dan aplikasi

Cara karyawan AI bekerja di komputer: melihat layar, mengklik, dan mengetik di browser, Excel, Seller Centre, Accurate, termasuk tanpa API. Plus batasan dan kontrolnya.

Tim redaksi SUPER II
Diterbitkan
Telegram WhatsApp
AI yang bekerja di komputer: browser dan aplikasi
Isi artikel

Sebagian besar pekerjaan kantor di Indonesia tidak berjalan di layanan cloud dengan API yang rapi, melainkan di browser dan aplikasi biasa: Seller Centre, WhatsApp Web, Accurate, Excel, internet banking, portal pemerintah. Dulu mengotomatiskan semua itu mahal dan butuh programmer. AI yang bekerja di komputer menyelesaikan masalah ini dengan cara lain: ia memakai tampilan aplikasi seperti manusia, melihat layar, mengklik, dan mengetik. Mari kita bahas cara kerjanya, kemampuannya, batasannya, dan cara mengawasinya.

Apa artinya "AI bekerja di komputer"#

Ada dua cara menghubungkan AI ke sistem kerja.

Lewat API. Satu program bertukar data langsung dengan program lain. Cepat dan andal, tetapi hanya jika layanan itu punya API, Anda punya aksesnya, dan ada yang menulis integrasinya.

Lewat tampilan. Karyawan AI mendapat komputer Windows dan memakainya seperti staf: membuka aplikasi, mencari tombol, mengisi data, memeriksa hasilnya. API tidak diperlukan. Jika manusia bisa mengerjakannya dengan mouse dan keyboard, karyawan AI juga bisa.

Cara kedua inilah yang disebut AI di komputer. Di Super Intellect peran universalnya adalah operator PC: karyawan AI yang membuka situs atau aplikasi apa pun dan bekerja sesuai instruksi. Daftar peran lainnya ada di katalog karyawan.

Cara karyawan AI melihat layar dan bertindak#

Kerja karyawan AI adalah siklus empat langkah yang diulang berkali-kali dalam satu tugas.

  1. Melihat. Mengambil tangkapan layar dan mengenali isinya: jendela, tombol, kolom, tabel, teks.
  2. Memutuskan. Mencocokkan yang dilihat dengan tugas: sedang di mana, langkah berikutnya apa, ada kesalahan atau tidak.
  3. Bertindak. Menggerakkan kursor dan mengklik, mengetik, menekan pintasan keyboard, menggulir, mengunggah file.
  4. Memeriksa. Melihat layar lagi: apakah jendela yang benar terbuka, apakah data tersimpan, apakah muncul pesan error.

Langkah memeriksa inilah yang membedakannya dari makro lama yang mengklik koordinat secara buta. Jika jendela terbuka di tempat lain, muncul pop-up promo, atau situs memuat lebih lama, karyawan AI melihatnya dan menyesuaikan diri.

Di mana paling berguna: aplikasi dan dashboard tanpa API#

AplikasiApa yang dikerjakan karyawan AIDi mana perlu hati-hati
Shopee Seller Centre dan Tokopedia SellerMembalas chat dan ulasan, memperbarui harga dan stok, mengunduh laporan penjualanMengubah harga massal dan menghapus produk
WhatsApp WebMenjawab pertanyaan pelanggan yang menghubungi lebih dulu, mencatat pesananBroadcast massal: tidak dilakukan
Excel dan WordMenggabungkan tabel, membersihkan data, mengisi template dokumenMenimpa file asli: lebih baik bekerja di salinan
Mekari Jurnal dan AccurateMencatat penjualan dan pembelian, mencocokkan mutasi, menyiapkan laporanMenutup periode dan menghapus transaksi
Coretax DJP dan portal pemerintahMengunduh dan mencocokkan data, menyiapkan drafTanda tangan elektronik dan pelaporan: hanya manusia
Internet bankingMengunduh mutasi rekeningTransfer dan pembayaran: tidak pernah oleh AI

Soal browser secara umum: banyak layanan secara resmi punya API, tetapi berbayar, tidak lengkap, atau butuh developer. Karyawan AI cukup membuka situsnya dan bekerja seperti admin: mengisi formulir, mengumpulkan data dari halaman, mengunduh laporan.

Lingkungan Windows khusus: apa dan untuk apa#

Karyawan AI tidak bekerja di komputer Anda. Ia punya lingkungan Windows khusus di server platform: desktop, browser, aplikasi kantor, folder file. Lingkungan ini melekat pada satu karyawan AI beserta kapasitas model SUPER II, dan tidak dibagi dengan karyawan lain.

Manfaatnya dalam praktik:

  • Terpisah. Karyawan AI tidak melihat file pribadi Anda dan tidak mengganggu pekerjaan Anda. Anda di komputer Anda, ia di komputernya.
  • Stabil. Lingkungan tidak dimatikan di malam hari dan tidak masuk mode tidur, jadi tugas panjang selesai sampai akhir. Karyawan AI bekerja 24/7.
  • Aplikasi sendiri. Anda bisa memasang software yang dibutuhkan di lingkungannya. Karyawan AI tidak memasang program tanpa izin Anda.
  • Akses sendiri. Login dan kata sandi diambil dari penyimpanan terenkripsi saat masuk, tidak ditulis di chat.

Untuk tugas besar, karyawan dalam tim membaginya per peran dan bekerja bergiliran di lingkungan tim. Itulah dasar tim AI untuk bisnis. Agar pekerjaan berjalan bersamaan perlu tim lagi, dan karena itu harga paket berbayar dihitung per tim.

Pemantauan di dashboard#

Karyawan yang tidak terlihat wajar membuat ragu: apa yang sedang ia lakukan? Karena itu dashboard punya pemantauan layar.

  • Buka tugas dan lihat layar karyawan AI: tangkapan layar diperbarui setiap beberapa detik, terlihat aplikasi apa yang terbuka dan apa yang sedang diisi.
  • Jika karyawan AI salah arah, tugas bisa dihentikan dan Anda tulis apa yang perlu diperbaiki.
  • Setelah selesai tersimpan log: aplikasi yang dibuka, data yang diisi (tanpa kata sandi), file yang dibuat.

Jalankan pertama tugas baru sebaiknya ditonton penuh. Waktunya sama seperti menjelaskan tugas kepada karyawan baru, setelah itu cukup cek log dan hasil secara acak.

Tiga skenario AI di komputer#

Pesanan dari email dan WhatsApp masuk ke Accurate#

Pesanan reseller datang dalam format bebas, admin mengetiknya satu per satu. Karyawan AI melakukan hal yang sama: membaca pesan, mencari pelanggan dan barang di Accurate, membuat pesanan penjualan, mencocokkan totalnya, lalu menyimpan tanpa memproses lebih lanjut.

Laporan gabungan dari beberapa toko#

Data ada di Shopee, Tokopedia, Lazada, dan toko sendiri, masing-masing dengan format ekspor berbeda. Karyawan AI masuk ke setiap Seller Centre, mengunduh laporan, menggabungkannya di Excel, dan menghitung total per produk. Hasilnya bisa dikirim ke Anda lewat email atau bot Telegram. Lihat juga otomatisasi Shopee dan Tokopedia.

Mengisi formulir di situs#

Pendaftaran vendor, formulir ekspedisi, data penyedia di portal pengadaan: semuanya diisi dengan data yang sama. Karyawan AI mengambil data dari tabel atau profil perusahaan, mengisi formulir, dan sebelum mengirim menunjukkan tangkapan layar untuk Anda setujui.

Batasan yang perlu diketahui#

  • Kecepatan. Karyawan AI bekerja dengan tempo manusia, bukan program. Di mana API memindahkan ribuan baris dalam hitungan detik, ia butuh waktu. Tetapi tidak perlu developer.
  • CAPTCHA dan proteksi bot. Tidak dilewati, karyawan AI memanggil manusia.
  • Verifikasi dua langkah. Kode OTP dikirim ke orang yang bertanggung jawab, dan ia yang mengonfirmasi login.
  • Perubahan tampilan. Jika aplikasi diperbarui dan tombol berpindah, karyawan AI biasanya menemukan jalannya, tetapi jalankan pertama setelah pembaruan sebaiknya dipantau.
  • Tindakan permanen. Pembayaran, tanda tangan, penghapusan: semuanya menunggu persetujuan manusia.

Cara memulai#

  1. Pilih satu tugas berulang di komputer yang memakan satu sampai dua jam sehari.
  2. Tulis langkahnya seperti untuk karyawan baru: aplikasi apa, data dari mana, hasil ke mana.
  3. Simpan akses di penyimpanan terenkripsi dan buat akun terpisah untuk karyawan AI jika bisa.
  4. Jalankan satu contoh dan pantau layarnya di dashboard.
  5. Perbaiki instruksi, lalu perluas ke seluruh volume.

Setiap tim AI berbayar punya lingkungan Windows sendiri. Di paket SUPER II satu tim berharga 24 000 ₽ (≈ US$255) per bulan. Semua syarat ada di halaman harga, dan paket siap pakai per bidang ada di halaman solusi. Anda bisa mencoba gratis cara memberi tugas di paket Start, meski tanpa lingkungan kerja khusus.

Pertanyaan yang sering diajukan

Apakah saya perlu memasang sesuatu di komputer saya?
Tidak. Karyawan AI bekerja di lingkungan Windows khusus di server platform. Komputer Anda tidak disentuh, dan pekerjaannya Anda pantau dari dashboard lewat browser.
Bisakah AI bekerja di aplikasi yang tidak punya API?
Bisa. Karyawan AI melihat layar dan mengendalikan mouse serta keyboard, jadi ia bekerja di tampilan aplikasi seperti manusia, tanpa perlu API.
Apa kekurangan AI di komputer dibanding integrasi lewat API?
Ia lebih lambat dan bergantung pada tampilan. Jika aplikasi berubah drastis, karyawan AI butuh waktu untuk menyesuaikan. Di mana ada API yang andal, integrasi biasanya lebih cepat, dan karyawan AI menangani sisanya.
Apa yang terjadi jika muncul CAPTCHA atau kode OTP?
Karyawan AI berhenti dan meminta bantuan manusia. CAPTCHA tidak dilewati, dan kode OTP atau SMS dikirim ke orang yang bertanggung jawab.
Paket mana yang memiliki lingkungan Windows khusus?
Semua paket berbayar, dan setiap karyawan AI punya lingkungannya sendiri. Di paket Start yang gratis tidak ada lingkungan kerja khusus.
Bagikan: Telegram WhatsApp

Artikel baru lewat email

Kami kabari saat ada artikel baru di blog. Tanpa iklan, bisa berhenti berlangganan kapan saja.

atau ikuti feed: RSS

Serahkan tugas ini kepada tim AI

Tulis tugasnya dengan kata-kata Anda sendiri: tim AI memecahnya, menunjukkan rencana, lalu mulai bekerja. Paket gratis, tanpa kartu.