Selenium Block Element

1. Pendahuluan
Kelebihan membuat bot dengan cara ini kalian tidak harus mengerti bahasa pemrograman python. Selamat mencoba semoga bermanfaat.

Silahkan Install semua tools yang diperlukan dibawh ini:

# https://www.sublimetext.com/
# https://www.python.org/
# https://selenium-python.readthedocs.io/
# https://www.google.com/intl/id_id/chrome/
# https://sites.google.com/a/chromium.org/chromedriver/downloads

2. BLOCK MODUL
fc: berfungsi untuk memasang modul selenium

from selenium import webdriver

3. BLOCK DRIVER CHROME
fc: berfungsi untuk memanggil file driver

driver = webdriver.Chrome(executable_path='chromedriver.exe')

4. BLOCK READFILE
fc: berfungsi untuk membaca isi file txt

read = open('file.txt', 'rb')
lists = read.readlines()

5. BLOCK READFILECSV
fc: berfungsi untuk membaca isi file csv

csv = open('file.csv', 'rb')
lists = csv.reader(csv)

6. BLOCK WRITEFILECSV
fc: berfungsi untuk membuat dan menulis file csv

csv = open('file.csv', 'wb')
write = csv.writer(csv)
write.writerow([var, var, etc])

7. BLOCK GET URL
fc: berfungsi untuk get url

driver.get(url)

8. BLOCK TIMESLEEP
fc: berfungsi untuk membuat jeda waktu

from time import sleep # modul
sleep(10)

9. BLOCK RAWINPUT
fc: berfungsai untuk membuat inputan atau digunakan untuk pause

raw_input(str) # contoh penggunaan pause
var = raw_input(str) # contoh penggunaan inputan

10. BLOCK LOOPFOR
fc: berfungsi untuk membuat perulangan for

for var in list: # contoh penggunaan list
    print var

for var in range(int): # contoh penggunaan range
    print var

11. BLOCK LOOPFORSINGLELINE
fc: berfungsi untuk membuat perulangan for singleline

list = [var for var in list]

12. BLOCK LOOPWHILE
fc: berfungsi untuk membuat perulangan terus_menerus

while True:
    print 'hello!'

13. BLOCK DOWNLOADERFROMPATH
fc: berfungsi untuk download file

import urllib # modul
urllib.urlretrieve('https://example.com/file.jpg', 'namefile.jpg')

14. BLOCK EXTRACTFILENAMEFROMPATH
fc: berfungsi untuk mengambil nama file dari path/url

import os # modul
os.path.basename('https://example.com/namefile.jpg')

15. BLOCK ENCODED
fc: berfungsi untuk menghapus karakter khusus | untuk menangani masalah print,string

   
str.encode('utf-8')

16. BLOCK GETEXTENTION
fc: berfungsi untuk extract extention file | hanya untuk mengambil nama extensinya saja

filename, ext_file = os.path.splitext('../tes/sapi.jpg')

17. BLOCK FINDELEMENTBYXPATH SELENIUM
Kerangka kerja otomatisasi web yang memungkinkan Anda untuk melakukan pengujian terhadap browser

Cara penulisan:

driver.find_element_by_xpath(xpath) # contoh penggunaan selenium xpath
driver.find_elements_by_xpath(xpath) # atau seperti ini

Hanya perlu copy dan paste sesuai yang diperlukan.

driver.find_element_by_xpath('//..[@..=".."]').click() # berfungsi untuk klik objek elemen

driver.find_element_by_xpath("//..[text()='..']").click() # berfungsi untuk klik objek text

driver.find_element_by_xpath('//..[@..=".."]').text # berfungsi untuk penampilkan text

driver.find_element_by_xpath("//..[@..='..']/option[text()='...']").click() # berfungsi untuk memilih opsi dropdown

url = [a.find_element_by_xpath('.//img').get_attribute('src') \
for a in driver.find_elements_by_xpath('//..[@..=".."]')] # berfungsi untuk extract link gambar dan ditampilkan dalam list (src single line) 

for a in driver.find_elements_by_xpath('//..[@..=".."]'): # berfungsi untuk extract link gambar menggunakan for (src)
    imgdownload = a.find_element_by_xpath('.//img').get_attribute('src')

url = [re.findall(r'http[s]?://(?:[a-zA-Z]|[0-9]|[$-_@.&+]|[!*\(\),]|(?:%[0-9a-fA-F][0-9a-fA-F]))+', n.get_attribute('style'))[0] for n in driver.find_elements_by_xpath("//..[@..='..']")] # berfungsi untuk extract link gambar dan ditampilkan dalam list (not src single line)

import re # modul
for n in driver.find_elements_by_xpath("//..[@..='..']"): # berfungsi untuk extract link gambar menggunakan for (not src)
    imgdownload = re.findall(r'http[s]?://(?:[a-zA-Z]|[0-9]|[$-_@.&+]|[!*\(\),]|(?:%[0-9a-fA-F][0-9a-fA-F]))+', n.get_attribute('..'))[0]

import os # modul
driver.find_element_by_xpath("//..[@..='']").send_keys(os.path.abspath(str)) # berfungsi untuk input field, gambar atau text

driver.quit() # berfungsi untuk menutup atau menghentikan driver

18. PERSIAPAN
- install dan penggunaan dasar selenium
- membaca element web pada browser
- membuat alur dasar perancangan bot
- menerapkan modul csv untuk read, write, dan Membuat perulangan
- Melakukan testing


19. PRAKTEK
- Praktek membuat BOT SCRAPE
- Praktek membuat BOT UPLOAD
- Download SOURCECODE

Materi ini tergantung dengan bahasa pemrograman Python dan Teknik Regex. Dalam materi ini saya tidak membahas keduannya lebih mendalam silahkan belajar dari sumber terpisah atau yang lain. Akan tetapi blok kode-kode siap pakai diatas sudah cukup digunakan untuk membuat bot yang power full. Mulai dari Auto srape data, Auto input data, Auto download, dan lain-lain. Bisa juga digabungkan dengan fungsi-fungsi python lainnya agar lebih magic.

Kelebihan tutorial dari Block Element ini tidak diharuskan menguasai bahasa pemrograman terlebih dahulu, hanya saja harus memahami cara penerapanya. Panduan by step membuat bot hanyalah dengan cara Copy Paste blok kode-kode yang sudah tersedia diatas. Block Element juga sudah menyediakan materi Dasar Pemrograman Python untuk membantu kalian khususnya bagi yang ingin mendalaminya lebih jauh.

Block Element sangat cocok digunakan bagi siapa saja yang ingin pekerjaannya lebih mudah, atau siapapun kalian yang ingin mendalami otomatisasi tanpa harus keluar biaya untuk membeli bot.