-
Notifications
You must be signed in to change notification settings - Fork 0
/
Copy pathget_data.py
60 lines (45 loc) · 1.49 KB
/
get_data.py
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
# Gerekli kütüphanelerin içe aktarılması
from selenium import webdriver
import time
import urllib.request
import os
from selenium.webdriver.common.keys import Keys
# Web driver kurulumu (Ben chromium kullandım.)
browser = webdriver.Chrome("/usr/lib/chromium-browser/chromedriver")
# Google'a bağlanır.
browser.get("https://www.google.com/")
# Search textbox'a erişir.
search = browser.find_element_by_name("q")
# Aranacak metni yazıp enter'a basar.
search.send_keys("eczema skin",Keys.ENTER)
# Görseller sekmesine geçer. (İngilizce kullanıyorsanız "Images" olarak değiştirebilirsiniz.)
elem = browser.find_element_by_link_text("Görseller")
elem.get_attribute("href")
elem.click()
value = 0
# 20 defa scroll atar ve görselleri toplar.
for i in range(20):
browser.execute_script("scrollBy("+ str(value) +",+1000);")
value += 1000
time.sleep(3)
elem1 = browser.find_element_by_id("islmp")
sub = elem1.find_elements_by_tag_name("img")
# Belirtilen isimde dosya yoksa oluşturur, varsa geçer.
try:
os.mkdir("eczema_skin")
except FileExistsError:
pass
count = 0
# Linkleri toplanan görselleri indirir ve belirtilen dosyaya kaydeder.
for i in sub:
src = i.get_attribute('src')
try:
if src != None:
src = str(src)
print(src)
count+=1
urllib.request.urlretrieve(src, os.path.join('eczema_skin','image'+str(count)+'.jpg'))
else:
raise TypeError
except TypeError:
print('fail')