Я попытался расшифровать URL-адрес if, но это не сработало:
Вот ошибка, показанная ниже:
Traceback (most recent call last):
File "E:\Users\Francbicon\Desktop\Bots\Master Copy\Shopee Endless Loop.py", line 185, in <module>
clickpy()
File "E:\Users\Francabicon\Desktop\Bots\Master Copy\Shopee Endless Loop.py", line 75, in clickpy
print(all_urls)
UnicodeEncodeError: 'UCS-2' codec can't encode characters in position 878-878: Non-BMP character not supported in Tk
Вот весь код:
from selenium import webdriver
from selenium.webdriver.common.action_chains import ActionChains
import time
from selenium.webdriver.common.action_chains import ActionChains
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.common.by import By
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.common.keys import Keys
import csv
import urllib.parse
import time
url = 'https://shopee.com.my/search?keyword=mattress'
driver = webdriver.Chrome(executable_path=r'E:/users/Asashin/Desktop/Bots/others/chromedriver.exe')
driver.get(url)
time.sleep(0.8)
# Select language
driver.find_element_by_xpath('//div[@class="language-selection__list"]/button').click()
time.sleep(3)
# Scroll a few times to load all items
def clickpy():
for x in range(10):
driver.execute_script("window.scrollBy(0,300)")
time.sleep(0.1)
# Get all links (without clicking)
all_items = driver.find_elements_by_xpath('//a[@data-sqe="link"]')
all_urls = []
s=["-Dr.Alstone-","-Dr.-Alstone-","-Lutfy-Paris-"]
for item in all_items:
# This give you whole url of the anchor tag
url = item.get_attribute('href')
if "-Dr.Alstone-" in url:
continue
else:
if "-Dr.-Alstone-" in url:
continue
else:
if "/Dr.Alstone-" in url:
continue
else:
if "-Simoni-" in url:
continue
else:
if "-Lütfy-" in url:
continue
else:
# You need to remove the preceding values in order to verify href later for clicking
urlfinal=url.split('https://shopee.com.my')[1]
c = urllib.parse.unquote(urlfinal)
all_urls.append(c)
print(all_urls)
a= len(all_urls)
print('len:' + str(a))
Вот что я пробовал: try и exclude, if-else и обычный цикл, но, похоже, это работает не очень хорошо. Ошибка постоянно вылетает.
Как это исправить?
clickpy()? Я не вижу этого в коде, но ошибка показывает, что это создает проблему. - person furas schedule 07.01.2020clickpy(), он корректно работает в Linux. Возможно, проблема не в коде, а в инструменте, который вы используете для его запуска. Я вижуTkпо ошибке. Используете ли выTk,tkinterилиIDLE, которые используютtkinter(который используетTk)? Возможно, он будет работать правильно, если вы запустите его прямо в консоли или с помощью другого редактора/IDE (например, PyCharm). - person furas schedule 07.01.2020all_urls- вы можете использовать циклforдля печати каждого URL-адреса отдельно, чтобы увидеть, какая из них создает проблему. Вы также можете напечатать URL-адрес, прежде чем использоватьurllib.parse.unquote()- возможно, он покажет что-то еще. вы также можете использоватьprint(repl(url)), и он должен использовать шестнадцатеричные коды для не ascii-символов. - person furas schedule 07.01.2020