Приложение python загружает веб-страницы, используя Selenium Webdriver, в общей сложности 20000 страниц в течение нескольких часов работы. Моя проблема в том, что "что-то" создает много файлов tmp, заполняя весь мой жесткий диск. Например, сегодня утром приложение генерирует 70 ГБ файлов tmp за 6 часов работы:( после перезагрузки Ubuntu все эти файлы исчезли. Я считаю, что ответственным является Firefox.
Эта ситуация происходит как в Linux, так и в OS X.
def launchSelenium (url):
profile = webdriver.FirefoxProfile()
profile.set_preference("network.proxy.type", 1)
profile.set_preference("network.proxy.http", "127.0.0.1")
profile.set_preference("network.proxy.http_port", 8080)
profile.set_preference("webdriver.load.strategy", "fast")
profile.set_preference("permissions.default.stylesheet", 2)
profile.set_preference("permissions.default.images", 2)
profile.set_preference("dom.ipc.plugins.enabled.libflashplayer.so", "false")
profile.set_preference("browser.sessionstore.enabled", "false")
profile.set_preference("browser.cache.disk.enable", "false")
profile.update_preferences()
driver = webdriver.Firefox(firefox_profile=profile)
driver.get(url)
try:
element = driver.find_element_by_xpath("//button[@title='Statistics']").click()
except NoSuchElementException:
print "Not available"
driver.close()
return 0
driver.close()
return 1
Я добавил последние две настройки в профиле Firefox, пытаясь решить эту проблему, но ничего не изменилось.
Я что-то делаю неправильно? В Selenium есть ошибка? Благодаря