Générateurs de proxies valides !!

Salut les bg (en particulier @fntnstk) !

Voici mon code fini qui génère des proxies à l'aide de proxyscrape, et qui les check tout seul !
Je vous conseille de rentrer 3 ou plus pour la question et de le laisser tourner...
Si aucun fichier texte n'est généré, c'est qu'il n'y avait pas de proxies valides...

Amusez-vous bien 😉

import requests
from bs4 import BeautifulSoup

def check(proxy):
    proxies = { 
        "http"  : proxy
    }
    try:
        req = requests.get("https://google.com", proxies=proxies, timeout=18)
        soup = BeautifulSoup(req.text, 'html.parser')
        if "Google" in soup:
            print("Valid proxy :", proxy)
            return True
        else:
            return False
    except (TimeoutError, requests.exceptions.ReadTimeout):
        return False

cmb = int(input("Combien de fois voulez-vous obtenir des proxies ? "))
i = 0
for x in range(0, cmb):
    url = "https://api.proxyscrape.com/v2/?request=getproxies&protocol=http&timeout=10000&country=all&ssl=all&anonymity=all"
    try:
        grab = requests.get(url)
        soup = BeautifulSoup(grab.text, 'html.parser')
        res = soup.text.split("\n")
        liste = []
        for i in res:
            ap = str(i).replace("\r", "")
            if check(ap) == True:
                liste.append(ap)
            else:
                pass
        
        if len(liste) == 0:
            print("Aucun proxy valide détecté...")
        else:
            fichier = open("proxies.txt", "a+")
            for proxy in liste:
                fichier.write(str(proxy) + "\n")
            print("File has been writed successfully !")
    except requests.exceptions.ConnectionError:
        print("Mauvaise connection...")
        pass

Like !

Modifié 21 décembre 20223 a par Scrap
Ajout de 8 secondes au timeout

C'est pas un générateur du coup..

Il y a 1 heure, Hideaki a dit :

C'est pas un générateur du coup..

Ouais 'fin un scraper et un checker