Загрузка...

We get ~ 300 free workers about 10 seconds

Thread in Python created by tishavabe Jan 30, 2025. (bumped Feb 25, 2025) 694 views

  1. tishavabe
    tishavabe Topic starter Jan 30, 2025 18 Sep 5, 2022
    Всем привет :colobok_hi:

    Недавно столкнулся с такой проблемой, что нужны ******, причем чем больше - тем лучше, но ничего годного на github найти не смог, в топе находились:
    1. ProxyBroker - вроде классный, но у меня тупо не запускался и вылетал с ошибкой (я не один, в issues решения не нашел)
    2. ProxyHub - который оказался судя по всему копией ProxyBroker (тот же код и та же ошибка)
    3. ProxyScrape - последнее обновление 6 лет назад (не рабочий)
    4. fp (Free-proxy) - задачу свою выполняет, но выдает обычно очень мало ****** (мне максимум попадалось 3-4 штуки без всяких ограничений по типу страны или протокола)

    Все это привело меня к тому, что я решил создать свой проект, с которым и хотел бы поделиться.

    Много здесь рассказывать не буду, все что глубже чем я расскажу находиться на Github.

    Проект получает ****** пока что всего с 3 сайтов:


    В среднем за 1 раз, получилось спарсить 16697 ****** (за время около 4-5 сек), и проверка всех ****** заняла около 3 сек, и получилось 7.6 секунд собрать 432 рабочих ******, из них 41 полностью анонимные (проверка через - https://httpbin.org/ip)

    Код написан на python, и для запросов на получение ****** использует aiohttp (для скорости), так же используются такие библиотеки как tqdm (прогресс бар - logging), bs4, fake_useragent, numpy.
    Всем спасибо за просмотр статьи, жду предложений что еще добавить :duck_like:
     
  2. Loss
    Loss Jan 30, 2025 даун 7647 Apr 18, 2018
    о спс лайк
     
  3. Nekro3
    Nekro3 Jan 30, 2025 Закажи разработку тут - lolz.live/threads/7578402/
    посмотрел код, очень неплохо получилось, красавчик :+rep:
     
  4. NIGHTRAVEN
    Красавчик, :+rep:, неделю назад сам такой писал.
     
  5. TheAzot
  6. nainggolan
    nainggolan May 28, 2025 0 Sep 22, 2024
    респект автору
     
  7. nainggolan
    nainggolan May 28, 2025 0 Sep 22, 2024
    success rate 0
     
Loading...
Top