Загрузка...

Быстрый Парсинг Строк

Тема в разделе Python создана пользователем LIMP 19 ноя 2024. 432 просмотра

  1. LIMP
    LIMP Автор темы 19 ноя 2024 Discover L.I.M.P. say it 240 17 авг 2020
    Как глаз бога способен спарсить хуеву кучу баз данных и миллионы строк за секунд 10-15? У меня на одно бд уходит секунд 30 парса, и там каждая строка обсчитывается чтобы найти совпадения
     
  2. ToSa
    ToSa 19 ноя 2024 гость, боже, храни кьют-рок. :beer::beer::beer: 24 038 18 дек 2021
    использовать не python
     
    1. Посмотреть предыдущие комментарии (27)
    2. GreatestDreamer
      ToSa, "пришел псевдо-не-новокек и давай всех учить тому в чем он не смыслит"
    3. ToSa
      TheBoossya, прочитай мое сообщение, я написал всё
  3. Маркет_неактив8375361
    Маркет_неактив8375361 19 ноя 2024 Заблокирован(а) 135 7 май 2024
    если бд проиндексировано, нагрузка не используется на загрузку всей бд, а просто ищет строки из уже загруженной базы, что не должно вызывать проблем
     
    1. 1xday
  4. Маркет_неактив8375361
    Маркет_неактив8375361 19 ноя 2024 Заблокирован(а) 135 7 май 2024
    остальное зависит от производительности железа
     
  5. TheBoossya
    TheBoossya 19 ноя 2024 121 28 авг 2019
    Кеш, индексы
     
    1. Посмотреть предыдущие комментарии (1)
    2. GreatestDreamer
      TheBoossya, А и самое главное, что никто НЕ написал - правильное написание запросов :)
    3. TheBoossya
      GreatestDreamer,
      Не соглашусь. Чаще всего людей "пробивают" несколько раз, либо каких-то медиек/полу-медиек. Но тут сложно сказать, нужна конкретная статистика
    4. GreatestDreamer
      TheBoossya, хаха, честно, не знал, что людям настолько делать нечего ;)
      Ну тогда соглашусь, но все равно надо смотреть статистику.
      20 ноя 2024 Изменено
  6. bog
    bog 19 ноя 2024 УШЕЛ В АРМИЮ, ПРИДУ ПРИМЕРНО В МАЕ 2026 :pwalk:
    почитай про алгоритмы поисков
     
Top
Загрузка...