Вопросы по теме 'web-crawler'
Искатель PHP - проблема с сайтами с разными кодировками
Я создаю анализатор плотности ключевых слов. Я создал анализатор ключевых слов, который отлично работает с веб-сайтами с английским содержанием и кодировкой UTF-8. Когда я сканирую веб-сайт, например myegy.com, ключевые слова на арабском языке...
651 просмотров
schedule
24.04.2024
Xpath извлекает определенные узлы без их дочерних узлов из XML
У меня есть данные XML, которые выглядят так
<priceData>
<div class='price'>
<div class='price-old'>20.00</div>
<div class='price-new'>10.00</div>
<div class='price-tax'>8.00</div>...
60 просмотров
schedule
15.03.2024
Как заставить сканер запуститься n раз, остановиться и подождать 10 минут, а затем снова запустить его n раз и повторить весь процесс?
у меня есть поисковый робот:
import http.client
import time
import threading
class Worker(threading.Thread): # Booting crawler workers
def __init__(self, base, ref, conn, urlKey, url):...
87 просмотров
schedule
09.05.2024
