Похожие чаты

I want to check if a webpage's content is changing

with python. For let's say in every 1 hour. For that do I need to send get request every 1 hour or is there any other way ?

13 ответов

1 просмотр

Стикер

Saurav- Автор вопроса

Is there a possibility that I may get blocked for sending too many requests?

Saurav
Is there a possibility that I may get blocked for ...

Yes. But one request every hour is hardly too many.

The best you can do is a HEAD request per hour and look at the Date or Etag response headers if the website supports either of those

Saurav- Автор вопроса
Thomas
The best you can do is a HEAD request per hour and...

What can I do with Data header? It just gives the date of the head request

Saurav- Автор вопроса
Thomas
The best you can do is a HEAD request per hour and...

Can I do the same with Content-Length? My question is, does content-length automatically gives the size of webpage or it is manually set. Like if an element is added in the webpage can I know that with Content-Length?

Saurav
What can I do with Data header? It just gives the ...

No, it gives the date of the last time the page was edited usually?

Saurav- Автор вопроса
Thomas
No, it gives the date of the last time the page wa...

I tried, it gave the time on which response was sent (or maybe something is different with that site)

Saurav
Can I do the same with Content-Length? My question...

An element could be replaced with another element of the same size, then the total length would be the same

Saurav- Автор вопроса
Bread pup ▲⬤ ×▫︎
An element could be replaced with another element ...

Yup but that's highly unlikely in that site (it's a college website where lecture notes are uploaded)

Похожие вопросы

Обсуждают сегодня

Ready for some fun AND a chance to win TKO Tokens? Join us for exciting minigames in our Telegram group! 🕒 Don’t miss out—games start on today 25 October 2024, at 8 PM! Ge...
Milkyway | Tokocrypto
248
Здравствуйте, вопрос по структурам данных. Были у вас случаи, когда пришлось писать деревья или двунаправленные списки?
/ /
48
а проверьте, собирается ли у кого сейчас транк лазаря через делюкс? у меня вот: fpcupdeluxe: info: Lazarus Native Installer (BuildModuleCustom: UserIDE): LazBuild: building Us...
Iluha Companets
20
Такой вопрос: Почему DocLister, если указать другие шаблоны для пагинации - ко всем указанными шаблоном присваивается пустая строка?
Кирилл Гацевич
11
добрый день. возможно ли изменить цвет окон лазаруса? Как?
Budemposmotret
35
This is a big issue. Just by being a citizen of a country, you are denied to contribute to Open Source software: https://youtu.be/L5Ec5jrpLVk?si=1iIuHnMPbCB4anV-
Sharuzzaman Ahmat Raslan
72
Мне тут приспичило встроить в программу форматировние текста SQL, расставить переносы строк и отступы так, чтобы лучше читалось. Я что-то свое изобразил, оно после ключевых сл...
Sergey Bodrov
11
Господа, а кто-нибудь сталкивался с размещением на TTabControl/TTabSheet множества контролов (> 100) с последующими External: Access violation? Вот буквально на ровном месте. ...
Dmitry
29
Вот например простой пример, как получить стоимость хешрейта монеты монеро с сайта whattomine.com c использование сеарилизатора при парсинге JSON TaskProfit := TTask.Run(proc...
Delphi Coder
2
А какие существуют способы обработки ошибок выделения памяти в ядре? Т.е., допустим, есть функция, которая возвращает адрес свободной страницы в физической памяти и диапазон в...
disba1ancer
51
Карта сайта