SetreeBot
SetreeBot je program služby Šetřee, který čte nové inzeráty z bazarů, aby mohl uživatelům poslat odkaz na ty, které hledají. Představuje se vždy stejně:
Mozilla/5.0 (compatible; SetreeBot/1.0; +https://setree.cz/bot)
Co čte a jak často
- RSS kanály rubrik, které provozovatel bazaru sám nabízí; každou rubriku nejčastěji jednou za minutu, u klidných rubrik řidčeji (až 15 minut).
- Stránku inzerátu jen tehdy, když odpovídá něčímu hlídači (kvůli obci a typu prodejce), každou jednou.
- Nejvýš jeden požadavek za 3 sekundy na jeden web, nikdy souběžně.
- Respektuje robots.txt a odpovědi 429/503. Nepoužívá proxy, nemění user-agent a nikdy neobchází ochranu ani přihlášení.
Zdroje
| Zdroj | Stav |
|---|
Provozujete web a nechcete, aby ho SetreeBot četl?
Napište nám na ahoj@setree.cz – čtení vypneme do 24 hodin. Stačí také zakázat SetreeBot v robots.txt. Rádi se domluvíme i na oficiálním napojení.