NomadicExpertsBot
Crawler NomadicExperts: kim jesteśmy, co odczytujemy i jak zrezygnować.
Kim jesteśmy
NomadicExpertsBot jest prowadzony przez Zakomo FZCO, Dubaj, na potrzeby NomadicExperts – serwisu, który pomaga doświadczonym kontraktorom znajdować zlecenia freelance i kontraktowe. Raz dziennie odczytuje publiczne oferty pracy agencji pośrednictwa i giełd projektów.
User-Agent
Nasze zapytania zawierają następujący ciąg User-Agent:
NomadicExpertsBot/0.1 (+https://nomadicexperts.com/bot; low-volume daily job index)
Token produktu do reguł w pliku robots.txt to NomadicExpertsBot
Co i jak odczytujemy
- Tylko publiczne strony z ofertami pracy oraz mapy witryny i plik robots.txt. Bez logowania, bez płatnych treści, bez formularzy.
- Plik robots.txt jest odczytywany przed każdą stroną; przestrzegamy dyrektywy Crawl-delay, a regułę wskazującą NomadicExpertsBot stosujemy zawsze.
- Nigdy nie próbujemy omijać zabezpieczeń przed botami, captchy ani mechanizmów kontroli dostępu. Serwis, który nas blokuje, zostawiamy w spokoju.
- Zapytania do danego serwisu wysyłamy kolejno, w niewielkiej liczbie, a każdą stronę pobieramy jeden raz.
- Między zapytaniami do tego samego serwisu robimy przerwę co najmniej 3 s.
Co pokazujemy
Pokazujemy tylko tytuł, najważniejsze informacje, takie jak lokalizacja, stawka, tryb pracy i data rozpoczęcia, oraz link do Twojej oryginalnej oferty. Nie publikujemy ponownie pełnej treści.
Kandydaci aplikują w Twoim serwisie, więc link kieruje ich do Ciebie.
Jak zrezygnować
Aby wstrzymać odczytywanie Twojego serwisu, dodaj do pliku robots.txt regułę dla naszego tokenu produktu. Zastosujemy się do niej od następnej wizyty:
User-agent: NomadicExpertsBot
Disallow: /
Możesz też napisać do nas i podać swoją domenę; wyłączymy Twój serwis i usuniemy jego oferty: [email protected]
Jeśli wolisz, aby Twoje oferty docierały do większej liczby doświadczonych kontraktorów, również do nas napisz – na przykład w sprawie feedu.
Na stronie źródeł opisujemy, jakie rodzaje serwisów odczytujemy.