bots

[Amazone]

een lid van mijn 2 weken oude forum was van streek omdat ze een bot online zag.
Majestic bot om precies te zijn.

ik weet niet heel veel af van bots.
Maar als permissies goed geregeld zijn is dit toch geen probleem?
als ik op majestic bot zoek kom ik uit op wat discord gerelateerds

[El torro]

Een bot is nooit geen probleem naar veiligheid toe, sommige eten alleen al je bandwijdte op.
Die moet je in je .htaccess bestand blokkeren!

[Amazone]

bedankt, ja heb het zelf nog niet gezien, maar moet me ereens in verdiepen, in bots

[Amazone]

aha daar is ie:
Majestic-12 [Bot]

About MJ12Bot
Bot Type
Good crawler
(always identifies itself)
IP Range
Distributed, Worldwide
Obeys Robots.txt
Yes
Obeys Crawl Delay
Yes
Data served at
Majestic.com
Majestic is a UK based specialist search engine used by hundreds of thousands of businesses in 13 languages and over 60 countries to paint a map of the Internet independent of the consumer based search engines. Majestic also powers other legitimate technologies that help to understand the continually changing fabric of the web.

Web site owners can see data about their own websites on majestic.com.

MJ12Bot does not currently cache web content or personal data. Instead it maps the link relationships between websites to build a search engine. This data is available to technologies and the public, either by searching for a keyword or a website at Majestic. Details about the community project behind the crawlers are at Majestic12.co.uk.

[nl1sms]

Majestic12 is toch geen verkeerde bot? Ik heb meer last van ahrefs en semrush die veel bandwijdte opsnoepen maar ach....

[xJustxMegx]

Bots zorgen toch enkel dat je website kan worden gevonden door zoekmachines?

[El torro]

Klopt maar sommige bots bezoeken je website zoveel en lang dat je server het niet meer aankan, daarom die beter blokkeren.

[xJustxMegx]

Dat wist ik dus niet, kunnen de mensen die deze bots beheren(?) daar niet iets aan doen eventueel?

[El torro]

Natuurlijk kunnen die dat maar ik denk niet dat ze dat willen. Anders zouden ze dat wel doen.

[xJustxMegx]

Gevalletje 'liever lui dan moe'?

[El torro]

Denk dat er meer kwaadaardige redenen achter zitten.