<?xml version="1.0" encoding="UTF-8"?><rss version="2.0"
	xmlns:content="http://purl.org/rss/1.0/modules/content/"
	xmlns:wfw="http://wellformedweb.org/CommentAPI/"
	xmlns:dc="http://purl.org/dc/elements/1.1/"
	xmlns:atom="http://www.w3.org/2005/Atom"
	xmlns:sy="http://purl.org/rss/1.0/modules/syndication/"
	xmlns:slash="http://purl.org/rss/1.0/modules/slash/"
	>

<channel>
	<title>robot &#8211; 404M.COM</title>
	<atom:link href="https://404m.com/tag/robot/feed/" rel="self" type="application/rss+xml" />
	<link>https://404m.com</link>
	<description>Blog o doménách, investování a internetovém podnikání</description>
	<lastBuildDate>Tue, 29 May 2018 22:25:53 +0000</lastBuildDate>
	<language>cs</language>
	<sy:updatePeriod>
	hourly	</sy:updatePeriod>
	<sy:updateFrequency>
	1	</sy:updateFrequency>
	<generator>https://wordpress.org/?v=6.0.3</generator>
	<item>
		<title>Kde najít informace o crawlerech, robotech a scannerech, kteří prochází váš web</title>
		<link>https://404m.com/2018/05/30/kde-najit-informace-o-crawlerech-robotech-a-scannerech-kteri-prochazi-vas-web/</link>
					<comments>https://404m.com/2018/05/30/kde-najit-informace-o-crawlerech-robotech-a-scannerech-kteri-prochazi-vas-web/#comments</comments>
		
		<dc:creator><![CDATA[admin]]></dc:creator>
		<pubDate>Tue, 29 May 2018 22:25:53 +0000</pubDate>
				<category><![CDATA[Internet]]></category>
		<category><![CDATA[crawler]]></category>
		<category><![CDATA[robot]]></category>
		<guid isPermaLink="false">https://404m.com/?p=17069</guid>

					<description><![CDATA[Čím více odkazů na váš web vede, tím více různých automatických robotů jej navštěvuje. Ve většině případů se jedná o neškodné automatické skripty, které jen sbírají data. Ovšem někdy se mohou splašit a nadělat celkem dost problémů. Ostatně běžný web navštíví za den desítky i klidně stovky z nich. Přístupy jak se k nim zachovat se různí. Někdo doporučuje jít cestou whitelistování a někdo preferuje svobodu a blacklisty. Robotů jsou různé druhy Nejznámější jsou web crawleři jako je třeba Googlebot anebo Seznambot. Prochází si a stahují data z vašeho webu, aby jej mohli zpracovaný uložit do databáze a zařadit do svého indexu. Pokud chcete být ve vyhledávačích tak jim musíte povolit návštěvu. Pak tu máme feed fetchery. Ti hledají na&#8230; ]]></description>
		
					<wfw:commentRss>https://404m.com/2018/05/30/kde-najit-informace-o-crawlerech-robotech-a-scannerech-kteri-prochazi-vas-web/feed/</wfw:commentRss>
			<slash:comments>2</slash:comments>
		
		
			</item>
	</channel>
</rss>
