{"id":50450,"date":"2021-10-26T16:04:04","date_gmt":"2021-10-26T13:04:04","guid":{"rendered":"http:\/\/earnado.com\/tr\/?p=50450"},"modified":"2026-03-05T18:47:42","modified_gmt":"2026-03-05T15:47:42","slug":"robots-txt-nasil-olusturulur","status":"publish","type":"post","link":"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/","title":{"rendered":"Robots.txt Nedir? Nas\u0131l Olu\u015fturulur? Neden Kullan\u0131l\u0131r?"},"content":{"rendered":"<h2><strong>Robots.txt Nedir?<\/strong><\/h2>\n<p>Robots.txt arama motorlar\u0131n\u0131n sitenizi taramas\u0131 i\u00e7in belli komutlar\u0131n olu\u015fturuldu\u011fu bir komut dosyas\u0131d\u0131r. Bu sistemin olu\u015fturulmas\u0131n\u0131n ana nedeni arama motorlar\u0131na ait botlara yol g\u00f6stermektir. Arama motorlar\u0131 sitenizi taramadan \u00f6nce robots.txt dosyas\u0131n\u0131 incelemektedir. Dosyada izin verilen sayfalar\u0131n\u0131z i\u00e7in botlar devreye girer ve sitenizin taranma i\u015flemine ba\u015flan\u0131r.<\/p>\n<h2>Robots.txt Dosyas\u0131n\u0131 Tarayabilen Arama Motorlar\u0131 Hangileridir?<\/h2>\n<p>Arama motorlar\u0131n\u0131n bir\u00e7o\u011fu robots.txt dosyas\u0131n\u0131 tarayabilmektedir. Bu arama motorlar\u0131ndan baz\u0131lar\u0131 ise \u015funlard\u0131r; Google, Yandex ve Bing.<br \/>\nBu arama motorlar\u0131 <b>robots.txt<\/b> dosyas\u0131na rahatl\u0131kla eri\u015febilir ve sitenizle kolayca ileti\u015fim kurabilmektedir.<\/p>\n<p><img fetchpriority=\"high\" decoding=\"async\" class=\"alignnone size-full wp-image-50729\" src=\"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/aramamotorlarirobottextinasilkullanir.png\" alt=\"aramamotorlarirobottextinasilkullanir\" width=\"700\" height=\"350\" srcset=\"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/aramamotorlarirobottextinasilkullanir.png 700w, https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/aramamotorlarirobottextinasilkullanir-300x150.png 300w, https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/aramamotorlarirobottextinasilkullanir-600x300.png 600w\" sizes=\"(max-width: 700px) 100vw, 700px\" \/><\/p>\n<h2>Robots.txt Dosyas\u0131 Komutlar\u0131 Nelerdir?<\/h2>\n<ol>\n<li>Tarama sonucu ( Gecikme Durumu )<\/li>\n<li>Dizin eklemesi veya dizinden \u00e7\u0131karma i\u015flemi<\/li>\n<li>Arama motoru robotunun istedi\u011fimiz sayfalar\u0131 taramas\u0131n\u0131 veya istemedi\u011fimiz sayfalar\u0131 taramamas\u0131n\u0131 yazaca\u011f\u0131m\u0131z komutlar ile belirleyebiliriz.<\/li>\n<\/ol>\n<h2>Robots.txt Dosyas\u0131 Nas\u0131l Olu\u015fturulmaktad\u0131r? Nelere Dikkat edilmelidir?<\/h2>\n<p>Dosyay\u0131 sitenize eklerken dikkat etmeniz gereken bir ka\u00e7 \u00f6nemli kural bulunmaktad\u0131r. Bu kurallar dosyay\u0131 olu\u015fturman\u0131z\u0131n temelini olu\u015fturmaktad\u0131r.<br \/>\nBu kuraldan baz\u0131lar\u0131 ise \u015fu \u015fekildedir;<\/p>\n<ol>\n<li>Dosyan\u0131n ad\u0131 \u2018\u2019<b>robots.txt<\/b>\u2019\u2019 olmal\u0131d\u0131r.<\/li>\n<li>Dosya sadece sitenizin k\u00f6k dizinine eklenmelidir.<\/li>\n<li>Karakter d\u00fczenlemesine \u00e7ok dikkat edilmesi gerekmektedir. Dosyan\u0131z\u0131 olu\u015ftururken karakteri UTF-8 olarak ayarlad\u0131\u011f\u0131n\u0131zdan emin olmal\u0131s\u0131n\u0131z.<\/li>\n<li>B\u00fcy\u00fck harf ve k\u00fc\u00e7\u00fck harflere dikkat etmelisiniz.<\/li>\n<\/ol>\n<p>\u00d6nemli Not: Robots.txt tamamen k\u00fc\u00e7\u00fck karakterler ile yaz\u0131lmal\u0131d\u0131r.<br \/>\nSayfalar\u0131n\u0131z\u0131n ad\u0131n\u0131 dosyaya eklerken ise b\u00fcy\u00fck harf ve k\u00fc\u00e7\u00fck harf kurallar\u0131na dikkat ederek dosyan\u0131z\u0131 olu\u015fturmal\u0131s\u0131n\u0131z. \u00d6rne\u011fin blog sayfan\u0131z\u0131n B si b\u00fcy\u00fck ise yazarkende bunu belirtmelisiniz, \/Blog gibi.<\/p>\n<p>5 &#8211; Birden fazla kural giriyorsan\u0131z kesinlikle bo\u015fluk b\u0131rakarak yazman\u0131z gerekmektedir. Kar\u0131\u015f\u0131kl\u0131k olmas\u0131 durumun da dizinlerde sorunlar ile kar\u015f\u0131 kar\u015f\u0131ya kalabilirsiniz.<\/p>\n<p>6 &#8211; Sitenizin protokol\u00fc nas\u0131l ise robots.txt dosyas\u0131 da ona g\u00f6re yaz\u0131lmal\u0131d\u0131r. \u00d6rne\u011fin SSL sertifikan\u0131z var ise, HTTPS kullan\u0131larak <b>robots.txt<\/b> dosyas\u0131n\u0131n olu\u015fturuldu\u011fundan emin olun. SSL sertifikan\u0131z var ama dosyaya girerken HTTP olarak giri\u015f yaparsan\u0131z yine \u00f6nemli bir sorun ile kar\u015f\u0131 kar\u015f\u0131ya kalabilirsiniz ve diledi\u011finiz de\u011fi\u015fiklikleri ger\u00e7ekle\u015ftirememi\u015f olabilirsiniz. Bu y\u00fczden robots.txt dosyas\u0131 olu\u015ftururken \u00e7ok dikkatli olmal\u0131 ve en ufak detaylar\u0131 bile kontrol etmelisiniz.<\/p>\n<p><img decoding=\"async\" class=\"\" src=\"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/robotstxtnedir.png\" sizes=\"(max-width: 515px) 100vw, 515px\" srcset=\"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/robotstxtnedir.png 515w, https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/robotstxtnedir-300x169.png 300w\" alt=\"robotstxtnedir\" width=\"430\" height=\"242\" \/><\/p>\n<p>\u00d6rnek olarak inceleyecek olursak;<\/p>\n<p>https:\/\/www.site.com\/\u00a0 URL den sonra direkt olarak \u2018\u2019robots.txt\u2019\u2019 yaz\u0131lmal\u0131d\u0131r.<br \/>\nhttps:\/\/www.site.com\/robots.txt<\/p>\n<p>E\u011fer ki;<br \/>\nhttps:\/\/www.site.com\/blog\/robots.txt\/ b\u00f6yle bir dosya giri\u015fi yap\u0131l\u0131rsa kesinlikle\u00a0yanl\u0131\u015f\u00a0bir giri\u015f yap\u0131lm\u0131\u015f olacakt\u0131r. Bu dikkat edilmesi gereken en \u00f6nemli \u00f6zelliktir.<\/p>\n<p>Robots.txt\u00a0dosyas\u0131 olu\u015ftururken yaz\u0131lmas\u0131 gereken \u00fc\u00e7 ana komut vard\u0131r bu komutlar;<br \/>\n<b>User-agent<\/b>,\u00a0<b>Disallow ve Allow<\/b>\u00a0komutlar\u0131d\u0131r.<\/p>\n<h4>User Agent Komutu<\/h4>\n<p>Bu komut ile hangi arama motorlar\u0131n\u0131n sitenizi taramas\u0131n\u0131 istedi\u011finizi belirtiyorsunuz. \u0130\u015flemin yan\u0131na * i\u015fareti koyarsan\u0131z bu t\u00fcm taray\u0131c\u0131lar i\u00e7in ge\u00e7erli olmas\u0131n\u0131 sa\u011flayan bir komut olacakt\u0131r.<br \/>\nUser-agent: *<br \/>\nBu komut sitemizin t\u00fcm arama motorlar\u0131na a\u00e7\u0131k oldu\u011funu g\u00f6stermektedir.<\/p>\n<p>Sitemiz sadece Google taraf\u0131ndan tarans\u0131n istersek bunun i\u00e7in kullanmam\u0131z gereken komut;<br \/>\nUser-agent: Googlebot yazmak yeterli olacakt\u0131r.<\/p>\n<h4>Disallow Komutu<\/h4>\n<p>Sitenizin hangi sayfalar\u0131n\u0131n dizine eklenmesini istemiyorsan\u0131z\u00a0<b>disallow<\/b> komutunu kullanman\u0131z gerekmektedir. Disallow komutunun i\u015fleyi\u015f \u015feklini inceleyecek olursak; Disallow: \u015feklinde kullan\u0131lmaktad\u0131r. Sitenizin t\u00fcm sayfalar\u0131n\u0131n dizin d\u0131\u015f\u0131 kalmas\u0131n\u0131 isterseniz; Disallow: \/ komutunu kullanman\u0131z gerekmetedir. \u00d6rne\u011fin sitede belirli bir k\u0131sm\u0131n dizin d\u0131\u015f\u0131 kalmas\u0131n\u0131 isterseniz; Disallow: \/images\/gorsel.jpg \u015feklinde bir komut girmeniz gerekmektedir. Di\u011fer bir \u00f6rnek ise, sitenizdeki t\u00fcm g\u00f6rsel i\u00e7eriklerinin gizli kalmas\u0131n\u0131 isterseniz. Disallow: \/*.jpg$ komutunu kullanman\u0131z gerekmektedir. Burada $ i\u015fareti bir gizleyici, saklay\u0131c\u0131 g\u00f6revini \u00fcstlenmektedir. Google bu komutu fark ederek sizin taranmas\u0131n\u0131 istemedi\u011finiz dizinleri taramadan di\u011fer i\u015flemlere ge\u00e7ecektir. Kullanm\u0131\u015f oldu\u011funuz sitemap XML altyap\u0131s\u0131na sahip ise, sitemap: https:\/\/www.site.com\/ komutunu koyarak bunu belirtebilirsiniz.<\/p>\n<h4>Crawl-delay Komutu<\/h4>\n<p>Sunucu hatalar\u0131nda veya ge\u00e7ici s\u00fcreli ba\u011flant\u0131 kesilmesi durumunda kullan\u0131lan bir komuttur. As\u0131l kullan\u0131lma amac\u0131 ise site tarama s\u00fcresini belirlememize olanak sa\u011flar. Genel olarak kullan\u0131m yerlerine verebilece\u011fimiz \u00f6rnek; Trendyol, Hepsiburada, N11 olabilir. \u00c7\u00fcnk\u00fc bu komutlar\u0131n kullan\u0131lmas\u0131 gereken yerler genellikle ziyaret\u00e7i say\u0131s\u0131 \u00e7ok y\u00fcksek olan sitelerdir. Tabii ki k\u00fc\u00e7\u00fck b\u00fcy\u00fck ay\u0131rt etmeksizin genel olarak site i\u00e7in yararl\u0131 ise kesinlikle kullan\u0131lmal\u0131d\u0131r.<\/p>\n<h2>Robots.txt \u00d6rnekleri ve \u00c7\u00f6z\u00fcmleri<\/h2>\n<p>\u015eimdi ise genel bir \u00f6rnek yapal\u0131m ve <b>robots.txt<\/b> olu\u015fturmay\u0131 \u00f6\u011frenelim. \u00d6rnek: Sitemiz t\u00fcm arama motorlar\u0131na a\u00e7\u0131k olsun. Blog yaz\u0131lar\u0131n\u0131n baz\u0131lar\u0131nda sorun tespit edildi ve index almas\u0131n\u0131 istemiyorsan\u0131z izlenecek ad\u0131mlar \u015f\u00f6yle olmal\u0131d\u0131r.<\/p>\n<p>User-agent: *<br \/>\nDisallow: \/blog\/denemeyazisi.html<br \/>\nolarak dizinden \u00e7\u0131karma i\u015flemini kolayl\u0131kla yapabiliriz.<\/p>\n<p>E\u011fer t\u00fcm siteye eri\u015fimi engellemek istersek;<br \/>\nUser-agent: *<br \/>\nDisallow: \/<br \/>\nkomutunu kullanmam\u0131z yeterli olacakt\u0131r.<\/p>\n<p>Gerekli hatalar\u0131 d\u00fczelttik o halde disallow edilen i\u015flemi\u00a0<b>allow<\/b>\u00a0olarak tekrar eklememiz gerekmektedir. Bu i\u015flem ise \u015f\u00f6yle yap\u0131lmal\u0131d\u0131r.<\/p>\n<p>Allow: \/blog\/denemeyazisi.html<br \/>\nBu i\u015flemler bittikten sonra Google Search Console \u00fczerinden g\u00fcncellemeleri ger\u00e7ekle\u015ftirmeniz gerekmektedir.<\/p>\n<p>Bu i\u015flemlerin ana yap\u0131lma sebebi ise s\u0131ralama da kay\u0131plar ya\u015famaman\u0131zd\u0131r. Sitenizi tamamen indexe kapat\u0131rsan\u0131z ve d\u00fczenlemeleri \u00f6yle ger\u00e7ekle\u015ftirmek isterseniz zamanla s\u0131ralamalarda d\u00fc\u015fmeler ba\u015flayabilir, fakat istemedi\u011finiz sayfalar\u0131 tek tek <b>robots.txt<\/b> ile arama motorundan \u00e7\u0131karabilir ve gerekli d\u00fczeltmeleri ger\u00e7ekle\u015ftirdikten sonra tekrar allow i\u015flemi uygulayabilirsiniz. Zaman kay\u0131plar\u0131 ve di\u011fer \u00f6nemli sorunlar ya\u015famadan i\u015flemleri kolayl\u0131kla \u00e7\u00f6zebilirsiniz.<\/p>\n<p><img decoding=\"async\" class=\"alignnone size-full wp-image-50731\" src=\"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/robots-txt-seo-calismasi-nedirnasilyapilir.png\" alt=\"robots-txt-seo-calismasi-nedirnasilyapilir\" width=\"700\" height=\"350\" srcset=\"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/robots-txt-seo-calismasi-nedirnasilyapilir.png 700w, https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/robots-txt-seo-calismasi-nedirnasilyapilir-300x150.png 300w, https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/robots-txt-seo-calismasi-nedirnasilyapilir-600x300.png 600w\" sizes=\"(max-width: 700px) 100vw, 700px\" \/><\/p>\n<h2>Robots.txt Dosyas\u0131n\u0131n Do\u011fruluk Testini Nas\u0131l Kontrol Edebiliriz?<\/h2>\n<p>Olu\u015fturulan dosyan\u0131n do\u011fru olup olmad\u0131\u011f\u0131n\u0131 bir ka\u00e7 site yard\u0131m\u0131 ile kolayl\u0131kla \u00f6\u011frenebilirsiniz. Bu siteler size s\u0131f\u0131rdan robots.txt dosyas\u0131 olu\u015fturabilir, dilerseniz de sizin olu\u015fturmu\u015f oldu\u011funuz dosyan\u0131n do\u011fru olup olmad\u0131\u011f\u0131n\u0131 kontrol edebilirsiniz. Robots.txt i\u00e7in bir di\u011fer kontrol sitesi ise, Google Search Console dur. Buradan dosyan\u0131n ba\u015far\u0131l\u0131 bir \u015fekilde olu\u015fturulup olu\u015fturulmad\u0131\u011f\u0131n\u0131 test edebilmekteyiz.<\/p>\n<h3>Robots.txt Dosyas\u0131n\u0131n Google Giri\u015fi Nas\u0131l Ger\u00e7ekle\u015fir?<\/h3>\n<p>Google Search Console da <strong>robots.txt<\/strong> b\u00f6l\u00fcm\u00fcnden bu i\u015flemi kolayl\u0131kla yapabiliriz.<br \/>\nSisteme giri\u015f yapt\u0131\u011f\u0131m\u0131zda sa\u011f alt k\u0131s\u0131mda g\u00f6nder se\u00e7ene\u011fine t\u0131klarsan\u0131z kar\u015f\u0131n\u0131za bir sayfa \u00e7\u0131kacak ve buradan dosyan\u0131z\u0131 g\u00f6rebileceksiniz. E\u011fer indirmek isterseniz de indir se\u00e7ene\u011fine basman\u0131z yeterli olacakt\u0131r.<\/p>\n<h3>Robots.txt Dosyas\u0131nda Hata Olup Olmad\u0131\u011f\u0131 Nas\u0131l Anla\u015f\u0131l\u0131r?<\/h3>\n<p><a href=\"https:\/\/search.google.com\/search-console\/about\"><strong>Google Search Console<\/strong><\/a> ile robots.txt dosyam\u0131z da hata olup olmad\u0131\u011f\u0131n\u0131 kolayl\u0131kla anlayabiliriz. <b>Robots.txt<\/b> dosyas\u0131n\u0131n URL ini alarak detayl\u0131 bir tarama i\u015flemi ger\u00e7ekle\u015ftirilebilir ve mevcutta hatam\u0131z varsa bunlar\u0131 inceleyebiliriz.<\/p>\n<p>\u00d6nerilen \u0130\u00e7erik: <b><a href=\"https:\/\/earnado.com\/tr\/google-search-console-hatalari-nasil-duzeltilir\/\">Google Search Console Hatalar\u0131 ve \u00c7\u00f6z\u00fcm\u00fc<\/a><\/b><\/p>\n<h3>Robots.txt Dosyas\u0131n\u0131n \u00d6nemi Nedir? Seo \u0130\u00e7in Katk\u0131s\u0131 Var M\u0131?<\/h3>\n<p><b>Robots.txt<\/b> dosyas\u0131n\u0131n sitenizin s\u0131ralamas\u0131n\u0131 etkilemesi s\u00f6z konusu de\u011fildir. Robots.txt dosyas\u0131n\u0131n as\u0131l amac\u0131 web sitenizin sayfalar\u0131n\u0131n hangisinin taran\u0131p taranmayaca\u011f\u0131n\u0131 belli etmektir. Bunlar s\u0131ralama ile alakal\u0131 olmayan konulard\u0131r fakat robots.txt dosyas\u0131n\u0131n do\u011fru bir \u015fekilde olu\u015fturulmas\u0131 ile \u00e7ok \u00f6nemli kazan\u00e7lar sa\u011flayabilirsiniz. Dizine eklemek istemedi\u011finiz bir sayfay\u0131 robots.txt arac\u0131l\u0131\u011f\u0131yla olu\u015fturabilir ve Google&#8217; a sunabilirsiniz. B\u00f6ylelikle durumunun \u00e7ok iyi olmad\u0131\u011f\u0131n\u0131 d\u00fc\u015f\u00fcnd\u00fc\u011f\u00fcn\u00fcz sayfalar\u0131 aramadan \u00e7\u0131kartarak sitenize \u00f6nemli bir katk\u0131 sa\u011flayabilirsiniz.<\/p>\n<p>\u0130stemedi\u011finiz sayfalar\u0131 noindex yaparak index almas\u0131n\u0131 engelleyebilirsiniz fakat bu s\u00fcre\u00e7 sizin i\u00e7in biraz can s\u0131k\u0131c\u0131 olabilir \u00e7\u00fcnk\u00fc siz de tahmin edersiniz ki kimi zaman y\u00fczlerde sayfalarla hatta binlerce sayfalarla kar\u015f\u0131la\u015fabilmekteyiz. Hatal\u0131 g\u00f6rd\u00fc\u011f\u00fcm\u00fcz sayfalar\u0131n hepsini bulup indexe kapatmak ise uzun zamanlar\u0131m\u0131z\u0131 alabilir bunun yerine <b>robots.txt <\/b>dosyas\u0131na istemedi\u011fimiz sayfalar\u0131 eklemek \u00e7ok daha kolay ve daha h\u0131zl\u0131 bir \u00e7\u00f6z\u00fcm yoludur.<\/p>\n<h3>Robots.txt Dosyas\u0131na Neden \u0130htiya\u00e7 Duyar\u0131z? Site \u0130\u00e7in Ne T\u00fcr Yararlar\u0131 Vard\u0131r?<\/h3>\n<p>Robots.txt dosyas\u0131 ile arama motorlar\u0131n\u0131n olmas\u0131n\u0131 istedi\u011fi bir site yap\u0131s\u0131na sahip olabiliriz. Arama motorlar\u0131 kullan\u0131c\u0131 deneyimine ve i\u00e7erik faydas\u0131na \u00e7ok \u00f6nem vermektedir, olu\u015fturdu\u011fumuz dosya ile arama motorlar\u0131n\u0131n botlar\u0131 i\u00e7in i\u015fleri kolayla\u015ft\u0131rabilir ve arama motorlar\u0131 i\u00e7in iyi bir site \u00f6rne\u011fi olabiliriz. Sitemizi tamamen trafi\u011fe kapatmak yerine sayfa bazl\u0131 giderek arama motorlar\u0131nda s\u0131ralama d\u00fc\u015fmesine engel olabiliriz.<\/p>\n<p><img loading=\"lazy\" decoding=\"async\" class=\"alignnone size-full wp-image-50730\" src=\"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/robottextnedirneiseyarar.png\" alt=\"robottextnedirneiseyarar\" width=\"700\" height=\"350\" srcset=\"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/robottextnedirneiseyarar.png 700w, https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/robottextnedirneiseyarar-300x150.png 300w, https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/robottextnedirneiseyarar-600x300.png 600w\" sizes=\"(max-width: 700px) 100vw, 700px\" \/><\/p>\n<p>Google\u2019 a dizinlermizi taratmak istersek sadece Google\u2019a \u00f6zel bir taratma i\u015flemi ger\u00e7ekle\u015ftirebiliriz.<br \/>\nG\u00f6r\u00fcnmesini istemedi\u011finiz i\u00e7eriklerin arama sonu\u00e7lar\u0131nda g\u00f6r\u00fcnmesini engelleyebilirsiniz. Bunun haricinde ise site haritas\u0131 hakk\u0131nda \u00f6nemli bilgi giri\u015fleri ger\u00e7ekle\u015ftirebilirsiniz.<\/p>\n<p>Site haritas\u0131 hakk\u0131nda detayl\u0131 bilgi almak i\u00e7in <b><a href=\"https:\/\/earnado.com\/tr\/site-haritasi-nedir\/\">Site Haritas\u0131 Nedir?<\/a><\/b> yaz\u0131m\u0131zdan fayda sa\u011flayabilirsiniz.<\/p>\n<p>Yeni bir site kurulumu yapt\u0131ysan\u0131z ilk yapman\u0131z gereken \u015feylerin ba\u015f\u0131nda kesinlikle robots.txt dosyas\u0131 olu\u015fturmak gelmelidir. E\u011fer \u00e7ok fazla bilginiz yok ise \u00e7e\u015fitli sitelerden faydalanabilir ve sizler i\u00e7in haz\u0131rlanan haz\u0131r dosya \u00fczerine basit bir iki eklemeler yapabilirsiniz. Hi\u00e7 bir bilgi olmadan <b>robots.txt<\/b> dosyas\u0131 \u00fczerine de\u011fi\u015fiklikler yapmaktan ka\u00e7\u0131nmam\u0131z gerekir \u00e7\u00fcnk\u00fc yapaca\u011f\u0131n\u0131z en ufak yanl\u0131\u015f bir d\u00fczenleme de b\u00fct\u00fcn sitenizin g\u00f6r\u00fcn\u00fcrl\u00fc\u011f\u00fcn\u00fc kapatabilir ve siteniz ad\u0131na b\u00fcy\u00fck zorluklar ya\u015fayabilirsiniz. B\u00fcy\u00fck s\u0131k\u0131nt\u0131lar \u00e7ekmemek ve profesyonel bir hizmet almak i\u00e7in <b><a href=\"https:\/\/earnado.com\/tr\/\">Earnado<\/a><\/b> ile ileti\u015fime ge\u00e7ebilirsiniz.<\/p>\n","protected":false},"excerpt":{"rendered":"<p>Robots.txt Nedir? Robots.txt arama motorlar\u0131n\u0131n sitenizi taramas\u0131 i\u00e7in belli komutlar\u0131n olu\u015fturuldu\u011fu bir komut dosyas\u0131d\u0131r. Bu sistemin olu\u015fturulmas\u0131n\u0131n ana nedeni arama motorlar\u0131na ait botlara yol g\u00f6stermektir. Arama motorlar\u0131 sitenizi taramadan \u00f6nce robots.txt dosyas\u0131n\u0131 incelemektedir. Dosyada izin verilen sayfalar\u0131n\u0131z i\u00e7in botlar devreye&#8230;<\/p>\n","protected":false},"author":258,"featured_media":50782,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[29],"tags":[],"class_list":["post-50450","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-seo"],"yoast_head":"<!-- This site is optimized with the Yoast SEO plugin v22.7 - https:\/\/yoast.com\/wordpress\/plugins\/seo\/ -->\n<title>Robots.txt Nedir? Nas\u0131l Olu\u015fturulur? Neden Kullan\u0131l\u0131r? - Earnado<\/title>\n<meta name=\"description\" content=\"Robots.txt nedir? Sitenize ne gibi faydalar sa\u011flar? Robots.txt \u00f6nemi ve \u00e7ok daha fazlas\u0131 i\u00e7in blog yaz\u0131m\u0131z\u0131 ziyaret edebilirsiniz.\" \/>\n<meta name=\"robots\" content=\"index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1\" \/>\n<link rel=\"canonical\" href=\"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/\" \/>\n<meta property=\"og:locale\" content=\"tr_TR\" \/>\n<meta property=\"og:type\" content=\"article\" \/>\n<meta property=\"og:title\" content=\"Robots.txt Nedir? Nas\u0131l Olu\u015fturulur? Neden Kullan\u0131l\u0131r? - Earnado\" \/>\n<meta property=\"og:description\" content=\"Robots.txt nedir? Sitenize ne gibi faydalar sa\u011flar? Robots.txt \u00f6nemi ve \u00e7ok daha fazlas\u0131 i\u00e7in blog yaz\u0131m\u0131z\u0131 ziyaret edebilirsiniz.\" \/>\n<meta property=\"og:url\" content=\"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/\" \/>\n<meta property=\"og:site_name\" content=\"Earnado\" \/>\n<meta property=\"article:published_time\" content=\"2021-10-26T13:04:04+00:00\" \/>\n<meta property=\"article:modified_time\" content=\"2026-03-05T15:47:42+00:00\" \/>\n<meta property=\"og:image\" content=\"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/Robots.txt-1-scaled.jpg\" \/>\n\t<meta property=\"og:image:width\" content=\"2560\" \/>\n\t<meta property=\"og:image:height\" content=\"1707\" \/>\n\t<meta property=\"og:image:type\" content=\"image\/jpeg\" \/>\n<meta name=\"author\" content=\"Deha Y\u0131ld\u0131z\" \/>\n<meta name=\"twitter:card\" content=\"summary_large_image\" \/>\n<meta name=\"twitter:label1\" content=\"Yazan:\" \/>\n\t<meta name=\"twitter:data1\" content=\"Deha Y\u0131ld\u0131z\" \/>\n\t<meta name=\"twitter:label2\" content=\"Tahmini okuma s\u00fcresi\" \/>\n\t<meta name=\"twitter:data2\" content=\"8 dakika\" \/>\n<script type=\"application\/ld+json\" class=\"yoast-schema-graph\">{\"@context\":\"https:\/\/schema.org\",\"@graph\":[{\"@type\":\"WebPage\",\"@id\":\"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/\",\"url\":\"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/\",\"name\":\"Robots.txt Nedir? Nas\u0131l Olu\u015fturulur? Neden Kullan\u0131l\u0131r? - Earnado\",\"isPartOf\":{\"@id\":\"https:\/\/earnado.com\/tr\/#website\"},\"primaryImageOfPage\":{\"@id\":\"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/#primaryimage\"},\"image\":{\"@id\":\"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/#primaryimage\"},\"thumbnailUrl\":\"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/Robots.txt-1-scaled.jpg\",\"datePublished\":\"2021-10-26T13:04:04+00:00\",\"dateModified\":\"2026-03-05T15:47:42+00:00\",\"author\":{\"@id\":\"https:\/\/earnado.com\/tr\/#\/schema\/person\/711398270527164e4cb0892a95d09cf7\"},\"description\":\"Robots.txt nedir? Sitenize ne gibi faydalar sa\u011flar? Robots.txt \u00f6nemi ve \u00e7ok daha fazlas\u0131 i\u00e7in blog yaz\u0131m\u0131z\u0131 ziyaret edebilirsiniz.\",\"inLanguage\":\"tr\",\"potentialAction\":[{\"@type\":\"ReadAction\",\"target\":[\"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/\"]}]},{\"@type\":\"ImageObject\",\"inLanguage\":\"tr\",\"@id\":\"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/#primaryimage\",\"url\":\"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/Robots.txt-1-scaled.jpg\",\"contentUrl\":\"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/Robots.txt-1-scaled.jpg\",\"width\":2560,\"height\":1707,\"caption\":\"Robots.txt\"},{\"@type\":\"WebSite\",\"@id\":\"https:\/\/earnado.com\/tr\/#website\",\"url\":\"https:\/\/earnado.com\/tr\/\",\"name\":\"Earnado\",\"description\":\"\u0130\u015finizi Kafan\u0131zda De\u011fil \u0130nternette B\u00fcy\u00fct\u00fcn!\",\"potentialAction\":[{\"@type\":\"SearchAction\",\"target\":{\"@type\":\"EntryPoint\",\"urlTemplate\":\"https:\/\/earnado.com\/tr\/?s={search_term_string}\"},\"query-input\":\"required name=search_term_string\"}],\"inLanguage\":\"tr\"},{\"@type\":\"Person\",\"@id\":\"https:\/\/earnado.com\/tr\/#\/schema\/person\/711398270527164e4cb0892a95d09cf7\",\"name\":\"Deha Y\u0131ld\u0131z\",\"image\":{\"@type\":\"ImageObject\",\"inLanguage\":\"tr\",\"@id\":\"https:\/\/earnado.com\/tr\/#\/schema\/person\/image\/\",\"url\":\"https:\/\/secure.gravatar.com\/avatar\/6f1c73a96b01e3f77bc0b426ae3e32b261557e63d2ebb812b6ae42555b2256f8?s=96&d=mm&r=g\",\"contentUrl\":\"https:\/\/secure.gravatar.com\/avatar\/6f1c73a96b01e3f77bc0b426ae3e32b261557e63d2ebb812b6ae42555b2256f8?s=96&d=mm&r=g\",\"caption\":\"Deha Y\u0131ld\u0131z\"},\"description\":\"D\u00fcnya da dijital sekt\u00f6r\u00fcn h\u0131zla \u00f6nem kazanmas\u0131 beni dijital pazarlama ile tan\u0131\u015ft\u0131rd\u0131, dijital pazarlama sekt\u00f6r\u00fcnde kariyer yapma hedefiyle \u00e7\u0131kt\u0131\u011f\u0131m bu yolda, e\u011fitim almaya, deneyim kazanmaya ve yeni bilgiler \u00f6\u011frenmeye devam etmekteyim.\",\"sameAs\":[\"https:\/\/www.linkedin.com\/in\/deha-yldz-97445b208\/\"],\"url\":\"https:\/\/earnado.com\/tr\/author\/dehayildizzgmail-com\/\"}]}<\/script>\n<!-- \/ Yoast SEO plugin. -->","yoast_head_json":{"title":"Robots.txt Nedir? Nas\u0131l Olu\u015fturulur? Neden Kullan\u0131l\u0131r? - Earnado","description":"Robots.txt nedir? Sitenize ne gibi faydalar sa\u011flar? Robots.txt \u00f6nemi ve \u00e7ok daha fazlas\u0131 i\u00e7in blog yaz\u0131m\u0131z\u0131 ziyaret edebilirsiniz.","robots":{"index":"index","follow":"follow","max-snippet":"max-snippet:-1","max-image-preview":"max-image-preview:large","max-video-preview":"max-video-preview:-1"},"canonical":"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/","og_locale":"tr_TR","og_type":"article","og_title":"Robots.txt Nedir? Nas\u0131l Olu\u015fturulur? Neden Kullan\u0131l\u0131r? - Earnado","og_description":"Robots.txt nedir? Sitenize ne gibi faydalar sa\u011flar? Robots.txt \u00f6nemi ve \u00e7ok daha fazlas\u0131 i\u00e7in blog yaz\u0131m\u0131z\u0131 ziyaret edebilirsiniz.","og_url":"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/","og_site_name":"Earnado","article_published_time":"2021-10-26T13:04:04+00:00","article_modified_time":"2026-03-05T15:47:42+00:00","og_image":[{"width":2560,"height":1707,"url":"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/Robots.txt-1-scaled.jpg","type":"image\/jpeg"}],"author":"Deha Y\u0131ld\u0131z","twitter_card":"summary_large_image","twitter_misc":{"Yazan:":"Deha Y\u0131ld\u0131z","Tahmini okuma s\u00fcresi":"8 dakika"},"schema":{"@context":"https:\/\/schema.org","@graph":[{"@type":"WebPage","@id":"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/","url":"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/","name":"Robots.txt Nedir? Nas\u0131l Olu\u015fturulur? Neden Kullan\u0131l\u0131r? - Earnado","isPartOf":{"@id":"https:\/\/earnado.com\/tr\/#website"},"primaryImageOfPage":{"@id":"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/#primaryimage"},"image":{"@id":"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/#primaryimage"},"thumbnailUrl":"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/Robots.txt-1-scaled.jpg","datePublished":"2021-10-26T13:04:04+00:00","dateModified":"2026-03-05T15:47:42+00:00","author":{"@id":"https:\/\/earnado.com\/tr\/#\/schema\/person\/711398270527164e4cb0892a95d09cf7"},"description":"Robots.txt nedir? Sitenize ne gibi faydalar sa\u011flar? Robots.txt \u00f6nemi ve \u00e7ok daha fazlas\u0131 i\u00e7in blog yaz\u0131m\u0131z\u0131 ziyaret edebilirsiniz.","inLanguage":"tr","potentialAction":[{"@type":"ReadAction","target":["https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/"]}]},{"@type":"ImageObject","inLanguage":"tr","@id":"https:\/\/earnado.com\/tr\/robots-txt-nasil-olusturulur\/#primaryimage","url":"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/Robots.txt-1-scaled.jpg","contentUrl":"https:\/\/earnado.com\/tr\/wp-content\/uploads\/2021\/10\/Robots.txt-1-scaled.jpg","width":2560,"height":1707,"caption":"Robots.txt"},{"@type":"WebSite","@id":"https:\/\/earnado.com\/tr\/#website","url":"https:\/\/earnado.com\/tr\/","name":"Earnado","description":"\u0130\u015finizi Kafan\u0131zda De\u011fil \u0130nternette B\u00fcy\u00fct\u00fcn!","potentialAction":[{"@type":"SearchAction","target":{"@type":"EntryPoint","urlTemplate":"https:\/\/earnado.com\/tr\/?s={search_term_string}"},"query-input":"required name=search_term_string"}],"inLanguage":"tr"},{"@type":"Person","@id":"https:\/\/earnado.com\/tr\/#\/schema\/person\/711398270527164e4cb0892a95d09cf7","name":"Deha Y\u0131ld\u0131z","image":{"@type":"ImageObject","inLanguage":"tr","@id":"https:\/\/earnado.com\/tr\/#\/schema\/person\/image\/","url":"https:\/\/secure.gravatar.com\/avatar\/6f1c73a96b01e3f77bc0b426ae3e32b261557e63d2ebb812b6ae42555b2256f8?s=96&d=mm&r=g","contentUrl":"https:\/\/secure.gravatar.com\/avatar\/6f1c73a96b01e3f77bc0b426ae3e32b261557e63d2ebb812b6ae42555b2256f8?s=96&d=mm&r=g","caption":"Deha Y\u0131ld\u0131z"},"description":"D\u00fcnya da dijital sekt\u00f6r\u00fcn h\u0131zla \u00f6nem kazanmas\u0131 beni dijital pazarlama ile tan\u0131\u015ft\u0131rd\u0131, dijital pazarlama sekt\u00f6r\u00fcnde kariyer yapma hedefiyle \u00e7\u0131kt\u0131\u011f\u0131m bu yolda, e\u011fitim almaya, deneyim kazanmaya ve yeni bilgiler \u00f6\u011frenmeye devam etmekteyim.","sameAs":["https:\/\/www.linkedin.com\/in\/deha-yldz-97445b208\/"],"url":"https:\/\/earnado.com\/tr\/author\/dehayildizzgmail-com\/"}]}},"_links":{"self":[{"href":"https:\/\/earnado.com\/tr\/wp-json\/wp\/v2\/posts\/50450","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/earnado.com\/tr\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/earnado.com\/tr\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/earnado.com\/tr\/wp-json\/wp\/v2\/users\/258"}],"replies":[{"embeddable":true,"href":"https:\/\/earnado.com\/tr\/wp-json\/wp\/v2\/comments?post=50450"}],"version-history":[{"count":3,"href":"https:\/\/earnado.com\/tr\/wp-json\/wp\/v2\/posts\/50450\/revisions"}],"predecessor-version":[{"id":57890,"href":"https:\/\/earnado.com\/tr\/wp-json\/wp\/v2\/posts\/50450\/revisions\/57890"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/earnado.com\/tr\/wp-json\/wp\/v2\/media\/50782"}],"wp:attachment":[{"href":"https:\/\/earnado.com\/tr\/wp-json\/wp\/v2\/media?parent=50450"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/earnado.com\/tr\/wp-json\/wp\/v2\/categories?post=50450"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/earnado.com\/tr\/wp-json\/wp\/v2\/tags?post=50450"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}