![]() | |
| |||||||
Bundan nasıl kurtulacağımBundan nasıl kurtulacağım konusu Webmaster Genel altında yer almaktadır. |
![]() | |
| Görüntüleme: 452 - Cevaplar: 10
| LinkBack | Seçenekler | Stil |
| |||
| yeni açtıgı program download sitesi devamlı başka sitelerden back alıyo botlar falan indexliyo herhalde bunu nsl engelleyebilirim 20 günlük sitenin 100 küsür backlinki var ve site sandboxtan çıkmıyor.
__________________ $ |
| |||
| robots.txt bu işi çözüyor diye biliyorum.. index lemesini engelleyebiliyorsun .. netten ararsan çıkar karşına tam olarak nasıl yapıldığını bilmiyorum
__________________ No signature |
| ||||
| robots.txt ile halledebilirsin.. robots.txt dosyası oluştur.. User-agent: * Disallow: /... Disallow: /... Disallow: /... Disallow: /... Disallow: /... Disallow: /... Disallow: /... Burda 3 nokta(...) kısmına botların indexlemesini istemediğin kısımlarını yaz.. Örnek: Disallow: /admin.. Kolay gelsin. |
| ||||
| |
| ||||
| Eğer sadece googlebot indexlesin istiyorsan Şu şekilde değiştirelim.. User-agent: Googlebot Disallow: /... Disallow: /... Disallow: /... Disallow: /... Disallow: /... Disallow: /... Disallow: /... User-agent: Black Hole Disallow: / User-agent: Titan Disallow: / User-agent: WebStripper Disallow: / User-agent: NetMechanic Disallow: / User-agent: CherryPicker Disallow: / User-agent: EmailCollector Disallow: / User-agent: EmailSiphon Disallow: / User-agent: WebBandit Disallow: / User-agent: EmailWolf Disallow: / User-agent: ExtractorPro Disallow: / User-agent: Crescent Disallow: / User-agent: NICErsPRO Disallow: / User-agent: SiteSnagger Disallow: / User-agent: ProWebWalker Disallow: / User-agent: CheeseBot Disallow: / User-agent: ia_archiver Disallow: / User-agent: ia_archiver/1.6 Disallow: / User-agent: Teleport Disallow: / User-agent: TeleportPro Disallow: / User-agent: Wget Disallow: / User-agent: MIIxpc Disallow: / User-agent: Telesoft Disallow: / User-agent: Website Quester Disallow: / User-agent: WebZip Disallow: / User-agent: moget/2.1 Disallow: / User-agent: WebZip/4.0 Disallow: / User-agent: WebSauger Disallow: / User-agent: WebCopier Disallow: / User-agent: NetAnts Disallow: / User-agent: Mister PiX Disallow: / User-agent: WebAuto Disallow: / User-agent: TheNomad Disallow: / User-agent: WWW-Collector-E Disallow: / User-agent: RMA Disallow: / User-agent: libWeb/clsHTTP Disallow: / User-agent: asterias Disallow: / User-agent: turingos Disallow: / User-agent: spanner Disallow: / User-agent: InfoNaviRobot Disallow: / User-agent: Harvest/1.5 Disallow: / User-agent: Bullseye/1.0 Disallow: / User-agent: Crescent Internet ToolPak HTTPOLE Control v.1.0 Disallow: / User-agent: CherryPickerSE/1.0 Disallow: / User-agent: CherryPickerElite/1.0 Disallow: / User-agent: WebBandit/3.50 Disallow: / User-agent: DittoSpyder Disallow: / User-agent: Foobot Disallow: / User-agent: SpankBot Disallow: / User-agent: BotALot Disallow: / User-agent: lwp-trivial/1.34 Disallow: / User-agent: lwp-trivial Disallow: / User-agent: BunnySlippers Disallow: / User-agent: URLy Warning Disallow: / User-agent: Wget/1.5.3 Disallow: / User-agent: LinkWalker Disallow: / User-agent: cosmos Disallow: / User-agent: moget Disallow: / User-agent: hloader Disallow: / User-agent: humanlinks Disallow: / User-agent: LinkextractorPro Disallow: / User-agent: Mata Hari Disallow: / User-agent: LexiBot Disallow: / User-agent: Offline Explorer Disallow: / User-agent: Web Image Collector Disallow: / User-agent: The Intraformant Disallow: / User-agent: True_Robot/1.0 Disallow: / User-agent: True_Robot Disallow: / User-agent: BlowFish/1.0 Disallow: / User-agent: JennyBot Disallow: / User-agent: MIIxpc/4.2 Disallow: / User-agent: BuiltBotTough Disallow: / User-agent: ProPowerBot/2.14 Disallow: / User-agent: BackDoorBot/1.0 Disallow: / User-agent: toCrawl/UrlDispatcher Disallow: / User-agent: WebEnhancer Disallow: / User-agent: TightTwatBot Disallow: / User-agent: suzuran Disallow: / User-agent: VCI WebViewer VCI WebViewer Win32 Disallow: / User-agent: VCI Disallow: / User-agent: Szukacz/1.4 Disallow: / User-agent: QueryN Metasearch Disallow: / User-agent: Openfind data gathere Disallow: / User-agent: Openfind Disallow: / User-agent: Xenu's Link Sleuth 1.1c Disallow: / User-agent: Xenu's Disallow: / User-agent: Zeus Disallow: / User-agent: RepoMonkey Bait & Tackle/v1.01 Disallow: / User-agent: RepoMonkey Disallow: / User-agent: Zeus 32297 Webster Pro V2.9 Win32 Disallow: / User-agent: Webster Pro Disallow: / User-agent: EroCrawler Disallow: / User-agent: LinkScan/8.1a Unix Disallow: / User-agent: Keyword Density/0.9 Disallow: / User-agent: Kenjin Spider Disallow: / User-agent: Cegbfeieh Disallow: / User-agent: larbin Disallow: / User-agent: b2w/0.1 Disallow: / User-agent: Copernic Disallow: / User-agent: psbot Disallow: / User-agent: Python-urllib Disallow: / User-agent: URL_Spider_Pro Disallow: / User-agent: LNSpiderguy Disallow: / User-agent: mozilla/3 Disallow: / User-agent: httplib Disallow: / User-agent: Crescent Internet ToolPak HTTP OLE Control v.1.0 Disallow: / User-agent: Openbot Disallow: / User-agent: URL Control Disallow: / User-agent: Zeus Link Scout Disallow: / User-agent: Iron33/1.0.2 Disallow: / User-agent: Bookmark search tool Disallow: / User-agent: GetRight/4.2 Disallow: / User-agent: FairAd Client Disallow: / User-agent: Gaisbot Disallow: / User-agent: **ua_Products Disallow: / User-agent: Radiation Retriever 1.1 Disallow: / User-agent: WebmasterWorld Extractor Disallow: / User-agent: Flaming AttackBot Disallow: / User-agent: Oracle Ultra Search Disallow: / User-agent: MSIECrawler Disallow: / User-agent: PerMan Disallow: / User-agent: searchpreview Disallow: / User-agent: naver Disallow: / User-agent: dumbot Disallow: / User-agent: Hatena Antenna Disallow: / User-agent: grub-client Disallow: / User-agent: grub Disallow: / User-agent: sootle Disallow: / User-agent: es Disallow: / User-agent: Enterprise_Search/1.0 Disallow: / User-agent: Enterprise_Search Disallow: / Disallow kısmına yine indexlenmesini istemediğin yerleri yaz NOT: Googlebot dışındakilerin nerdeyse hepsi zararlı bottur.. Eğer bu zararlı botların gelmesini istemiyorsan bunu olduğu gibi kullan derim. |
| |||
| @Alone; bahsettiğin zararlı botların neredeyse tamamı robots.txt protokolünü hiçe sayar .htaccess ile bu kontrolü yapmak daha akıllıca. Sitenizin istedikleriniz harici bot veya hırsızlar tarafından indexlenememesini sağlamak istiyorsanız ve sunucunuz php destekliyor ise freshmeat.net: Project details for anti_offline_browser.php adresinden edinebileceğiniz anti offline browser işini görecektir. Yani/ayrıca anti offline browser offline browser (httrack vb.) ile girip sitenizi çalan adi at hırsızlarına karşı da güzel bir çözümdür. |
![]() |
| Konuyu Toplam 1 Üye okuyor. (0 Kayıtlı üye ve 1 Misafir) | |
| Seçenekler | |
| Stil | |
| |
Benzer Konular | ||||
| Konu | Konuyu Başlatan | Forum | Cevaplar | Son Mesaj |
| Fake Pr Nedir? Nasıl Yapılır? Nasıl Anlaşılır? | ThêMéssi | 15 | 15-09-2007 13:03:25 | |
| Sandbox nedir? / nasıl girilir? / nasıl çıkılır? | Kadir | Arama Motoru Optimizasyonu | 0 | 12-05-2007 20:19:37 |
| Nasıl Yapılır ? | Emre | Webmaster Genel | 7 | 28-01-2007 15:57:19 |
| Nasıl ama? | gokhan_ssl | Tanıtımlarınız | 13 | 14-01-2007 00:21:59 |