iRobots.txt SEO
Lejuplādēt Bezmaksas versija: 1.1.2 (updated gada 13 2010)
Features | Screenshot | Download | konfigurācija | FAQ | Komentāri | Demo
Version 1.1 tagad atbrīvo! Šī versija ir vairāki uzlabojumi pēdējos release. Nozīmīgākajām ir spēja tieši rediģēt robots.txt failu. Par pilnu sarakstu ar citiem uzlabojumiem, lūdzu changelog sadaļu zemāk.
Lūdzu Help! Palīdzība interpretāciju vai vienkārši liek domāt, jaunas iespējas, būtu ļoti appreciated. Visi palīdzība tiks atzīta par iestatījumu lapā ar saiti uz jūsu vietni. Lūdzu reģistrēt savu interesi, izmantojot Contact Me lapā vai kā komentāru turpmāk. Paldies.
Ja jūs atrast spraudni noderīga, lūdzu, balsojums par to šeit .
Features
iRobots.txt SEO (IRSEO) ir pilnībā pielāgojama robots.txt virtuālās failu ģenerators. IRSEO rada ļoti optimizēts un drošu robots.txt fails taisni no kastē. Lietotāji var izvēlēties iespējot vai atspējot konkrētu lietotāju aģentiem, direktorijiem vai failus, izmantojot intuitīvu iespējas visiem, kas ietver detalizētas instrukcijas.
Robots.txt fails ir teksta fails, kas atrodas saknes direktoriju vietnē. Tā mērķis ir tiešā lietotāja aģentiem (AKA robotprogrammatūras) attālumā no vai uz konkrētu failu vai direktoriju. Kavējot bot no indeksācija īpašas lapas nodrošinās jūsu mājas lapā joprojām ir atslēgvārdu optimizēta, un visi indeksē lapas, kas atbilst jūsu potenciālajiem klientiem.
IRSEO nomāc arī vairākas WordPress sistēma katalogi un faili pēc noklusējuma. Tādā veidā tiek nodrošināts, ka meklēšanas roboti neietver drošības viedokļa slepenus lapās meklēšanas rezultātiem. Piemēram, meklējot inurl: wp-saturs nosaukuma lieluma apraksts Google izstrādās teritoriju sarakstu ar indeksēti un atklāta satura katalogi.
Ņemiet vērā, ka IRSEO rada virtuālu robots.txt failu. Šis robots.txt fails tiek parādīts ikreiz, kad piekļuve robots.txt fails ir pieprasīta.
Lejupielādēt
Pēdējā versija: 1.1.2
Nepieciešams vismaz: WordPress 2,7
Pārbaudīts līdz 2.9.2
Šis spraudnis var arī ielādēt no WordPress spraudnis repozitorijā .
Jūs esat brīvi izmantot spraudni saskaņā ar noteikumiem, ko GPL .
Piemērs robots.txt failu
| 1 | ################################################## ##### |
| 2 | # IRobots.txt SEO |
| 3 | |
| 4 | # Google Image |
| 5 | User-agent: Googlebot-Image |
| 6 | Atļaut: / |
| 7 | Neatļaut: |
| 8 | |
| 9 | # Google Adsense |
| 10 | User-agent: Mediapartners-Google * |
| 11 | Atļaut: / |
| 12 | Neatļaut: |
| 13 | |
| 14 | # Interneta Archiver Wayback Machine |
| 15 | User-agent: ia_archiver * |
| 16 | Atļaut: / |
| 17 | Neatļaut: |
| 18 | |
| 19 | # Digg Spogulis |
| 20 | User-agent: duggmirror |
| 21 | Neatļaut: / |
| 22 | |
| 23 | # Visi Boti |
| 24 | User-agent: * |
| 25 | Neatļaut: / cgi-bin |
| 26 | Neatļaut: / wp-admin / |
| 27 | Neatļaut: / wp-ietver / |
| 28 | Neatļaut: / wp-saturs / |
| 29 | Neatļaut: / search / * / barības |
| 30 | Neatļaut: / search / * / * |
| 31 | Neatļaut: / *? * |
| 32 | Neatļaut: / *? |
| 33 | Neatļaut: / readme.html |
| 34 | Neatļaut: / license.txt |
| 35 | Neatļaut: / *. php $ |
| 36 | Neatļaut: / *. js $ |
| 37 | Neatļaut: / *. inc $ |
| 38 | Neatļaut: / *. css $ |
| 39 | Neatļaut: / *. gz $ |
| 40 | Neatļaut: / *. wmv $ |
| 41 | Neatļaut: / *. cgi $ |
| 42 | Neatļaut: / *. xhtml $ |
| 43 | Atļaut: / wp-content/uploads / |
| 44 | Atļaut: / *? Lapu =* |
| 45 | |
| 46 | # Lapas karte |
| 47 | Sitemap: http://markbeljaars.com/sitemap.xml.gz |
| 48 | |
| 49 | ################################################## ##### |
| 50 | # |
| 51 | # Robots.txt fails, ko rada iRobots.txt v1.0 SEO |
| 52 | # Mark Beljaars |
| 53 | # |
| 54 | # _ _ _ _ | | _ _ |. _ _ _ _ _ _ _ _ |
| 55 | # | | |(_|| | <|_)(/_||(_|(_|| _ \ .(_(_)| | | |
| 56 | # _ | |
| 57 | # Http://markbeljaars.com/plugins/irobotstxt-seo |
| 58 | # |
| 59 | ################################################## ##### |
| 60 | # |
| 61 | # Piezīme: |
| 62 | # Atļaut direktīvu un aizstājējzīmes (*) ir failu nosaukumi, ir |
| 63 | # Nav standarta robots.txt sintakse, taču tie ir |
| 64 | # Atbalsta vairums jauno meklētājprogrammas. |
Uzstādīšana
- Lejupielādēt spraudni no http://markbeljaars.com/download/current/plugins/irobotstxt-seo.zip .
- Ekstrakta un augšupielādēt spraudnis jūsu
/wp-content/plugins/directory un aktivizēt - Rediģēt spraudnis iestatījumus, izmantojot admin lapā, kas atrodas zem
Settings.
Ekrānšāviņi
Konfigurācija Page
Konfigurācija
Vispārīgās opcijas- Izmantot stingru robots.txt standarta definīciju: ierēdnis robots.txt definīcija , kas īpaši identificē kas direktorijiem vai failus meklētājprogrammas nevar indekss, un neietver nekādu direktīvas par sīki kuri faili meklētājprogrammas var indekss. Google ir paplašinājušas definīciju, lai iekļautu
allowdirektīvu, kā arī ļauj aizstājējzīmes failu nosaukumi. Lai gan tas nav oficiāli atbalstīti, grozītais standarts tiek saprasts ar visvairāk meklētājprogrammas. - Automātiski pievienot mājas sitemap uz robots.txt failu: Sitemaps informē meklētājprogrammas jūsu vietnes struktūru, kā arī ļauj jums novērtēt, cik bieži jūsu lapas mainīsies. Acīmredzot meklētājprogrammas atrast šāda veida informāciju izdevīga. Sitemap protokols definē šeit . Sitemaps var automātiski ražo WordPress plugins, piemēram, Google XML portālkartes Generator .
- Kavē indeksēšanu WordPress sistēmas mapes: WordPress sistēma, mapes, tādas kā spraudnis un saturs direktoriji nav atslēgvārdu optimizēta, un tādēļ to nedrīkst indeksēt ar meklētājprogrammu. Turklāt indeksēšanas sistēmas mapes var radīt drošības risku.
- Neļauj dublēt saturs: WordPress ir daudz veidi, kā attēlot to pašu amatu, tai skaitā ar tagu, pēc kategorijas vai autors. Šķiet, ka Google kā vairākas lappuses ar tādu pašu saturu. Ir apspriests, ka Google nepatīk vietnes ar daudz dublēt saturu, bet, no otras puses, ir arī apspriests, ka Google patīk vietnes ar daudzām lapām. Izmantojiet šo opciju, lai kavētu vai atļaut dažas dublēt saturu.
- Atļaut Google Adsense, lai piekļūtu visu vietā: Google Adsense automātiski nosaka, kuras reklāmas ir saistītas jūsu auditoriju, indeksēšanu saturu jūsu vietnē. Piešķirt Adsense pilnu piekļuvi jūsu vietni var izraisīt mērķtiecīgāk reklāmās. Ignorēt šo iespēju, ja jums nav īstenojušas Adsense.
- Kavē indeksēšanu ar Internet Archive: Internets Arhīvs ir ne bezpeļņas organizācija ar mērķi arhivēt visu informāciju par internetā regulāri. Tas ir spekulējis, ka Google izmanto internetu Arhīvs, lai noteiktu vecumu tīmekļa vietnes, lai palīdzētu noteikt vietnes \ 's iestāde. Daži SEO speciālisti iesaka, ka internets Arhīvs izslēgt no indeksācija jauniešiem mājas lapā. Internet Archive arī rada jautājumus par dokumentu kontroles (veco versiju savu amatu var arhivēt), intelektuālā īpašuma tiesības un privātumu.
- Kavē attēls indeksācija: Jūs varētu vēlēties, lai kavētu meklētājprogrammām no indeksēšanas jūsu attēliem, ja jūsu attēli ir copyright, ir dubiously iegūti (pārkāpj autortiesības), kas nav saistītas ar jūsu vietni vai nav iespējams radīt satiksmes. Affiliate tirgotājiem var arī konstatēt, ka attēlus var radīt neplānotu satiksmi, tādējādi ietekmējot vieta \ 's pārrēķina koeficients.
- Kavē indeksāciju, ko Dugg spogulī: Duggmirror paredz spoguli par populārākajiem stāstiem par Digg.com. Vietām bieži pārslogoti ar summu satiksmes Digg nosūta savu ceļu, izraisot webpage kļūt nepieejams. Lai atvieglotu tā saukto "digg efekts" Duggmirror rīko spoguli no populārākajiem stāstiem padarot tos pieejamus Digg lietotājiem. Problēma ir tā, ka Google var indeksēt DuggMirror lapas pirms avots un inturn vadīt satiksmes no jūsu vietnes spoguli.
Advanced Configuration
Custom ierakstus var pievienot vai dzēst no robots.txt failu, izmantojot šo formu. Pilnīgs saraksts ar lietotāju aģentiem var atrast http://www.user-agents.org/ . Piemēri robot.txt direktīvas virknes (teksts, kas iet pēc atļaut vai neatļaut direktīvas) var atrast http://www.robotstxt.org/robotstxt.html . Google \ 's, kas nav oficiālā pagarinājumi ir sīki aprakstītas šajā blogā post . Ņemiet vērā, ka visi ļautu direktīvas ieraksti un Direktīvu virknes ieskaitot aizstājējzīmes globbing tiks ignorēts, ja Izmantojiet stingri robots.txt standarta definīcija ir izvēlēts.
Skatīt Robots.txt
Skatītu vai rediģētu pilnīga virtuālā robots.txt failu.
- Iespējošana brīvas formas rediģēšanas: Ļauj manuāla rediģēšana robots.txt failu. Piesardzība ir nepieciešama, jo slikti veidojas robots.txt fails var nopietni ietekme meklētājprogrammu klasifikāciju. Ņemiet vērā, ka pēc brīvas formas rediģēšana ir iespējota, izmaiņas vispārējās un uzlabotas konfigurācijas uzstādījumus inhibē. Turklāt, ja brīvā formā ir invalīds, ar roku izmaiņām robots.txt fails, tiks zaudēta.
Biežāk uzdotie jautājumi
Vai iRobots.txt SEO izveidot vai modificēt visus failus?
Nē robots.txt fails serverd ar IRSEO ir virtuālā tikai. Jūsu vietnē būs saglabāt negrozītā versijā, tiklīdz spraudnis ir noņemta.
Kur es varu uzzināt vairāk par robots.txt?
Oficiālā robots.txt informācija vieta ir http://www.robotstxt.org/ . Google robots.txt pagarinājumi ir dokumentēta šeit .
Vai es varu brīvi rediģēt robots.txt failu?
Jā. Sadaļā "Skats robots.txt" admin iestatījumu paneli, atlasiet "Iespējot brīvā formā rediģēšanas" variantu. Jums tagad būs iespēja tieši pārveidot robots.txt failu no šīs rūts.
Pārskatīšana vēsture
1.1.2- Pievienot Baltkrievijas tulkošanas ar Mārcis G . Paldies Mārcis.
- Fiksētie failu tuvu kļūda irseo_file_exists funkcija, kas ir radījusi kļūda par dažiem blogus.
- Pievienots iespēja atļaut vai filtra dublēt saturu.
- Tagad ir iespējams brīvi rediģēt robots.txt failu no iekšpuses spraudnis admin panelis.
- Robots.txt fails tagad ir izsniegts, ja URL ir vai nav "www" prefiksu. URL salīdzinājums tagad ir jūtīgs pret burtu izmēru.
- Pievienots "sitemap.xml.gz", lai robots varētu visiem sadaļā.
- XML Sitemap spraudnis brīdinājuma tagad ir paslēpta, ja virtuālā robots.txt fails tiek izsniegts pareizi.
- Php kods tagad ir pilnībā komentēja.
- Pievienots nonce un admin pārbaudīt visas administrācijas panelis uzstādījumu izmaiņas (drošības nolūkos).
- Pārvietot visas iespējas vienā asociatīvā masīva izraisa mazākas un vieglāk sekot kods ar mazāk prasa, lai iespēju tabulu.
- Fiksētie bug kas pārtrauca admin lapas ielādes uz dažām sistēmām.
- Pievienots "Uzstādījumi" saiti uz spraudnis izvēlni, izmantojot kodu, ko Jay .
- Noņemt PHP5 funkcijas stream_get_contents un aizstāta ar aizmuguri saderīgu fgets, kā ierosināts ar Jay .
- Tagad atklāj klātbūtne XML Sitemap Generator un ja pastāv pastu brīdinājumu, paskaidrojot, ka šis spraudnis rada arī virtuāla robots.txt failu. XML Sitempas ir iespēja atspējošanas robots.txt failu paaudze. Atkal, paldies Jay šo atgriezenisko saiti.
- Fiksētie nosaka, funkciju nosaukumi un i10n virknes pretrunā ar TOCC spraudni.
- Pārveidots admin iestatījumu sadaļa galvenes, lai paplašinātu sadaļu, ja noklikšķinājāt jebkurā vietā galvenes.
- Sākotnējās sabiedriskās atbrīvošanu.
Pateicības
Es vēlos apliecināt vērtīgo palīdzību, ko piedāvā šādi cilvēki:
- Mārcis G. sniegšanai Baltkrievijas tulkojumu failu.
Komentāri
Lūdzu, ļaujiet man zināt, ko tu domā. Atstāt komentāru, ja Jums ir pieprasīts līdzeklis, konstatēja kļūdu, vai vajadzīga neliela palīdzība. Visi ir laipni gaidīti.
30 Atbildes uz "iRobots.txt SEO"
Trackbacks / Pingbacks.
- - 23. Aprīlis, 2010
[...] IRobots.txt SEO: ir pilnībā pielāgojama robots.txt virtuālās failu ģenerators. IRSEO rada ļoti optimizēts un drošu robots.txt fails taisni no kastē. Lietotāji var izvēlēties iespējot vai atspējot konkrētu lietotāju aģentiem, direktorijiem vai failus, izmantojot intuitīvu iespējas visiem, kas ietver detalizētas instrukcijas. [...]
- - 05. Februāris, 2010
[...] IRobots.txt SEO [...]
- - 29. Jan, 2010
Sociālo komentārus un analytics par šo ziņu ...
Šis sūtījums bija minēts par čivināt, ko buildweb: iRobots.txt SEO - MarkBeljaars.com: Dec 9, 2009 ... iRobots.txt SEO ir pilnībā pielāgojama robots.txt Vir .. http://bit.ly/8NVwso # SEO ...
- - 23. Decembris, 2009
[...] IRobots.txt SEO (IRSEO) [...]
- - 13. Decembris, 2009
[...] IRobots.txt SEO (IRSEO) [...]
- - 13. Decembris, 2009
[...] Recomiento probarlo. Descargar iRobots.txt SEO. Compatir con TU [...]
- - 13. Decembris, 2009
[...] Izmantojot intuitīvu iespējas visiem, kas ietver detalizētas instrukcijas. Lejupielādēt un vairāk info at: iRobots.txt SEO - MarkBeljaars.com __________________ Mail [...]
- - 12. Decembris, 2009
[...] IRobots.txt SEO (IRSEO) [...]
- - 12. Decembris, 2009
[...] Wenn Du neu hier bist, möchtest Du vielleicht unseren RSS Feed abonnieren.Powered ar WP sveicināt BoxiRobots.txt SEO von Mark Beljaars ist ein virtuālo robots.txt Datei Creator. Zu den Features des WordPress plug-in [...]
- - 11. Decembris, 2009
[...] SEO 11. Dezember 2009 | Autors: KHK iRobots.txt SEO vo Mark Beljaars ist ein virtial robots.txt Datei Creator. Zu den Features gehören unter [...]
- - 09. Decembris, 2009
[...] Vairāk: iRobots.txt SEO - MarkBeljaars.com Comments0 Leave a Reply Uzklikšķināt šeit, lai atceltu [...]
- - 09. Decembris, 2009
[...] Sīkāka informācija par spraudnis var atrast http://markbeljaars.com/plugins/irobotstxt-seo/ . [...]
Hi esmu nedaudz mulsina par to, kā iRobots.txt SEO darbojas tad, kad Google XML portālkartes spraudnis ir uzstādīta.
Ja iRobots spraudnis ir uzstādīta pēc tam, kad Google XML portālkartes spraudnis, lai portālkartes spraudnis atklāt?
Vai ir potenciāls konfliktu, kas prasa iestatījumus viens no diviem plugins būtu jāmaina? Ja kas uzstādījumus, kuros spraudnis?
Būšu pateicīgs par jebkādām neskaidrībām.
Paldies
Hi Nick,
Vienīgais, Google XML portālkartes tas ir pievienot vienu līniju līdz beigām robots.txt fails norāda uz XML sitemap. Ja jums atslēgt XML portālkartes no pieskaršanās robots.txt fails (ar ķeksīti "Pievienot sitemap URL virtuālo robots.txt fails." Ietvaros XML portālkartes iestatījumi), tad iRobots automātiski pievienotu šo ierakstu, lai jūs, ja tā atklāj, ka Google XML portālkartes spraudnis ir uzstādīta.
Hope this helps,
Zīme.
Čau, Man ir spraudnis uzstādīti un mysite.com / robots.txt parādās labi, bet, kad es noklikšķiniet uz spraudnis uzstādījumus, man WordPress kļūdu lapā, kas vienkārši saka: "Jums nav pietiekamu atļauju, lai piekļūtu šai lapai. "
Jebkurš idejas?
Hi JoJo. Es izmanto nonces kā pievienotās drošības pasākums, lai apturētu XSS uzbrukumiem no groza robots.txt failu. Kā ātri noteikt, jūs varat rediģēt spraudnis PHP failu un izdzēst šādu tekstu (šķiet, vairākas reizes visā kods) ...
& & Check_admin_referer (irseo pārmaiņām-iespējas-nonce)
Tas atslēgt nonces. Es uzskatu, ka tas patiešām dīvaini gan, kā nonces tendence strādāt labi WordPress. Lūdzu, dariet man zināmu, ja tas "nosaka" jūsu problēma.
Paldies,
Zīme.
Hi i ir instalēta jūsu spraudni un aktivizēt, bet meklētājprogrammās nav pārmeklēšanu manā vietā jebkurā lapā, kas ir problēma. Es izmantoju Google tīmekļa meistars rīku es pievienot manu sitemap bet msg šķiet, ka mēs esam ierobežo robot.txt. PLZ man palīdzēt. Mana saiti robotiem un sitemap ir
http://reviewaccounting.com/robots.txt
http://reviewaccounting.com/sitemap.xml.gz
PLZ man pateikt, ko darīt
Es gaidu jūsu atbildi
Atvainojos par novēlotu atbildi. Akismet ir marķētas savu ziņu kā surogātpasts, jo vairākas saites, un es tikai pārbaudīt surogātpasta vēstules reizi nedēļā vai arī tā, pirms es izdzēst.
I pārbauda savu robots.txt failu, un tas izskatās OK. Kas webmaster rīkus, saskaņā ar vietā konfigurācija / kāpurķēžu piekļuvi, izvēlieties tests, lai pārbaudītu savu vietni, lai Googlebot lietotāja aģents. I testē precīzu jūsu robots.txt fails, un tā saka Googlebot ir atļauts pārmeklēt vietni.
Ja jums ir aizdomas spraudnis ir izraisa jums problēmas, de-aktivizētu spraudnis un redzēt vai problēma joprojām ir. Tas ir pilnīgi OK, lai nebūtu robots.txt failu, bet Google indekss visiem jūsu admin lapas uc
Ierobežota piekļuve var izraisīt arī jūsu. Htaccess fails.
Zīme.
Hi zīme,
Man ir instalēta jūsu spraudni, bet nevar redzēt nekur avots.
Ja es neredzu tas tas nozīmē, ka tas nedarbojas?
Hi Natalie,
Vai jūs varat izskaidrot šo mazliet vairāk? Vai jums ir iRobots.txt iespējas admin uzstādījumus rūts? Jūs varat pārbaudīt, vai spraudnis strādā, ierakstot šādus aspektus pārlūkprogrammā:
http://yoururl/robots.txt
Piemēram, mana vietnes robots.txt fails atrodas: http://markbeljaars.com/robots.txt .
Ja robots.txt fails nepastāv, varētu būt trīs iespējamie iemesli:
1. Spraudnis neizdevās instalēt kādu iemeslu dēļ. Noņemt iepriekšējā instalēt pēc tam mēģiniet lejupielādēt no mana vietā. Pēc tam izvēlieties plugins / pievienot jaunus no admin paneļa un noklikšķiniet uz Augšupielādēt saiti. Augšupielādēt zip fails un aktivizēt.
2. Jūsu tēma ir sevišķas virtuāla failu pieprasījumi.
3. Jūsu. Htaccess fails bloķē robots.txt failu.
Zīme.
Mark,
Es tikko instalēta jūsu spraudnis un man šādu kļūdu.
Brīdinājums: fclose (): piegādā arguments nav derīgs plūsma resurss / Library / servera / Dokumenti / xxxxxxx / wp-saturs / plugins / irobotstxt-SEO / irobotstxt-seo.php par 322 līnijas
Running WP 2.9.1. Jebkurš idejas?
Andy
Hi Andy,
Es neesmu redzējis šo kļūdu līdz šim. Kas versiju PHP jūs darbojas? Ja Jums ir laimīgs rediģēšanu PHP failus, jūs varat vienkārši izdzēst šo līniju, un spraudnis jāsāk strādāt (jo PHP, faili tiek slēgts automātiski, ja programmētājs aizmirst tuvu tiem). Jebkurā gadījumā, es noteikt kods šovakar (Austrālijas laika) un augšupielādēt jaunu pārskatīšanu.
Zīme.
Hi Andy,
Es tikko izlaidusi atjauninājumu, kas nosaka šo kļūdu un pievieno jaunu papildiespēju neatļaut dublēt saturu. Cerams, ka tā darbojas OK, lai jūs tagad.
Zīme.
Čau, Man ir viens jautājums, kad es izmantot jūsu spraudnis un izveidot robots.txt failu, jūsu spraudnis augšupielādēt to mājas direktoriju, vai man ir kopēt failu un augšupielādējiet to caur http://FTP. .
Paldies, vislabākā robots.txt spraudnis līdz šim.
Hi Jadah,
Robots.txt fails ir faktiski virtuāla failu. Šis spraudnis atklāj tad, kad kāds (vai somebot) cenšas parādīt http://www.website/robots.txt failu un pārtver šo pieprasījumu. Spraudnis tad vietā rezultātiem tekstu plūsmā, kas padara to izskatās fails tiek nosūtīts. Šādā veidā ir notihing jums augšupielādēt. Arī visām izmaiņām robots.txt failu, ir nekavējoties atspoguļojas. Ir viens nozveju ar šo metodi though. Ja fiziskā robots.txt fails nepastāv (ti, viens, ka Jums ir FTP augšupielādējis), tad tas vienmēr būs redzams, nevis virtuālo failu. Tas nozīmē, ka jums būs nepieciešams, lai dzēstu (vai pārdēvēt) jebkura fiziska robots.txt failus, izmantot šo spraudni.
Hope this helps,
Zīme.
Man ir viens jautājums. Es pamanīju manā Google Webmaster Tools kontam, Google nevar piekļūt ar "sitemap.xml.gz" failu, jo tā ir ierobežota ar robots.txt failu genrated jūsu spraudni. (Mans portālkartes ģenerē "Google XML portālkartes" spraudnis un "Pievienot sitemap uz virtuālo robots.txt" ir nekontrolēti, kā jūs uzdot).
Pārbaudi tekstu radīto robots.txt failu sarakstu vietu sitemap kā "just-thinkin.net/sitemap.xml.gz" (Man ir gan "sitemap.xml" un "sitemap.xml.gz" manā root direktorijā), tomēr tas bloķē piekļuvi šim ļoti sitemap ar ierakstu "Neatļaut: / *. gz $".
Lai gan Google var piekļūt mans "sitemap.xml" fails labi Es joprojām sajaukt par to, kāpēc sitemap vietu uzskaitīti radīto robots.txt ir mērķtiecīgi bloķētas visas robotprogrammatūras, tajā pašā laikā. Vai tas tiešām, kā lietas ir paredzēts strādāt? Google vienmēr bija iespējams piekļūt gan portālkartes, izmantojot manu veco manuālo robots.txt (vecā bija problēma ar derīgumu, ka es nekad nevarētu izsekot).
Paldies par naudas soda spraudnis BTW.
Hi Kirk. Great detektīvs darbu! Jūs, protams, pilnīgi pareizi. Neatļaut nav apturēt jebkuru. Gz failus no pārmeklēts. Iemesls. Gz failus parasti neattaisno ir nodrošināt, ka backup faili (GZ tiek pagarinājumu izmanto saspiestu failus) netiek indeksēta. Es noteikt šo konfliktu nākamā release. Tas būtu jāmaksā mazāk par nedēļu, un ļaus brīvas formas rediģēšanu izrietošo robots.txt failu.
Pagaidām Jūs varat noteikt šo, atverot iRobots SEO iestatījumu lapā un izvēloties "Advanced Configuration". In User Agent teksta lodziņā "*". Izvēlieties "atļauj", kas pull uz leju un tips "/ sitemap.xml.gz" in tekstlodziņā blakus Nolaižamo. Visbeidzot nospiediet "Pievienot Custom Record" pogu.
Kad jūs apskatīt rezultātā robots.txt failu, jums vajadzētu redzēt pāris līnijas, piemēram, šādi:
# Custom RecordsUser-agent: *
Allow: /sitemap.xml.gz
Hope this helps.
Liela, un paldies par darbu pie jaunā release. Esmu pievienotās pasūtījuma ierakstu. Darbi naudas sodu.
Es atbalstu jūs, vislabāk, ja tas var ļaut brīvi rediģēšana ..
Laba ideja Sevi. Būs pievienot brīvu rediģēšanu uz nākamo izlaišanas.
Zīme.