Pagina 5 din 7 PrimulPrimul ... 34567 UltimulUltimul
Rezultate 41 la 50 din 64

Subiect: Despre Robots.txt

  1. #41
    Avatarul lui gemanaru
    gemanaru este deconectat Membru SeoPedia
    Reputatie:
    24
    Data înscrierii
    23rd May 2008
    Vârstă
    45
    Posturi
    111
    Putere Rep
    24


    Implicit

    Omule ma intereseaza in mod deosebit acest fisier robots.txt .Pentru ca VREAU sa ma indexeze si pe mine google

    Da, trebuie sa recunosc ca am un site care vreau sa mi-l indexeze .

    Adresa este : tomistravel.ro
    Am 2 siteuri in turism : Tomis Travel si Oferte Antalya

  2. #42
    Avatarul lui w!ll
    w!ll este deconectat Ambasador
    Reputatie:
    29
    Data înscrierii
    9th January 2007
    Locaţie
    Bucuresti
    Posturi
    1.389
    Putere Rep
    29


    Implicit

    Pentru inceput ar trebui sa inlocuiesti acel redirect din metataguri, cu redirect 301 si lasa robots.txt in pace

  3. #43
    Avatarul lui sovidiu
    sovidiu este deconectat Ambasador
    Reputatie:
    25
    Data înscrierii
    13th September 2007
    Posturi
    58
    Putere Rep
    25


    Implicit

    Pune totusi ceva cu inteles in robots.txt. Momentan, acolo ai:

    ------------
    User-agent: *

    Sitemap: http://www.numele_site-ului_tau.ro/sitemap.xml
    ------------

    User-agent ce?

    Pe randul de sub "User-agent: *" poti pune:

    # indexeaza tot
    Allow: /


    sau

    # indexeaza tot
    Allow: /

    # nu indexa folder-ul "personal"
    Disallow: /personal/

    # nu indexa fisierul "personal.html"
    Disallow: /personal.html

    # nu indexa foldere sau fisiere ce incep cu structura "personal"
    Disallow: /personal



    In Google Webmaster Tools ai pe undeva pe-acolo un generator de fisier robots.txt si o sectiune unde sa verifici daca ai un robots.txt valid.

    Completeaza si formularul de pe Alexa.com si adauga datele si intr-un fisier info.txt accesibil la numele_site-ului_tau.ro/info.txt

  4. #44
    Avatarul lui d_alinus2004
    d_alinus2004 este deconectat Junior SeoPedia
    Reputatie:
    0
    Data înscrierii
    2nd April 2009
    Posturi
    74
    Putere Rep
    0


    Implicit

    foarte bun topicu asta despre robots.txt in sfarsit m'am luminat si eu..

  5. #45
    Avatarul lui Dude
    Dude este deconectat Membru SeoPedia
    Reputatie:
    26
    Data înscrierii
    21st December 2006
    Locaţie
    Bucuresti
    Posturi
    60
    Putere Rep
    26


    Implicit

    In cat timp pot vedea rezultatele (paginile scoase din goolge) dupa ce pun regulile in robots.txt ? Am niste pagini "interzise" mentionate in robots.txt care inca apar in rezultate la 2 zile dupa editarea fisierului.

  6. #46
    Avatarul lui BladHaund
    BladHaund este deconectat Membru SeoPedia
    Reputatie:
    27
    Data înscrierii
    30th October 2006
    Vârstă
    40
    Posturi
    159
    Putere Rep
    27


    Implicit

    Ca sa mearga mai repede, poti sa o faci pentru Google si din webmaster tools: Tools->Remove URLs.

    Dar:
    We try to complete this process in 3-5 business days, though large-scale URL removal requests will take longer.

  7. #47
    Avatarul lui Dude
    Dude este deconectat Membru SeoPedia
    Reputatie:
    26
    Data înscrierii
    21st December 2006
    Locaţie
    Bucuresti
    Posturi
    60
    Putere Rep
    26


    Implicit

    Ok. Atunci astept in continuare rezultatele.

  8. #48
    Avatarul lui eNoston
    eNoston este deconectat Membru SeoPedia
    Reputatie:
    22
    Data înscrierii
    29th March 2009
    Locaţie
    Ploiesti
    Vârstă
    40
    Posturi
    52
    Putere Rep
    22


    Implicit Unsafe robots to keep away

    Sper sa va fie de folos (se adauga la robots.txt)

    ###
    #Unsafe robots to keep away
    ###
    User-agent: QihooBot
    Disallow: /

    User-agent: OmniExplorer_Bot
    Disallow: /

    User-agent: TMCrawler
    Disallow: /

    User-agent: exabot
    Disallow: /

    User-agent: tm.net.my
    Disallow: /

    User-agent: Twiceler
    Disallow: /

    User-agent: mj12bot
    Disallow: /

    User-agent: asterias
    Disallow: /

    User-agent: Jyxobot/1
    Disallow: /

    User-agent: BackDoorBot/1.0
    Disallow: /

    User-agent: Black Hole
    Disallow: /

    User-agent: BotALot
    Disallow: /

    User-agent: BuiltBotTough
    Disallow: /

    User-agent: Bullseye/1.0
    Disallow: /

    User-agent: CopyRightCheck
    Disallow: /

    User-agent: DittoSpyder
    Disallow: /

    User-agent: EmailCollector
    Disallow: /

    User-agent: EmailSiphon
    Disallow: /

    User-agent: EmailWolf
    Disallow: /

    User-agent: EroCrawler
    Disallow: /

    User-agent: ExtractorPro
    Disallow: /

    User-agent: FairAd Client
    Disallow: /

    User-agent: Flaming AttackBot
    Disallow: /

    User-agent: Foobot
    Disallow: /

    User-agent: Gaisbot
    Disallow: /

    User-agent: grub
    Disallow: /

    User-agent: grub-client
    Disallow: /

    User-agent: Harvest/1.5
    Disallow: /

    User-agent: hloader
    Disallow: /

    User-agent: InfoNaviRobot
    Disallow: /

    User-agent: Iron33/1.0.2
    Disallow: /

    User-agent: JennyBot
    Disallow: /

    User-agent: larbin
    Disallow: /

    User-agent: LexiBot
    Disallow: /

    User-agent: LinkextractorPro
    Disallow: /

    User-agent: LinkScan/8.1a Unix
    Disallow: /

    User-agent: LinkWalker
    Disallow: /

    User-agent: LNSpiderguy
    Disallow: /

    User-agent: lwp-trivial
    Disallow: /

    User-agent: lwp-trivial/1.34
    Disallow: /

    User-agent: Mata Hari
    Disallow: /

    User-agent: Mister PiX
    Disallow: /

    User-agent: Offline Explorer
    Disallow: /

    User-agent: Openbot
    Disallow: /

    User-agent: Openfind
    Disallow: /

    User-agent: Openfind data gathere
    Disallow: /

    User-agent: Oracle Ultra Search
    Disallow: /

    User-agent: SiteSnagger
    Disallow: /

    User-agent: SpankBot
    Disallow: /

    User-agent: spanner
    Disallow: /

    User-agent: Titan
    Disallow: /

    User-agent: True_Robot
    Disallow: /

    User-agent: True_Robot/1.0
    Disallow: /

    User-agent: turingos
    Disallow: /

    User-agent: URL Control
    Disallow: /

    User-agent: URL_Spider_Pro
    Disallow: /

    User-agent: URLy Warning
    Disallow: /

    User-agent: VCI
    Disallow: /

    User-agent: VCI WebViewer VCI WebViewer Win32
    Disallow: /

    User-agent: Web Image Collector
    Disallow: /

    User-agent: WebAuto
    Disallow: /

    User-agent: WebBandit
    Disallow: /

    User-agent: WebBandit/3.50
    Disallow: /

    User-agent: WebCopier
    Disallow: /

    User-agent: WebEnhancer
    Disallow: /

  9. #49
    Avatarul lui eNoston
    eNoston este deconectat Membru SeoPedia
    Reputatie:
    22
    Data înscrierii
    29th March 2009
    Locaţie
    Ploiesti
    Vârstă
    40
    Posturi
    52
    Putere Rep
    22


    Implicit auditmypc.com

    eu folosesc auditmypc.com ca sa fac sitemap-ul site-ului. cu ajutorul lui vad si de ex. daca folderul themes sau alt folder ex images e indexabil,

    daca nu le vreau indexabile le adaug la robots.txt

    Disallow: /sectiuni care nu se doresc indexate/

  10. #50
    Avatarul lui CODEX
    CODEX este deconectat Junior SeoPedia
    Reputatie:
    0
    Data înscrierii
    16th April 2009
    Posturi
    71
    Putere Rep
    0


    Implicit

    pentru un forum gen vbulletin trebuie facut ceva altfel sau se face ca la orice site normal ?

Pagina 5 din 7 PrimulPrimul ... 34567 UltimulUltimul

Informații subiect

Utilizatori care navighează în acest subiect

Momentan este/sunt 1 utilizator(i) care navighează în acest subiect. (0 membrii și 1 vizitatori)

Thread-uri Similare

  1. Google si robots.txt
    De NetraKID în forumul Google
    Răspunsuri: 1
    Ultimul Post: 6th February 2008, 20:42
  2. robots.txt unreachable
    De alecs în forumul Google
    Răspunsuri: 0
    Ultimul Post: 3rd October 2007, 03:02
  3. robots.txt
    De cris în forumul Discutii generale privind optimizarea si motoarele de cautare
    Răspunsuri: 1
    Ultimul Post: 5th August 2007, 21:08
  4. meta name= robots
    De prodan_13 în forumul Client side
    Răspunsuri: 2
    Ultimul Post: 19th January 2007, 12:03
  5. robots.txt
    De brahma în forumul Discutii generale privind optimizarea si motoarele de cautare
    Răspunsuri: 2
    Ultimul Post: 31st July 2005, 01:25

Permisiuni postare

  • Nu puteţi posta subiecte noi.
  • Nu puteţi răspunde la subiecte
  • Nu puteţi adăuga ataşamente
  • Nu puteţi modifica posturile proprii
  •