Quarta-feira, Agosto 20, 2008

Alguns termos muito utilizados por webmasteres

Indexar

O processo de adicionar o conteúdo do seu portal em um mecanismo de pesquisa.

Camuflagem

Mostrar aos mecanismos de pesquisa conteúdo diferente do que mostra aos utilizadores.

Conteúdo dinâmico

Conteúdo, como imagens, animações ou vídeos, que conta com o Flash, JavaScript, frames ou URLs criados dinamicamente.

Diretório raiz

O principal diretório ou diretório superior num sistema de arquivos de computador.

Extensão de arquivo

Nome de um arquivo de computador (.doc, .txt, .pdf, etc.) frequentemente utilizado para indicar o tipo de dados armazenados.

HTML (Hypertext Markup Language)

Linguagem de marcação utilizada na Web para estruturar o texto.

Link em cache

Um instantâneo de como uma página foi exibida aquando a última vez que o Google a acedeu. Uma cópia em cache permite que os utilizadores visualizem uma página quando a versão dinâmica não estiver disponível, embora o conteúdo possa ser ligeiramente diferente. Para visualizar uma cópia em cache, clique no link "em cache" que aparece abaixo de um resultado de pesquisa.

Meta tags

Uma tag no HTML que descreve o conteúdo de uma página da Web. As meta tags podem ser utilizadas para controlar a indexação de páginas individuais de um portal.

Page Rank

Um recurso do Google que ajuda a definir o posicionamento de um portal nos resultados de pesquisa do Google. O PageRank conta com a natureza exclusivamente democrática da Web ao utilizar a sua vasta estrutura de links como um indicador do valor de uma página individual. Ainda mais importante é que os portais de alta qualidade recebem um PageRank superior, que é tido em conta sempre que o Google realiza uma pesquisa. O Google combina o PageRank com técnicas sofisticadas de correspondência de texto, a fim de encontrar páginas que sejam importantes e relevantes para as pesquisas.

Palavra-chave

Um termo que é inserido na caixa de pesquisa de um mecanismo de pesquisa. O mecanismo de pesquisa então pesquisa páginas que incluam a palavra-chave ou frase.

Protocolo de exclusão de robôs

Uma especificação técnica que dá indicação aos mecanismos de pesquisa de que portais ou partes de um portal não devem ser pesquisáveis, e quais as partes que devem permanecer visíveis nos resultados de pesquisa.

Rastreador

Software utilizado para detectar e indexar URLs na Web ou numa intranet.

Rastreio

Processo utilizado pelos mecanismos de pesquisa para aceder a páginas da Web.

Robots.txt

Um arquivo de texto que permite que um editor da Web controle o acesso ao seu XOOPS em vários níveis, desde o XOOPS completo a diretórios individuais, páginas de um tipo específico ou até mesmo páginas individuais. Este arquivo mostra aos rastreadores quais os diretórios que eles podem ou não rastrear.

SGC, Sistema de gestão de conteúdo (CMS, Content Management System)

Sistema de software utilizado para gerir o conteúdo a partir de arquivos do computador, de imagem e som para o conteúdo da Web. No nosso caso, o XOOPS Cube.

Site espelhado

Uma página da Web duplicada; às vezes, utilizada para enganar os mecanismos de pesquisa e tentar optimizar a indexação e a classificação na Web de um portal.

URL (Uniform Resource Locator)

O endereço de um elemento na Internet, o qual consiste no protocolo de acesso (http), nome de domínio (www.xoopscube.com.br) e, em alguns casos, a localização de outro arquivo (www.xoopscube.com.br/blogger.php).

Marcadores: node, robots.txt, seo, webdev, webmaster, xoops, xoopscube.com.br

postado por mikhail # 6:35 PM 0 Comentários Links para esta postagem

Segunda-feira, Maio 05, 2008

Turbinando o robots.txt

Abaixo, nova versão do robots.txt utilizado pelo xoops brasil. Confira aqui a versão anterior, aqui para conferir todas as versões deste arquivo, e aqui para a versão atual. Trata-se de apenas um brainstorm para a criação de um robots.txt mais avançado, complexo, ideal. Mas confesso que não estou seguro que estas configurações estejam livres de falha... Ou seja, se desejar, use por sua conta e risco. :-)

O Código:


# XOOPS CUBE BRASIL - ROBOTS.TXT
# ------------------------------------------------------------------------------
# Robots like Google and Yahoo! understand the 2.0 specs of robots.txt,
# so we can allow them a bit more freedom about what to do.
# ------------------------------------------------------------------------------


User-agent: Googlebot

Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /cgi/
Disallow: /core/
Disallow: /install/
Disallow: /kernel/
Disallow: /language/
Disallow: /preload/
Disallow: /settings/
Disallow: /temp/
Disallow: /templates_c/
Disallow: /tmp/

Disallow: /class/
Allow: /class/*.js
Allow: /class/*.gif
Allow: /class/*.jpg
Allow: /class/*.png
Allow: /class/*.swf

Disallow: /Frameworks/
Allow: /Frameworks/*.js
Allow: /Frameworks/*.gif
Allow: /Frameworks/*.jpg
Allow: /Frameworks/*.png
Allow: /Frameworks/*.swf

Disallow: /include/
Allow: /include/*.css
Allow: /include/*.js

Disallow: /*?PHPSESSID=
Disallow: /*?xoops_session=

Disallow: /index.php
Disallow: /admin.php
Disallow: /avatar.php
Disallow: /banners.php
Disallow: /edituser.php
Disallow: /footer.php
Disallow: /header.php
Disallow: /image.php
Disallow: /imagemanager.php
Disallow: /lostpass.php
Disallow: /mainfile.dist.php
Disallow: /mainfile.php
Disallow: /misc.php
Disallow: /modules/*/admin/
Disallow: /notifications.php
Disallow: /pmlite.php
Disallow: /readpmsg.php
Disallow: /register.php
Disallow: /user.php
Disallow: /viewpmsg.php

Disallow: /modules/legacy/
Disallow: /modules/legacyRender/
Disallow: /modules/pm/
Disallow: /modules/stdCache/
Disallow: /modules/system/
Disallow: /modules/tellafriend/


# XIGG
Disallow: /modules/*/*/voteform
Disallow: /modules/*/index.php/submit


# Disallow: /modules/*/*order=DESC

Disallow: /modules/*/*page=newtopic
Disallow: /modules/*/*page=print
Disallow: /modules/*/*page=reply
Disallow: /modules/*/action.transfer.php
Disallow: /modules/*/actions/print.php
Disallow: /modules/*/admin/
Disallow: /modules/*/broken.php
Disallow: /modules/*/brokenfile.php
Disallow: /modules/*/brokenlink.php
Disallow: /modules/*/brokenmovie.php
Disallow: /modules/*/class/
Disallow: /modules/*/deletefile.php
Disallow: /modules/*/email.php
Disallow: /modules/*/include/
Disallow: /modules/*/includes/
Disallow: /modules/*/index.php?page=brokenfile
Disallow: /modules/*/index.php?page=modfile
Disallow: /modules/*/index.php?page=ratefile
Disallow: /modules/*/index.php?page=visit
Disallow: /modules/*/language/
Disallow: /modules/*/modfile.php
Disallow: /modules/*/myheader.php
Disallow: /modules/*/print.php
Disallow: /modules/*/ratefile.php
Disallow: /modules/*/ratelink.php
Disallow: /modules/*/ratenews.php
Disallow: /modules/*/report.php
Disallow: /modules/*/review.php
Disallow: /modules/*/sql/
Disallow: /modules/*/tell_a_friend.php
Disallow: /modules/*/visit.php


# REVER:
# Disallow: /common/

# CONTEÚDO DUPLICADO PELO APACHE
# DUPLICATE CONTENT FROM APACHE

Disallow: /*?D=A
Disallow: /*?D=D
Disallow: /*?M=A
Disallow: /*?M=D
Disallow: /*?N=A
Disallow: /*?N=D
Disallow: /*?S=A
Disallow: /*?S=D

# REVER:
# Disallow: /*?sort=date
# Disallow: /*?sort=name
# Disallow: /*?sort=size

# CONTORNAR BLACK SEO / AVOID BLACK SEO
# Disallow: /*.php?*%20
# Disallow: /*.php?*%22
Disallow: /*.php?*http://
Disallow: /*.php?*www.*.*

User-agent: wget
Disallow: /*.php
Disallow: /*.htm

User-agent: sitecheck.internetseer.com
Disallow: /

User-agent: Zealbot
Disallow: /

User-agent: SiteSnagger
Disallow: /

User-agent: WebStripper
Disallow: /

User-agent: WebCopier
Disallow: /

User-agent: Fetch
Disallow: /

User-agent: Offline Explorer
Disallow: /

User-agent: Teleport
Disallow: /

User-agent: TeleportPro
Disallow: /

User-agent: WebZIP
Disallow: /

User-agent: linko
Disallow: /

User-agent: HTTrack
Disallow: /

User-agent: Xenu
Disallow: /

User-agent: larbin
Disallow: /

User-agent: ZyBORG
Disallow: /

User-agent: Download Ninja
Disallow: /

User-agent: grub-client
Disallow: /

User-agent: k2spider
Disallow: /

User-agent: NPBot
Disallow: /

User-agent: WebReaper
Disallow: /


User-agent: *

Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /cgi/
Disallow: /core/
Disallow: /install/
Disallow: /kernel/
Disallow: /language/
Disallow: /preload/
Disallow: /settings/
Disallow: /temp/
Disallow: /templates_c/
Disallow: /tmp/

Disallow: /class/
Allow: /class/*.js
Allow: /class/*.png
Allow: /class/*.gif
Allow: /class/*.jpg

Disallow: /include/
Allow: /include/*.css
Allow: /include/*.js

Disallow: /Frameworks/
Allow: /Frameworks/*.js
Allow: /Frameworks/*.gif
Allow: /Frameworks/*.jpg
Allow: /Frameworks/*.png
Allow: /Frameworks/*.swf


User-agent: ia_archiver
Disallow:
Allow: /

# MEDIA BOTS

# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /

# MSN Live Bot-media
User-agent: MSNBot-media
Disallow:
Allow: /

# EOF

Marcadores: node, robots.txt, seo, servidor, webdev, xoops

postado por mikhail # 1:34 PM 0 Comentários Links para esta postagem

Arquivos

05/15/05 01/19/06 01/27/06 05/11/07 09/21/07 02/19/08 03/27/08 03/28/08 03/29/08 03/30/08 03/31/08 04/01/08 04/14/08 04/15/08 04/16/08 04/22/08 04/24/08 04/25/08 05/01/08 05/04/08 05/05/08 05/06/08 05/09/08 05/10/08 05/11/08 05/14/08 05/21/08 06/08/08 08/13/08 08/16/08 08/19/08 08/20/08 10/10/08 10/12/08 11/10/08

XOOPS Cube é um sistema de gerenciamento e publicação de conteúdo para a criação de portais, comunidades virtuais, fotologs, weblogs, videologs, etc. Pode ser gerenciado por qualquer pessoa sem conhecimento em programação, e representa a solução ideal para quem não pode ou não quer depender de terceiros para criar e administrar o seu próprio portal. Possui milhares de recursos de redação, edição e publicação de conteúdo já incorporados e a custo zero!

Assinar Postagens [Atom]

XOOPS Cube Weblog

Alguns termos muito utilizados por webmasteres

Turbinando o robots.txt

Quarta-feira, Agosto 20, 2008

Alguns termos muito utilizados por webmasteres

Segunda-feira, Maio 05, 2008

Turbinando o robots.txt

Arquivos