Com poden cercar, rastrejar i indexar els vostres continguts els motors de cerca?

No recomano sovint als clients que creïn els seus propis sistemes de gestió de continguts o de comerç electrònic a causa de les opcions d'extensibilitat inèdites que necessiten avui dia, centrades principalment en la cerca i l'optimització social. Vaig escriure un article sobre seleccionant un CMS, i encara ho mostro a les empreses amb les quals treballo que estan temptades de construir el seu sistema de gestió de continguts.

Com funcionen els motors de cerca?

Comencem amb com funcionen els motors de cerca. Aquí teniu una visió general fantàstica de Google.

Tanmateix, hi ha absolutament situacions en què una plataforma personalitzada és una necessitat. Quan aquesta és la solució òptima, segueixo impulsant els meus clients a crear les funcions necessàries per optimitzar els seus llocs per a la cerca i les xarxes socials. Tres característiques clau són una necessitat.

• robots.txt
• XML Sitemap
• Metadades

Què és un fitxer Robots.txt?

robots.txt fitxer - el fitxer robots.txt El fitxer és un fitxer de text senzill al directori arrel del lloc i indica als motors de cerca què han d'incloure i excloure dels resultats de la cerca. En els darrers anys, els motors de cerca també han sol·licitat que incloguis el camí a un mapa del lloc XML dins del fitxer. Aquí teniu un exemple meu, que permet a tots els robots rastrejar el meu lloc i també els dirigeix ​​al meu mapa del lloc XML:

User-agent: *
Sitemap: https://martech.zone/sitemap_index.xml

Què és un mapa del lloc XML?

XML Sitemap - M'agrada HTML és per a la visualització en un navegador, XML s'escriu per ser digerit mitjançant programació. An XML El mapa del lloc és una taula de totes les pàgines del vostre lloc i quan es va actualitzar per última vegada. Els mapes del lloc XML també es poden connectar en cadena... és a dir, un mapa del lloc XML pot fer referència a un altre. Això és fantàstic si voleu organitzar i desglossar els elements del vostre lloc de manera lògica (Preguntes freqüents, pàgines, productes, etc.) als seus propis mapes del lloc.

Els mapes del lloc són essencials per permetre als motors de cerca saber quin contingut heu creat i quan es va editar per darrera vegada. El procés d'un motor de cerca quan va al vostre lloc no és efectiu sense implementar un mapa del lloc i fragments.

Sense un mapa del lloc XML, corres el risc de que les teves pàgines no siguin descobertes mai. Què passa si teniu una pàgina de destinació de producte nova que no està enllaçada ni internament ni externament? Com ho descobreix Google? Bé, fins que no es trobi un enllaç, no se't descobreix. Afortunadament, els motors de cerca permeten que els sistemes de gestió de continguts i les plataformes de comerç electrònic puguin desplegar-los una catifa vermella.

1. Google descobreix un enllaç extern o intern al vostre lloc.
2. Google indexa la pàgina i la classifica segons el seu contingut i el contingut i la qualitat del lloc de l'enllaç de referència.

Amb un mapa del web XML, no deixeu a l'atzar el descobriment o l'actualització del vostre contingut! Massa desenvolupadors intenten prendre dreceres que també els perjudiquen. Publiquen el mateix fragment enriquit a tot el lloc, proporcionant informació que no és rellevant per a la informació de la pàgina. Publiquen un mapa del lloc amb les mateixes dates a cada pàgina (o totes s'actualitzen quan una pàgina s'actualitza), donant cues als motors de cerca que juguen al sistema o no són fiables. O no fan ping als motors de cerca... de manera que el motor de cerca no s'adona que s'ha publicat nova informació.

Què són les metadades? Microdades? Fragments rics?

Els fragments rics estan microdades acuradament etiquetades ocult per a l'espectador, però visible a la pàgina perquè els utilitzin els motors de cerca o els llocs de xarxes socials. Això es coneix com a metadades. Google s'ajusta a Schema.org com a estàndard per incloure coses com ara imatges, títols, descripcions i una gran quantitat d'altres fragments informatius com ara el preu, la quantitat, la informació d'ubicació, les puntuacions, etc. L'esquema millorarà significativament la visibilitat del vostre motor de cerca i la probabilitat que un usuari faci clic.

Facebook utilitza el fitxer OpenGraph protocol (per descomptat, no podrien ser els mateixos), X fins i tot té un fragment per especificar el vostre perfil X. Cada cop més plataformes utilitzen aquestes metadades per previsualitzar els enllaços incrustats i altra informació quan publiquen.

Les vostres pàgines web tenen un significat subjacent que la gent entén quan llegeix les pàgines web. Però els motors de cerca tenen una comprensió limitada del que es discuteix en aquestes pàgines. Si afegiu etiquetes addicionals a l'HTML de les vostres pàgines web (etiquetes que diuen "Ei motor de cerca, aquesta informació descriu aquesta pel·lícula, lloc, persona o vídeo"), podeu ajudar els motors de cerca i altres aplicacions a entendre millor el vostre contingut. i mostrar-lo d'una manera útil i rellevant. Microdades és un conjunt d’etiquetes, introduït amb HTML5, que us permet fer-ho.

Schema.org, què és MicroData?

Per descomptat, no es requereix cap d’aquestes ... però les recomano. Quan compartiu un enllaç a Facebook, per exemple, i no aparegui cap imatge, títol o descripció ... poques persones estaran interessades i realment hi faran clic. I si els vostres fragments d’esquema no es troben a cada pàgina, és clar que encara podeu aparèixer als resultats de la cerca ... però els competidors us poden guanyar quan tinguin informació addicional.

Registreu els vostres mapes del lloc XML a Search Console

Si heu creat el vostre propi contingut o plataforma de comerç electrònic, és imprescindible que tingueu un subsistema que faci ping als motors de cerca, publiqui microdades i, a continuació, proporcioni un mapa del lloc XML vàlid per trobar el contingut o la informació del producte.

Una vegada que el vostre fitxer robots.txt, els mapes del lloc XML i els fragments enriquits estiguin personalitzats i optimitzats al vostre lloc, no us oblideu de registrar-vos a cada motor de cerca. Cerca Consola (també conegut com el Webmaster eina) on podeu controlar la salut i la visibilitat del vostre lloc als motors de cerca. Fins i tot podeu especificar la ruta del vostre mapa del lloc si no n'hi ha cap i veure com l'està consumint el motor de cerca, si hi ha problemes o no, i fins i tot com corregir-los.

Desplegueu la catifa vermella als motors de cerca i a les xarxes socials, i trobareu que el vostre lloc es classifica millor, les vostres entrades a les pàgines de resultats del motor de cerca es fan clic a més i les vostres pàgines s'han compartit més a les xarxes socials. Tot suma!

Com funcionen junts Robots.txt, mapes del lloc i MetaData

Combinar tots aquests elements és com desplegar la catifa vermella del vostre lloc. Aquí teniu el procés de rastreig que fa un bot i com el motor de cerca indexa el vostre contingut.

1. El vostre lloc té un fitxer robots.txt que també fa referència a la vostra ubicació del mapa del lloc XML.
2. El vostre sistema CMS o de comerç electrònic actualitza el mapa del lloc XML amb qualsevol pàgina i publica la data o edita la informació.
3. El vostre CMS o sistema de comerç electrònic fa ping als motors de cerca per informar-los que el vostre lloc s'ha actualitzat. Podeu fer-los ping directament o utilitzar RPC i un servei com Ping-o-matic per enviar-los a tots els motors de cerca clau.
4. El motor de cerca torna a l'instant, respecta el fitxer Robots.txt, troba pàgines noves o actualitzades mitjançant el mapa del lloc i després indexa la pàgina.
5. Quan indexeu la vostra pàgina, utilitza el títol, la meta descripció, els elements HTML5, els encapçalaments, les imatges, les etiquetes alternatives i altra informació per indexar correctament la pàgina per a les cerques aplicables.
6. Quan indexeu la vostra pàgina, utilitza el títol, la metadescripció i les microdades de fragments enriquits per millorar la pàgina de resultats del motor de cerca.
7. A mesura que altres llocs rellevants enllacen amb el vostre contingut, el vostre contingut es classifica millor.
8. A mesura que el vostre contingut es comparteix a les xarxes socials, la informació del fragment enriquit especificat pot ajudar a previsualitzar correctament el vostre contingut i dirigir-lo al vostre perfil social.