Artikelen over zoekmachine optimalisatie

In de afgelopen jaren is het Google link: command dè manier om te achterhalen welke links er verwijzen naar je website. Het probleem is echter dat deze command lang niet alle links toont, maar een sample van de backlinks.

Nadat Google Webmaster Central in 2006 al veel handige tools heeft ontwikkeld, zoals ook beschreven in het Search Marketing jaaroverzicht 2006, bieden ze nu de mogelijkheid om om alle links naar jouw website in te zien en zelfs te downloaden.

Zowel de verwijzende interne links als externe links zijn inzichtelijk, evenals de links naar subdomeinen en naar individuele pagina’s. Alleen de links vanuit Google’s supplemental index zijn niet inzichtelijk.
(zie voor meer informatie het artikel Bekijk de Google Supplemental Index)

Danny Sullivan heeft er op SearchEngineLand een uitgebreid artikel over geschreven en ook Matt Cutts beschrijft zijn bevindingen, waarin hij een belangrijk statement maakt:

“Do not assume just because you see a backlink that it’s carrying weight“.

Zie ook het persbericht van Google Webmaster Central.

De afgelopen dagen is er in Zoekmachine-Optimalisatie-land een discussie ontstaan over een post op Ekstreme.com waarin wordt aangetoond dat Google ook CSS en Javascript bestanden indexeert. Waarom zou Google dit doen?

Een klein stukje de techniek in, gecombineerd met de huidige ranking issues van Google, kan dit verklaren.

Wat is CSS?

Met CSS bepaalt een webmaster snel en eenvoudig de opmaak van een website. CSS code (eenvoudigweg HTML) wordt meestal in een apart bestandje op de server gehost. Extern gehoste bestanden (zoals CSS, maar ook vaak Javascript) verlagen de ‘download time’ van een pagina (waar zoekmachines blij mee zijn en dus goed is voor zoekmachine optimalisatie).
Zie ook Wikipedia over CSS, Javascript en HTML.

Waarom indexeert de Googlebot CSS en Javascript?

Google zou extern gehoste CSS en Javascript bestanden kunnen indexeren om spammers te ontdekken die bijvoorbeeld witte tekst op een witte achtergrond plaatsen of links en/of tekst onzichtbaar willen maken (middels de command display:hidden). Ik denk echter dat de algoritmes van Google niet (meer) veel waarde hechten aan ‘wit op wit’ en display:hidden, maar dat Google andere zaken meer van belang acht.

AJAX (Asynchronous Javascript And XML)

Partijen als Google, Yahoo! en Amazon hebben de nieuwe scripttaal Ajax (Asynchronous Javascript And XML) geadopteerd en maken steeds meer gebruik van deze techniek om interactieve webpagina’s te maken die vaak gebruiksvriendelijk(er) zijn. Javascript, en dus ook AJAX, kan echter niet geïndexeerd worden door een crawler/spider van een zoekmachine, wat problemen voor de zoekmachine vriendelijkheid van jouw website zorgt.

Maar aangezien er veel informatie van AJAX in het CSS bestand te vinden kan zijn, heeft Google er baat bij bestanden als CSS te indexeren. Javascript kan worden gebruikt voor spam-doeleinden zoals cloaking en (fout gebruik van) redirects, dus ook daar heeft Google belang om te weten wat het Javascript inhoudt.
Zie ook Wikipedia over AJAX.

Het gaat om de content

Zoekmachines zijn altijd op zoek naar goede content (te weten: HTML tekst) dat wordt gewaardeerd (middels links van kwalitatieve en relevante websites). Ik denk dat de waarde voor Google zit in de combinatie van het indexeren van de HTML, CSS en Javascript, omdat al deze informatie Google vertelt welk element van jouw website content/tekst is (en dus welke elementen andere zaken vertegenwoordigen zoals headers, footers, sidebars, etc.).

Robots.txt en de zoekmachines

Voor degene die toch eigenwijs willen spammen in de zoekmachines lijkt Robots.txt een uitkomst. Het tekstbestandje Robots.txt gebruik je om bepaalde delen van een website af te sluiten voor een crawler/spider van een zoekmachine…

…wat dus ook kan voor CSS en Javascript. Maar dat is niet aan te raden, omdat Google dit op kan merken als potentiële spam website (met alle negatieve gevolgen voor je ranking in Google van dien – t/m verwijdering uit de index…).
Zie ook Wikipedia over Robots.txt.

Stel de eindgebruiker centraal!

Als conclusie en advies kan ik eigenlijk alleen maar zeggen: stel altijd de eindgebruiker centraal! Schrijf goede content die de moeite waard is voor de eindgebruiker en de moeite waard is om naar te linken. Houd je niet bezig met trucjes om zoekmachines te misleiden, want dat werkt echt alleen op de korte termijn. Eerlijk duurt het langst!

Lees meer over hoe Google jouw website indexeert

Zoekmachinemarketing, en dan zowel zoekmachine optimalisatie als het adverteren in zoekmachines, is op zich geen hogere wiskunde of ‘rocket science’. Waarom zou je zoekmachine marketing uitbesteden en niet zelf doen?

Een aardige spreuk illustreert waarom het toch interessant is om bepaalde zaken uit te besteden, ondanks dat het niet altijd complexe en ingewikkelde taken hoven te zijn:

…SEO (zoekmachine optimalisatie) is niet zo moeilijk om te doen en dat geldt ook voor de boekhouding, maar toch betaal ik iemand anders ervoor om het te doen. Vergeet namelijk niet het economische principe van specialisatie. We kunnen eigenlijk bijna alles wel zelf doen, maar waar is onze tijd het beste besteed? …

Via DutchCowboys

Vorige week schreef ik of er nog hoop is voor meta tags en vandaag weet DutchCowboys te melden dat ook Google het gebruik van de meta tag ‘description’ stimuleert.

Eigenlijk wist je dit al wanneer je iets met Zoekmachine Optimalisatie doet, maar op SE Roundtable is te lezen dat je door Google wordt aangeraden de ‘meta tag description’ te gebruiken.

De verklaring is van Vanessa Fox, een Google dame die verantwoordelijk is voor Google Webmaster Central:

“Voor de meeste zoekopdrachten genereert Google een ’snippet’, een stukje tekst gebaseerd op de tekst op de pagina waar het betreffende zoekwoord is gevonden. In de meeste gevallen zien de zoekresultaten er goed uit.

Maar voor de meer algemene zoekopdrachten, waar geen ’snippet’ van is te vinden in de tekst, gebruikt Google meestal de eerste regel(s) tekst die de zoekmachine tegenkomt op je website. Vaak is dat de navigatie, dus in dat geval kun je beter een goede Meta Description hebben die je website goed beschrijft.”

In de afgelopen jaren is er veel geschreven over de meta tags en met name dat het belang ervan voor de ranking in zoekmachines steeds verder afneemt. Iedereen die iets met zoekmachine optimalisatie doet is het daar over eens. Maar is dit op dit moment nog steeds terecht?

Wat mij betreft zijn er zeker enkele redenen aan te wijzen om meta tags serieus te nemen. Meta tags, en dan de meta-description en meta-keywords, zijn begonnen aan een inhaalrace:

Google duplicate content filters

Google heeft dit jaar problemen gehad om te bepalen wat wel en niet duplicate content is. Websites met algemene, of zelfs afwezige, meta tags, kunnen daardoor niet naar behoren in de zoekresultaten verschijnen voor hun content door bijvoorbeeld in de Supplemental Index terecht te komen, een soort tweede index die Google hanteert naast haar Main Index, waar de functionaliteit niet helemaal bekend van is.

Mmmm, zelfs websites zoals DutchCowboys en Marketingfacts, die generieke meta-tags gebruiken kunnen hier in theorie problemen ondervinden…

Het verschijnen in de supplemental results is in feite een uitnodiging voor het verlies van traffic, dus kun je beter op voorhand actie ondernemen door het schrijven van unieke en relevante meta tags op jouw webpagina’s.

Wat is precies duplicate content?

Ik vond een heel aardig artikel met een concrete kijk op duplicate content. Hierin wordt beschreven dat een duplicate content penalty in feite meestal niet een penalty is, maar dat de mate van indexatie en opname in de zoekresultaten eenvoudigweg bepaald wordt aan de hand van de PageRank en dus of een site al dan niet een authority site is (moeite waard om even te lezen).

Clickthrough rates

Een goede ranking voor de voor jou goede keywords heeft geen zin als de omschrijving onder het zoekresultaat niet relevant is. Bij het weglaten van de meta-description kiest de zoekmachine random wat tekst uit de pagina (een ’snippet’) die als omschrijving onder het zoekresultaat verschijnt. Dit hoeft niet altijd relevant te zijn, wat de doorklikratio voor jouw zoekresultaat (negatief) kan beïnvloeden.

Je kunt de tekst in de zoekresultaten voor jouw website beter controleren door het schrijven van unieke en relevante meta-tags, waarbij met name de meta-description belangrijk is, zodat de clickthrough rate verbetert. Als je dan een goede ranking realiseert, vertel de gebruikers dan waarom jouw website zo relevant is voor het betreffende zoekwoord.

Ranking

Google gebruikt de meta-keywords tag niet voor de ranking van websites. Maar Yahoo! wel.

Wereldwijd is Yahoo! op kleine afstand van Google de tweede zoekmachine (30% marktaandeel US), maar ook in landen waar het marktaandeel van Yahoo! klein is (zoals UK en zeker Nederland), kunnen goede rankings in Yahoo! kosteneffectief zijn.

Uiteraard is dit NIET een advies om met keyword stuffing en spamming bezig te gaan. Schrijf relevante en unieke keywords in de meta-keywords tag (die ook op de pagina voorkomen), zodat Yahoo! ze voor ranking doeleinden kan gebruiken.

Samenvattend

Te vaak zijn mensen gefixeerd op de details in plaats van op het totale plaatje. Fatsoenlijke meta-tags zijn onderdeel van het totale plaatje. Dit is zeker belangrijk als het gaat om clickthrough rates. Wat heeft het namelijk voor zin om een goede ranking te realiseren terwijl je de clickthrough rate geen kans geeft?
Gebruikers van zoekmachines willen een quality experience. Biedt ze dat aan door goed voor alle details van jouw website te zorgen die je kunnen helpen om de beste user experience te realiseren. En meta tags horen daar zeker bij.

Via SEOMoz

Is jouw site opgenomen in Google Nieuws? Is jouw site engelstalig? Zo ja, dan heb je vanaf nu de ondersteuning van Google Sitemaps. Je kunt eenvoudig jouw nieuwsartikelen toevoegen om opgenomen te worden in Google Nieuws en je hebt de beschikking over crawling statistieken, zo maakt Google bekend.

Vorige week kwamen Google, Microsoft en Yahoo! al met de aankondiging dat ze een een standaard voor Sitemaps ondersteunen en gaan ontwikkelen om webmasters de mogelijkheid te geven om de zoekmachines te vertellen welke pagina’s al dan niet opgenomen mogen worden in de index van de zoekmachines.

Als jouw website op dit moment dus is opgenomen in Google Nieuws, heb je meer controle over welke artikelen wel en niet in Google Nieuws worden opgenomen middels de Google Nieuws Sitemap. Dit is een slimme zet van Google, aangezien ze al eerder juridische problemen hadden met uitgevers en persagentschappen, zoals eerst met het Franse persbureau AFP en vervolgens de door Google verloren rechtszaak aangespannen door Belgische uitgevers.

Google benoemt het eerder als middel om publicaties en artikelen die nu per ongeluk niet worden meegenomen in de index, toch te kunnen indexeren. Google hoopt ook dat uitgevers juist het nut inzien van opname in de nieuws index, in plaats van zich ertegen te verzetten. Wat mij betreft een stap in de goede richting om uitgevers te overtuigen van de kracht van het internet. Yahoo heeft dit ook begrepen in de deze week gesloten deal met 7 grote Amerikaanse krantenuitgevers. De zoekmachines doen een eerste stap; nu is het de beurt aan de uitgevers.

Via Planet

De internetgiganten Google, Yahoo! en Microsoft hebben een nieuwe internationale standaard voor het SiteMaps Protocol ontwikkeld, te weten Sitemap.org. Sitemaps zijn een manier voor webmasters om zoekmachines te informeren welke webpagina’s van hun website beschikbaar zijn voor indexatie (crawling).

In de meest eenvoudige vorm is een Sitemap een XML bestand met een lijst van URL’s van een website inclusief additionele metadata over elke URL (wanneer de laatste update was, hoe vaak de URL normaal verandert en hoe belangrijk de pagina is gerelateerd aan de andere URL’s in de site) zodat de zoekmachines de website intelligenter kunnen crawlen.

Web crawlers ontdekken pagina’s normaal door links binnen de website en middels links van andere websites. Sitemaps kunnen de crawlers die Sitemaps ondersteunen hierin helpen, maar het gebruik van het sitemap protocol geeft geen garantie voor opname in de index van de zoekmachines. Sitemaps geven in feite hints aan web crawlers om het crawlen van jouw website te verbeteren.

Persoonlijk vind ik het gebruik van sitemaps niet noodzakelijk voor een goede indexatie. Als de directory structuur en de navigatie structuur van een website goed zijn opgebouwd, als er nauwelijks zoekmachine onvriendelijke technieken (zoals Flash en Javascript) worden gebruikt en (het belangrijkste!) als er voldoende relevante links naar de website zijn geplaatst, is een sitemap niet nodig om een website goed te laten indexeren door zoekmachines. Die mening heeft ook David Naylor, regelmatig co-host in de Daily SearchCast.

Zie ook het persbericht van Google

De Google Sandbox en Google TrustRank zijn vaak onderwerp van discussie op webmaster forums. Hoe beïnvloeden deze factoren jouw website rankings in Google en wat kan je doen om uit de Sandbox te komen of om een hoge TrustRank te krijgen?

Wat zijn de Google Sandbox en TrustRank?

De Sandbox en Google’s TrustRank zijn onderdeel van de ranking-filters van Google, waarin de factor tijd een belangrijke rol speelt.

De ‘leeftijd’ van je website beïnvloedt de ranking, maar ook de leeftijd van websites die linken naar jouw website beïnvloeden de ranking van jouw website. Google houdt bij sinds wanneer andere websites naar jouw site linken en hoe deze inbound links zich in de loop van de tijd ontwikkelen.

Vertrouwen

Als je een nieuwe domeinnaam hebt dan is het moeilijker om hoge rankings in Google te realiseren. Google kent je website nog niet dus Google weet niet of jouw website te vertrouwen is.

Om die reden hebben nieuwe websites meestal te maken met meer filters dan oude websites. Het kan gebeuren dat een nieuwe website in eerste instantie hoge rankings krijgt en dat de site vervolgens voor weken tot maanden uit rankings verdwijnt. Dit betekent dat de tijd-filters zijn toegepast op een website. Dit fenomeen is bekend als het (Google) Sandbox Effect.

Misverstand over Google Sandbox

Het is een misverstand om te geloven dat een site in de Sandbox niet geïndexeerd is, want dat klopt niet. ‘Sandboxed’ sites zijn gewoon geïndexeerd door Google, maar hebben moeite met de ranking voor de voor de site relevante keywords, ongeacht hoe competitief ze zijn.

Trustrank

Een hoge TrustRank betekent dat Google heeft geleerd om een website te vertrouwen. Een site met een hoge TrustRank is vaak enkele jaren oud, heeft lins van reputabele sites en heeft een goede inbound link geschiedenis en de site heeft geen spam-technieken toegepast in het verleden.

Een website die in de Sandbox zit, heeft waarschijnlijk geen hoge TrustRank. Andersom wordt een website met een hoge TrustRank niet in de Sandbox geplaatst.

Wat betekent dit voor jouw website?

Hoe ouder je website is, hoe beter. Het lijkt zo te zijn dat de filters van Google strenger zijn voor nieuwe domeinnamen, waardoor het moeilijker wordt om een hoge reanking te realiseren met nieuwe domeinnamen. Nieuwe domeinen moeten bewijzen dat ze betrouwbaar zijn voordat ze hoge rankings kunnen verkrijgen in Google.

Relevante en kwalitatieve inbound links

Om Google te laten zien dat jouw website betrouwbaar is, moet je voor goede (relevante en kwalitatieve) inbound links naar jouw website zorgen en hard blijven werken aan inbound links. Hoe langer andere websites naar jouw site linken en hoe meer nieuwe websites een link naar jouw website plaatsen, hoe waarschijnlijker het is dat jouw website hogere rankings realiseert. De links naar jouw website moeten worden geoptimaliseerd. Als de juiste (relevante en kwalitatieve) websites naar jouw site linken, laat je aan Google zien dat jouw website te vertrouwen is.

Als je een oude domeinnaam hebt en veel goede inbound links, dan kan je jouw Google rankings verbeteren door de content op je website te optimaliseren. Als je een nieuwe domeinnaam hebt, moet je Google allereerst laten zien dat je website betrouwbaar is. Dit kun je realiseren door de juiste links naar jouw website te krijgen. Gebruik daarnaast ethisch verantwoorde zoekmachine optimalisatie (SE0) technieken om jouw website te promoten in zoekmachines.

Zie de categorie handleiding op dit zoekmachine marketing weblog voor meer handleidingen over zoekmachines en zoekmachine marketing.

Via Marketingfacts: Danny Sullivan heeft op SearchEngineWatch een uitgebreide post geschreven over de gebreken van het zoeken zoals we het nu kennen, ook wel Natural Language Search of Organic Search genoemd.

Als trouwe luisteraar van Danny Sullivan’s radio show The Daily SearchCast (via podcast) op WebmasterRadio.fm heb ik zijn visie (die ik met hem deel) vaker gehoord, maar het blijft een interessante materie. In feite behandelt deze pionier op het gebied van Search de toekomst van Search. Waar gaat het heen?

Organic Search in de huidige vorm is voor mensen gemaakt die onbekend zijn met Search. Je typt een woord in en er verschijnen zoekresultaten gerangschikt op relevantie volgens een algoritme. Het probleem dat hier ontstaat is dat er vanuit een zoekopdracht van 2 of 3 woorden (meest voorkomend) niet kan worden bepaald wat men precies zoekt. Hier komt Contextual Search (of clustering) kijken.

Contextual Search probeert (d.m.v. query refinement) uit de zoektermen te halen in welke context het kan worden geplaatst. Op basis daarvan worden er suggesties gedaan wat de zoeker zou kunnen bedoelen. Het uitgebreid analyseren van heel veel web data kan in beperkte mate de context van de zoekopdracht inzichtelijk maken. Dat is echter een compleet andere benadering dan Natural Language Search, die overigens niet nieuw is.

Zoekmachines als Clusty en Ask zijn hier al actief mee bezig, maar ook Google test met ‘bedoelde je dit…‘ links tussen de zoekresultaten. Zoals Danny Sullivan beschrijft, zijn er al vele initiatieven geweest, maar geen van alle echt succesvol.

Is Organic Search overgewaardeerd? Ik denk het niet. Het zoeken zoals we het nu kennen is echter het prille begin van Search. De komende jaren gaat er denk ik nog veel veranderen in de wereld van Organic Search, met name op het gebied van contextual search (clustering) en query refinement, maar het is inderdaad een uitdaging om dit niet ten koste te laten gaan van de gebruiksvriendelijheid. Er is nog een hoop werk te doen!

Ralph Ruyters heeft in samenwerking met zoekmachine marketing bureau Checkit een onderzoek gedaan naar de online vindbaarheid van de top 100 adverteerders in Nederland.

Als onderdeel van de master Bedrijfscommunicatie en Digitale Media aan de Universiteit van Tilburg heeft Ralph in zijn onderzoek Top 100 online vindbaarheid aangetoond dat 68% van de top 100 adverteerders in Nederland slecht vindbaar is in zoekmachines.

De positie in de Vindbaarheid Top 100 is bepaald aan de hand van 11 elk even zwaar wegende parameters, te weten: Titel, Meta tag description, Meta tag keywords, Frames, H1, Content >150 woorden, Content Flash, Aantal pagina’s geindexeerd, Pagerank, Aantal inkomende links.

Deze zijn allemaal op 4 pagina’s van ieder domein gecheckt, en allemaal synchroon binnen de branche-categorie. Dus alle adverteerders in de branche telecom zijn bijvoorbeeld getest op de ‘homepage’, ‘belangrijkste abonnementen pagina’, ‘de aanbiedingen pagina’, en de ‘persberichtenpagina’. Zo is, samen met nog een aantal factoren, op een gegeven moment een ‘between subjects’ meting mogelijk.

Op basis van dit resultaat mag je concluderen dat het merendeel van de onderzochte sites onvoldoende is ingericht (geoptimaliseerd) om goed vindbaar te zijn bij zoekmachines. Het ontwikkelen en toepassen van een effectieve zoekmachine marketing strategie zou deze websites veel extra kwalitatieve bezoekers, en daarmee meer omzet kunnen opleveren.

Zie de categorie onderzoek op dit zoekmachine marketing weblog voor meer onderzoek over zoekmachines en zoekmachine marketing.