Google weigert het indexeren van de extra URL's gecreëerd door vBET

[myandy99]

vBET 3.4.1
vBSEO 3.6
vBulletin 3.6.8
vBSEO Sitemap

Ik geïntegreerd vBET met vBSEO sitemap en de URL's gegenereerd in sitemap aanzienlijk toegenomen als gevolg van extra talen. Maar Google weigert te indexeren de meeste van hen op de website met het volgende bericht gestuurd naar mij op mijn Webmaster Tool:


Googlebot vond een extreem hoog aantal URL's op uw site: http://xxxx.com/

Googlebot ondervonden problemen tijdens het crawlen van uw site http://xxxx.com/.

Googlebot zeer grote aantallen links aangetroffen op uw site. Dit kan duiden op een probleem met de URL van uw site structuur. Googlebot kan onnodig kruipen van een groot aantal verschillende URL's die naar identieke of soortgelijke inhoud, of kruipen delen van uw site die niet zijn bedoeld om te worden gecrawld door Googlebot. Als gevolg hiervan Googlebot kan verbruiken veel meer bandbreedte dan nodig is, of mogelijk niet in staat om volledig indexeren van alle inhoud op uw site.

Meer informatie over dit onderwerp

Hier is een lijst van het monster URL's met mogelijke problemen. Echter, kan deze lijst niet alle problematische URL's op uw site.

(Let op: de genoemde monster URL's zijn de vreemde taal URL's (zoals http://xxx.com/forums/no/something-something.html) en ze werken URL's, niet gebroken URL's).


Als gevolg hiervan, terwijl bij vBET Ik voorgelegd veel meer URL's dan voorheen (661934) om via Google sitemap, Google verwierp de meeste van hen en slechts geïndexeerd 44.506 van hen.

De gedetailleerde boodschap die verklaart waarom Google niet indexeren deze URL's is als volgt:


URL's niet gevolgd
Wanneer we een steekproef van URL's getest van uw sitemap hebben we vastgesteld dat sommige URL's omleiden naar andere locaties. Wij raden je sitemap URL's bevatten die verwijzen naar de eindbestemming (de redirect target) in plaats van doorsturen naar een andere URL.

HTTP-fout: 301
URL:
http://xxx.com/forums/sl/blah-blah-blah/314-what-ever-sample.html
Probleem gedetecteerd op: 18 augustus 2011

Mag niet Google-index meer van mijn URL's, zo niet alle? Ik lees op dit forum de goede verhalen over vBET het vergroten van de geïndexeerde URL's op het web, waarmee in het extra verkeer. Dit is niet gebeurd voor mij.

Hoe kan ik mijn probleem op te lossen?

[kamilkurczak]

hello,
U kunt plakken hier een volledige bericht van Google? met een volledige lijst van foute url's? als je niet wilt hier plakken - je kunt PM naar mij. Ik moet dit koppelingen opgemerkt door google te controleren:) thanks

[myandy99]

Gewoon PM'ed je. Totaal 2 PMS, omdat de Google-bericht is zeer lang. Bedankt

[kamilkurczak]

hello,
Ik keek je links en ik merkte geen verkeerd urls en dubbele omleidingen. Kun je plakt hier uw robots.txt-bestand de inhoud?
in de tweede plaats - met behulp van Google Chrome tools (ctrl + shift + j in chroom), merkte ik enkele fouten - u kunt controleren usng Google Chrome-browser.
(Slechte verzoek 400, afbeelding niet gevonden = 404), kunt u controleren.

Ik zal proberen te vinden waarom Google stuurt u dat bericht.

in de tweede plaats. Ik zag een aantal pagina's met dubbele lang in de URL, bijvoorbeeld: dus er is probleem met de omleiding. Weet u zeker dat u de juiste vBET integreren met vBSEO?

[myandy99]

Ik dacht dat ik volgde de instructies om vBET integreren met vBSEO. Wat denk je dat ik zou kunnen hebben gemist? Ik kan het dubbele controle.

forums / nee / pl / PhotoPlog is voor een derde partij vBulletin mod en het is niet geïntegreerd met vBET (ik weet niet hoe dit te doen), dus ik ben niet verbaasd vreemd URL's zien voor PhotoPlog onder vBET. PhotoPlog is geïnstalleerd onder locatie wortel, niet forum root zodat de URL moet echt root / wat-taal / PhotoPlog, niet root / forums / whatever-taal / PhotoPlog worden. Maar goed Google klaagt over mijn gewone forum URL's worden te veel en problematisch.

Dit is mijn robots.txt voordat ik kreeg de Google-bericht:

User-agent: Slurp

User-agent: *
Disallow: / forums / cron.php
Disallow: / forums / login.php
Disallow: / forums / newreply.php
Disallow: / forums / newthread.php
Disallow: / forums / printthread.php
Disallow: / forums / private.php
Disallow: / forums / profile.php
Disallow: / forums / register.php
Disallow: / forums / report.php
Disallow: / forums / reputation.php
Disallow: / forums / search.php
Disallow: / forums / sendmessage.php
Disallow: / forums / payments.php
Disallow: / forums / cgi-bin /
Disallow: / forums / includes /
Disallow: / forums / living_avatars /
Disallow: / forums / customavatars /
Disallow: / forums / members.php
Disallow: / forums / memberlist.php
Disallow: / huisgenoot
Disallow: / huisgenoot-notused
Disallow: / 3rdParty /
Disallow: / cgi-bin /
Disallow: / klassen /
Disallow: / crons /
Disallow: / functies /
Disallow: / import /
Disallow: / includes /
Disallow: / JScript /
Disallow: / licentie /
Disallow: / modules /
Disallow: / moderator /
Disallow: / psystems /
Disallow: / smarty /
Disallow: / temp /
Disallow: / ajax /
Disallow: / news.php /
Disallow: / forums / leden /

Sitemap: http://xxxx.com/forums/sitemap_index.xml.gz


Dit is mijn robots.txt nadat ik Google berichten (ik heb toegevoegd te weigeren aan / forums / taal / leden)


User-agent: Slurp

User-agent: *
Disallow: / forums / cron.php
Disallow: / forums / login.php
Disallow: / forums / newreply.php
Disallow: / forums / newthread.php
Disallow: / forums / printthread.php
Disallow: / forums / private.php
Disallow: / forums / profile.php
Disallow: / forums / register.php
Disallow: / forums / report.php
Disallow: / forums / reputation.php
Disallow: / forums / search.php
Disallow: / forums / sendmessage.php
Disallow: / forums / payments.php
Disallow: / forums / cgi-bin /
Disallow: / forums / includes /
Disallow: / forums / living_avatars /
Disallow: / forums / customavatars /
Disallow: / forums / members.php
Disallow: / forums / memberlist.php
Disallow: / huisgenoot
Disallow: / huisgenoot-notused
Disallow: / 3rdParty /
Disallow: / cgi-bin /
Disallow: / klassen /
Disallow: / crons /
Disallow: / functies /
Disallow: / import /
Disallow: / includes /
Disallow: / JScript /
Disallow: / licentie /
Disallow: / modules /
Disallow: / moderator /
Disallow: / psystems /
Disallow: / smarty /
Disallow: / temp /
Disallow: / ajax /
Disallow: / news.php /
Disallow: / forums / leden /
Disallow: / forums / AF / leden /
Disallow: / forums / sq / leden /
Disallow: / forums / AR / leden /
Disallow: / forums / HY / leden /
Disallow: / forums / az / leden /
Disallow: / forums / eu / leden /
Disallow: / forums / be / leden /
Disallow: / forums / BG / leden /
Disallow: / forums / nl / leden /
Disallow: / forums / zh-CN / leden /
Disallow: / forums / hr / leden /
Disallow: / forums / CS / leden /
Disallow: / forums / da / leden /
Disallow: / forums / nl / leden /
Disallow: / forums / nl / leden /
Disallow: / forums / et / leden /
Disallow: / forums / tl / leden /
Disallow: / forums / fi / leden /
Disallow: / forums / nl / leden /
Disallow: / forums / gl / leden /
Disallow: / forums / ka / leden /
Disallow: / forums / de / leden /
Disallow: / forums / el / leden /
Disallow: / forums / ht / leden /
Disallow: / forums / iw / leden /
Disallow: / forums / hi / leden /
Disallow: / forums / HU / leden /
Disallow: / forums / is / leden /
Disallow: / forums / id / leden /
Disallow: / forums / GA / leden /
Disallow: / forums / it / leden /
Disallow: / forums / ja / leden /
Disallow: / forums / ko / leden /
Disallow: / forums / lv / leden /
Disallow: / forums / lt / leden /
Disallow: / forums / mk / leden /
Disallow: / forums / ms / leden /
Disallow: / forums / mt / leden /
Disallow: / forums / nee / leden /
Disallow: / forums / fa / leden /
Disallow: / forums / pl / leden /
Disallow: / forums / pt / leden /
Disallow: / forums / ro / leden /
Disallow: / forums / ru / leden /
Disallow: / forums / sr / leden /
Disallow: / forums / sk / leden /
Disallow: / forums / SL / leden /
Disallow: / forums / es / leden /
Disallow: / forums / sw / leden /
Disallow: / forums / sv / leden /
Disallow: / forums / zh-TW / leden /
Disallow: / forums / th / leden /
Disallow: / forums / tr / leden /
Disallow: / forums / VK / leden /
Disallow: / forums / ur / leden /
Disallow: / forums / vi / leden /
Disallow: / forums / cy / leden /
Disallow: / forums / yi / leden /
Disallow: / forums / member.php
Disallow: / forums / AF / member.php
Disallow: / forums / sq / member.php
Disallow: / forums / AR / member.php
Disallow: / forums / HY / member.php
Disallow: / forums / az / member.php
Disallow: / forums / eu / member.php
Disallow: / forums / be / member.php
Disallow: / forums / BG / member.php
Disallow: / forums / ca / member.php
Disallow: / forums / zh-CN / member.php
Disallow: / forums / hr / member.php
Disallow: / forums / cs / member.php
Disallow: / forums / da / member.php
Disallow: / forums / nl / member.php
Disallow: / forums / nl / member.php
Disallow: / forums / et / member.php
Disallow: / forums / tl / member.php
Disallow: / forums / fi / member.php
Disallow: / forums / fr / member.php
Disallow: / forums / gl / member.php
Disallow: / forums / ka / member.php
Disallow: / forums / de / member.php
Disallow: / forums / el / member.php
Disallow: / forums / ht / member.php
Disallow: / forums / iw / member.php
Disallow: / forums / hi / member.php
Disallow: / forums / HU / member.php
Disallow: / forums / is / member.php
Disallow: / forums / id / member.php
Disallow: / forums / ga / member.php
Disallow: / forums / it / member.php
Disallow: / forums / ja / member.php
Disallow: / forums / ko / member.php
Disallow: / forums / lv / member.php
Disallow: / forums / lt / member.php
Disallow: / forums / mk / member.php
Disallow: / forums / ms / member.php
Disallow: / forums / mt / member.php
Disallow: / forums / nee / member.php
Disallow: / forums / fa / member.php
Disallow: / forums / pl / member.php
Disallow: / forums / pt / member.php
Disallow: / forums / ro / member.php
Disallow: / forums / ru / member.php
Disallow: / forums / sr / member.php
Disallow: / forums / sk / member.php
Disallow: / forums / SL / member.php
Disallow: / forums / es / member.php
Disallow: / forums / sw / member.php
Disallow: / forums / sv / member.php
Disallow: / forums / zh-TW / member.php
Disallow: / forums / th / member.php
Disallow: / forums / tr / member.php
Disallow: / forums / VK / member.php
Disallow: / forums / ur / member.php
Disallow: / forums / vi / member.php
Disallow: / forums / cy / member.php
Disallow: / forums / yi / member.php
Disallow: / forums / HY / member.php
Disallow: / forums / az / member.php
Disallow: / forums / eu / member.php
Disallow: / forums / ka / member.php
Disallow: / forums / ur / member.php

Sitemap: http://xxxx.com/forums/sitemap_index.xml.gz

[kamilkurczak]

U kunt onze robots file van hier
http://www.vbenterprisetranslator.com/forum/general-discussions/243-vbet-performance.html # post1178

[vBET]

Hi. Ik heb net gepost info om Kamil naar voren me je PM. Zoals ik het zie het probleem wordt veroorzaakt door dubbel taalcode in de URL's - dit is waarom je de e-mail van Google - heb je veel URL's met dezelfde inhoud.

In de eerste plaats - deze links moeten niet worden gemaakt. De oorzaak kan hier niet worden geïntegreerd plugins.

Volgende zelfs indien een dergelijke URL wordt gemaakt vBET veronderstellen te weten te komen over en redirect. Omleiding niet gebeurt op uw forum en dit is het probleem. Ik weet niet waarom het niet redirect - is het vBET bug of omdat u gebruik maakt van het op niet officieel ondersteund vBulletin versie. vBET 3.x is voor vBulletin 3.8, en u gebruikt vBulletin 3.6. Ik moet controleren op de plaats. Gelieve PM me je Admin CP en FTP toegang tot details.

[myandy99]

Gewoon PM'ed u

[vBET]

OK zo - nu zie ik echte probleem - links voor PhotoPlog mogen geen / forums helemaal. Dit was de integratie probleem - u heeft nog geen integratie-inspanning en de koppeling was ten opzichte van niet absoluut, zodat vBET aangenomen dat het nog steeds het forum link.

Je niet zien hoe het is bijgedragen aan Google klacht, maar ik zie het. Elke (de meeste) van links inbegrepen er links vertaald - elk vertaalde pagina opgenomen gebroken link naar PhotoPlog (zoals DOMAIN / forums / pl / PhotoPlog / index.php werd opgenomen op elke pagina met Poolse vertaling). Dus elke vertaalde pagina opgenomen link naar dubbele content, want onder die gebroken links heb je PhotoPlog pagina die belangrijkste forum pagina-inhoud bevat.

Ik heb zojuist PhotoPlog om genegeerd URL's, zodat vBET zal niet leiden tot een dergelijke broken links voor PhotoPlog meer. Het zou beter zijn om te integreren en ook vertaald hebben, maar het is niet gedekt door gratis ondersteuning. Open nieuwe thread in de integratie sectie voor hulp - Het zal nog lastig zijn indien deze al mogelijk, want je hebt het in combinatie met vBSEO regels - dus waarschijnlijk standaard integratie hints zal niet genoeg zijn. Het maken van de integratie van onze medewerkers wordt betaald dienst en het kost $ 30 (http://www.vbenterprisetranslator.com/integration-service.php).

Dus de werkelijke oplossing lost het probleem op door het houden van uw PhotoPlog pagina's uit vBET systeem. Gebroken links zullen niet meer worden gegenereerd en reeds erkende gebroken links door Google wordt doorgestuurd, zodat koppeling, zoals:
DOMAIN/forums/pl/photoplog/gallery-view-3.html
wordt doorgestuurd naar:
DOMAIN/forums/photoplog/gallery-view-3.html

Dus moet je nog toevoegen htaccess regels die een dergelijk verzoek zal doorsturen naar:. DOMAIN/photoplog/gallery-view-3.html
Dit is al uit vBET systeem (vBET nu negeert PhotoPlog op uw forum) - het is omdat je forum staat voor een dergelijke gebroken links.

Dit moet op te lossen het probleem - ik zie geen andere afwijkingen. Als je - laat het ons dan weten waar. Neem speciale aandacht voor alle links gaan buiten je forum directory - check doet na vertaling die juist zijn. Die moet absoluut zijn, anders vBET zullen het zien als een deel van het forum content, en er toe te voegen vertaling tracking. Het is mogelijk om vertaling spoor naar pagina's buiten het forum directory en ondersteuning vertaling er als het genereert met behulp van vBulletin-motor, maar het vereist de integratie - standaard vBET vertaalt forum.

Vertel je meer hulp nodig op dit gebied te doen.

PS.
Nog een anomalie, maar niet gerelateerd aan vBET - Google een aantal links naar pagina's ecards show, waar na te gaan daar zag ik dezelfde pagina-inhoud na redirect maar ook andere URL, moet u ervoor zorgen dat de redirect bijbehorende header te vertellen dat de inhoud niet bestaat stuurt.

[vBET]

Beantwoording van uw vraag in PM waarom had je over de pagina die nu is perfect OK waarschuwing.

Mogelijke redenen:
1. Het moest verwijzen naar gedupliceerde inhoud (de verkeerde PhotoPost band dat op elk van uw vertaalde pagina voordat we de verandering)
2. Wanneer Google er kwam eerste keer dat je zou kunnen hebben problemen met Google vertaling zelf - zoals quota overschreden, of tijdelijk geblokkeerd uitgaande verzoeken van uw server, of tijdelijke geblokkeerd door Google-vertaling API zelf (uit andere reden dan vertaling) - dus als ja van die gebeurd wanneer Google robot bezocht je NIET in de cache nog pagina, dan robot zag alleen maar lay-out met alle teksten blank (vertaling resultaat was lege string voor elke vertaling) - dus alle pagina's was hetzelfde toen.

Kan je niet vertellen deed het gebeurd is, maar dat zijn mogelijke redenen die we zien op dit moment. Ook rekening mee dat op dit moment wanneer je cache gevuld is is het minder waarschijnlijk is dat je dan Google-vertaling API-quotum (het is ingesteld van enige tijd - na Google maakte aankondiging dat Translation API zal worden gesloten).

Op dit moment zien we geen problemen met de rest van uw URL's. Als u een probleem, laat het ons weten dat we zullen onmiddellijk reageren om u te helpen. Op dit moment ziet het er prima. Heeft u behoefte aan meer hulp bij dit probleem? :)

[vBET]

Zoals je schreef in PM - op dit moment niet meer te helpen is hier nodig. In het geval als u meer hulp op dit gebied nodig hebt, neem dan hier schrijven:)