Witam!
Wczoraj zainstalowalem GSiteCrawler jednak nie moge sobie jakos z tym poradzic.
Jak najlepiej ustawic te opcje w tym programnie zeby szybko sciagnela sie mapa?
Aktualnie pisze mi Records waiting: 9150 i nie widac konca.
Strona to portal miasta(codziennie nowe newsy, posty, komenarze itd)
Prosil bym o rady
Pełna wersja: GSiteCrawler - pytania
GSiteCrawler działa bardzo wolno do dużych serwisów. Zostaw kompa na kilka-kilkanaście godzin, a mapa powinna się zrobić.
Ja np. próbowałem już zostawiać na wiele godzin, ale mając na stronie kalendarz oraz np. galerię to program zaczyna indeksować stronę każdego dnia, miesiąca i roku więc od 1900 do 2300 (strzelam) * ilość dni... plus indeksuje ocenianie zdjęć - tysiące zdjęć w galerii * ocena (1-5) czyli moim zdaniem zbytnio się zagnieżdża więc zrobiłem sobie drugi sitemap gdzie sam wrzucam nowe linki (nawet jak mam posty newsów to dodaję z wyprzedzeniem ID postów, których jeszcze nie wrzuciłem a będą za kilka dni - akurat na opóźnienie gogla)
jak dla mnie to zmień program do generowania bo będziesz miał bardzo dużą mapę a google tego i tak nie przeczyta. Ten program jest bardzo dokładny i jak znajdzie jakąś dziurę (a przy takiej stronie o to nie trudno) to się zapętli i będziesz tak czekał do usr...j śmierci.
QUOTE(FID @ 6.11.06 - 12:20) [snapback]221454[/snapback]
jak dla mnie to zmień program do generowania bo będziesz miał bardzo dużą mapę a google tego i tak nie przeczyta. Ten program jest bardzo dokładny i jak znajdzie jakąś dziurę (a przy takiej stronie o to nie trudno) to się zapętli i będziesz tak czekał do usr...j śmierci.
Na?
Chętnie zmienilbym program na inny, szybszy, omijajacy dziury, zreszta pewnie nie tylko ja... Moze w takim razie polecisz cos sensownego?
GSiteCrawler jest ok, tylko trzeba umiec nim se poslugiwac
np mozna filtrowac adresy, ktory nie chcemy miec w mapie, dodajemy slowa kluczowe (ktore wystepuja w linkach) do filtra i juz program bedzie omijal te adresy
np mozna filtrowac adresy, ktory nie chcemy miec w mapie, dodajemy slowa kluczowe (ktore wystepuja w linkach) do filtra i juz program bedzie omijal te adresy
Nie prosciej generowac pliki xml wyciagajac dane bezposrednio z bazy ?
jakbym umial to pewnie by bylo prosciej ;-)
Wystarczy podstawowa znajomosc PHP.
Np.
Przez mod rewrite przekierowanie z plik.xml na plik.php. Jak google wejdzie to sie wygeneruje na biezaco lista url. W takim wypadku mapy dzielimy na jak najmniejsze
Np.
CODE
<?
echo '<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">';
[laczymy sie z baza]
$zapytanie = mysql_query("SELECT id FROM ****");
while($dane = mysql_fetch_row($zapytanie))
{
echo '<url>
<loc>http://www.pl/news/'.$dane[0].'.html</loc>
<changefreq>monthly</changefreq>
<priority>0.5</priority>
</url>';
}
?>
</urlset>
echo '<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">';
[laczymy sie z baza]
$zapytanie = mysql_query("SELECT id FROM ****");
while($dane = mysql_fetch_row($zapytanie))
{
echo '<url>
<loc>http://www.pl/news/'.$dane[0].'.html</loc>
<changefreq>monthly</changefreq>
<priority>0.5</priority>
</url>';
}
?>
</urlset>
Przez mod rewrite przekierowanie z plik.xml na plik.php. Jak google wejdzie to sie wygeneruje na biezaco lista url. W takim wypadku mapy dzielimy na jak najmniejsze
Witam,
Moglby mi ktos wystawic gdzies program GSiteCrawler? Niestety strona domowa programu nie dziala
Moglby mi ktos wystawic gdzies program GSiteCrawler? Niestety strona domowa programu nie dziala
CYTAT(jurdziol @ 19.11.06 - 13:25) [snapback]225532[/snapback]
Wystarczy podstawowa znajomosc PHP.
Np.
Przez mod rewrite przekierowanie z plik.xml na plik.php. Jak google wejdzie to sie wygeneruje na biezaco lista url. W takim wypadku mapy dzielimy na jak najmniejsze
Np.
KOD
<?
echo '<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">';
[laczymy sie z baza]
$zapytanie = mysql_query("SELECT id FROM ****");
while($dane = mysql_fetch_row($zapytanie))
{
echo '<url>
<loc>http://www.pl/news/'.$dane[0].'.html</loc>
<changefreq>monthly</changefreq>
<priority>0.5</priority>
</url>';
}
?>
</urlset>
echo '<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">';
[laczymy sie z baza]
$zapytanie = mysql_query("SELECT id FROM ****");
while($dane = mysql_fetch_row($zapytanie))
{
echo '<url>
<loc>http://www.pl/news/'.$dane[0].'.html</loc>
<changefreq>monthly</changefreq>
<priority>0.5</priority>
</url>';
}
?>
</urlset>
Przez mod rewrite przekierowanie z plik.xml na plik.php. Jak google wejdzie to sie wygeneruje na biezaco lista url. W takim wypadku mapy dzielimy na jak najmniejsze
Witaj,
Proszę czy mógłbyś coś więcej napisać na temat tego kodu? Jaki plik stworzyć? Tzn: *.xml czy to ma być sitemap.xml który będzie przekierowywał na plik *.php powiedzmy sitemap.php z tym kodem powyżej?
Proszę o szczegóły będę wdzięczny.
Proszę o odpowiedź.
Wszystkiego dobrego
Sławek
Np. w htaccess:
KOD
RewriteRule ^sitemap.xml$ sitemap.php [L]
CYTAT(jurdziol @ 11.04.07 - 11:56) [snapback]267133[/snapback]
Np. w htaccess:
KOD
RewriteRule ^sitemap.xml$ sitemap.php [L]
Witam,
Dziekuje za odpowiedz.
u mnie na serwerze nie mozna wstawiac .htaccess plikow
Wszystkiego dobrego
Slawek
CYTAT(mireczek @ 13.03.07 - 09:19) [snapback]258701[/snapback]
Witam,
Moglby mi ktos wystawic gdzies program GSiteCrawler? Niestety strona domowa programu nie dziala
Moglby mi ktos wystawic gdzies program GSiteCrawler? Niestety strona domowa programu nie dziala
http://johannesmueller.com/gs-files/gsitec...er-120-full.exe
CYTAT(Liii @ 6.05.07 - 08:17) [snapback]274211[/snapback]
CYTAT(mireczek @ 13.03.07 - 09:19) [snapback]258701[/snapback]
Witam,
Moglby mi ktos wystawic gdzies program GSiteCrawler? Niestety strona domowa programu nie dziala
Moglby mi ktos wystawic gdzies program GSiteCrawler? Niestety strona domowa programu nie dziala
http://johannesmueller.com/gs-files/gsitec...er-120-full.exe
Liii dzieki za linka.
Ich strona domowa dalej jest wylaczona (pusta).
Witam,
Dla użytkowników mających błędy przy walidacji site mapy przez Google (z konta Google) może przyda się info żeby nagłówek xml'a zamienić na
<?xml version="1.0" encoding="ISO-8859-2"?>
Standardowo Gsite Crawler zapisuje w utf-8.
pozdrawiam
Dla użytkowników mających błędy przy walidacji site mapy przez Google (z konta Google) może przyda się info żeby nagłówek xml'a zamienić na
<?xml version="1.0" encoding="ISO-8859-2"?>
Standardowo Gsite Crawler zapisuje w utf-8.
pozdrawiam
To jest wersja lo-fi głównej zawartości. Aby zobaczyć pełną wersję z większą zawartością, obrazkami i formatowaniem proszę kliknij tutaj.