[TYPO3-german] crawler beschleunigen

[Thomas Scholze]

Andreas Otto schrieb:
> Hallo Thomas,
> 
> Thomas Scholze wrote:
>> -- crawler-aufruf in der Shell --
>> $ time
>> /home/www/vh/www.fh-lausitz.de/typo3/sites/typo3_FHL_test/typo3/cli_dispatch.phpsh
>> crawler_im 2 -d 999 -n 999 -ss -proc
>> tx_cachemgm_recache,tx_indexedsearch_reindex,tx_indexedsearch_crawler -o
>> exec
>>
>> -- mit dem Ergebnis --
>> real    981m14.729s
>> user    0m15.978s
>> sys     0m2.571s
> 
> Kannst Du mal schauen an welcher Stelle der Crawler die Zeit verplempert?
> Aus meiner Erfahrung mit dem Crawler müsste es nach der Stelle hängen an der
> er die zu crawlende Seite geholt hat.
> 
> Bau doch mal ein paar Debug Ausgaben ein und poste die Ergebnisse wieder an
> die Liste.
> 
> 
> Liebe Grüße,
> Andreas
> 
Hallo,
der Crawler benötigt am meisten Zeit für readUrl_exec(), dort gehen 
knappe 15sek drauf und das auf dem produktiv-system.

Grüße
Thomas