[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]

Re: [linux_var] Consiglio TROPPE QUERY



si ok, ma considera che il DB attualmelmente 'pesa' gia 2.4GB . quindi 10mb non e' niente :-D script va avanti a scansionare per piu di 24h.. l'ultima volta ci ha messo 33h a finire.. quindi io pensavo che se alposto di eseguire le quey potrei salvare tutto in un file di testo semplice.. guardagno tempo... perche l'importate e' fare la scansione, poi nel DB posso inserirli con calma a piccole dosi mi ripeto: non so se questo ragionamento a senso, se suddividere le mansioni del server in questo modo velocizzi o meno.. infatti chiedevo consigli

Il 21/10/10 18:56, Caco mapo ha scritto:
Ok, non cambia quello che ho detto, avete dato un occhio che non faccia
scansione di piu' di quello che deve?

Magari fare una ricerca in un lasso di tempo piu' lungo? non so magari ora il
settaggio è scansiona ogni 5 min, voi lo spostate a 15 min..


Una query da 10 mb mi sembra una cosa molto molto molto grossa... usti in 10 mb
di testo ci sta il mondo...

morris



----- Original Message ----
From: Pietro Feltrinelli<pfeltrinelli@finalmenteinvacanza.it>
To: talking@ml.linuxvar.it
Sent: Thu, October 21, 2010 3:41:54 PM

Subject: Re: [linux_var] Consiglio TROPPE QUERY

no, non e' interno.. e' uno script spider che scansione un determinato
URL  (es: http://www.google.it/)
e ,sensa lasciare il dominio, aquisisce tutti i link e li aggiunge alla
lista dei URL da scansionare.. e cosi via..


Il 21/10/2010 14:13, Caco mapo ha scritto:
Ciao,
   domanda, perchè è caso reale visto, questo motore di ricerca , è interno ?
inteso interno al sito? Non è che per errore è stata estesa la ricerca a Tutta
la rete a cui ha accesso? intendo Tutto internet?

Te lo chiedo perchè discutendo con un analista è successo anche questo caso...
che lo spider scandagliasse tutta la rete e quindi il db andava constantemente
giu' a causa di questa indicizzazione continua

Ciao
MOrris




----- Original Message ----
From: Pietro Feltrinelli<pfeltrinelli@finalmenteinvacanza.it>
To: Linux_var<talking@ml.linuxvar.it>
Sent: Thu, October 21, 2010 1:25:21 PM
Subject: [linux_var] Consiglio TROPPE QUERY

Salve ragazzi, non e' proprio un quesito inerente a linux..

vi spiego..
ho questo server che ospita un "motore di ricerca" e ho un problema di
velocita'..
quanto lo script "spider" scansiona la rete il server diventa lentissimo..
le operazioni che rallentano il server sono le moltitudini di
mysql_query che esegue..
mi chiedevo .. come posso velocizzare?
io pensavo: al posto di continuare ad eseguirle le query potrei fare in
modo che salvi il codice SQL che dovrebbe eseguire in un file di testo e
in secondo momento eseguire una sola grossa query... .secondo voi a senso ?
oppure avete altri consigli ?


-- Pietro Feltrinelli




-- Per cancellare l'iscrizione:<talking-unsubscribe at ml.linuxvar.it>
Archivi web e configurazione: http://ml.linuxvar.it/ml/









--
Per cancellare l'iscrizione: <talking-unsubscribe at ml.linuxvar.it>
Archivi web e configurazione: http://ml.linuxvar.it/ml/