Alternative a Gigablast

Gigablast Panoramica

Gigablast è un nuovo potente motore di ricerca open source che esegue l'indicizzazione in tempo reale!

Caratteristiche

Scalabile su migliaia di server.
È stato ridimensionato a oltre 12 miliardi di pagine Web su oltre 200 server.
Un dual quad core, con 32 GB di RAM e due SSD Intel da 160 GB, con 8 istanze Gigablast, può fare circa 8 qps (query al secondo) su un indice di 10 milioni di pagine. Le unità saranno vicine alla capacità massima di archiviazione. Il raddoppio della dimensione dell'indice dimezzerà più o meno la frequenza qps. (Le metriche sulle prestazioni possono essere rese circa dieci volte più veloci ma non ci sono ancora riuscito. L'utilizzo dello spazio su disco rimarrà probabilmente lo stesso perché è già abbastanza efficiente.)
1 milione di pagine Web richiede 28,6 GB di spazio su disco. Ciò include l'indice, le meta informazioni e l'HTML compresso di tutte le pagine Web.
La velocità del ragno è di circa 1 pagina al secondo per core. Quindi un dual quad core può eseguire il ragno e indicizzare 8 pagine al secondo, ovvero 691.200 pagine al giorno.
4 GB di RAM richiesti per istanza Gigablast. (istanza = processo)
Demo live su http://www.gigablast.com/
Scritto in C / C ++ per prestazioni ottimali.
Oltre 500.000 linee di C / C ++.
100% personalizzato. Un singolo binario. Il web server, il database e tutto il resto sono contenuti in questo codice sorgente in modo altamente efficiente. Semplifica l'amministrazione e la risoluzione dei problemi.
Affidabile. È stato testato nella produzione live dal 2002 su miliardi di query su un indice di oltre 12 miliardi di pagine Web uniche, 24 miliardi di copie speculari.
Super veloce ed efficiente. Uno dei pochi motori di ricerca che hanno raggiunto numeri così grandi. L'unico motore di ricerca open source che ha.
Supporta tutte le lingue. Può dare risultati in determinate lingue un potenziamento rispetto ad altri al momento della query. Utilizza la rappresentazione UTF-8 internamente.
Track record. È stato utilizzato da molti clienti. È stato utilizzato con successo nel software aziendale distribuito.
Pagine Web memorizzate nella cache con evidenziazione dei termini della query.

Mostra di più