Alternatives à Gigablast

Gigablast Description

Gigablast est un nouveau moteur de recherche puissant, opensource et indexé en temps réel!

Caractéristiques

Evolutif à des milliers de serveurs.
A évolué vers plus de 12 milliards de pages Web sur plus de 200 serveurs.
Un double quad core, avec 32 Go de RAM et deux disques SSD Intel de 160 Go, exécutant 8 instances Gigablast, peut traiter environ 8 qps (requêtes par seconde) sur un index de 10 millions de pages. Les lecteurs seront proches de la capacité de stockage maximale. En doublant la taille de l’indice, le débit sera plus ou moins réduit de moitié. (Les mesures de performances peuvent être réalisées environ dix fois plus rapidement, mais je n'y suis pas encore parvenue. L'utilisation de l'espace disque restera probablement la même, car elle est déjà très efficace.)
1 million de pages Web nécessite 28,6 Go d’espace disque. Cela inclut l'index, les méta-informations et le code HTML compressé de toutes les pages Web.
Le taux d'araignée est d'environ 1 page par seconde par noyau. Donc, un dual core quad peut spider et indexer 8 pages par seconde soit 691 200 pages par jour.
4 Go de RAM requis par instance Gigablast. (instance = processus)
Démo en direct sur http://www.gigablast.com/
Écrit en C / C ++ pour des performances optimales.
Plus de 500 000 lignes de C / C ++.
100% personnalisé. Un seul binaire. Le serveur Web, la base de données et tout le reste sont tous contenus dans ce code source de manière très efficace. Facilite l'administration et le dépannage.
Fiable. A été testé en production en direct depuis 2002 sur des milliards de requêtes sur un index de plus de 12 milliards de pages Web uniques, 24 milliards en miroir.
Super rapide et efficace. L'un des rares moteurs de recherche à avoir atteint un tel chiffre. Le seul moteur de recherche open source qui a.
Prend en charge toutes les langues. Peut donner des résultats dans les langues spécifiées un coup de pouce par rapport aux autres au moment de la requête Utilise la représentation UTF-8 en interne.
Track record. A été utilisé par de nombreux clients. A été utilisé avec succès dans les logiciels d'entreprise distribués.
Pages Web mises en cache avec mise en évidence du terme de la requête.

Afficher plus