Exalead : Espion pour cible !

23 avril 2008 by Carole Exalead en live, Pour les geeks 9

bond.JPG

Nous vous avions déjà parlé d’une évolution de notre centre serveur lors d’un précédent post.

Mais ce n’est pas la première, ni la dernière. En effet, pour faire face à l’évolution du trafic, à l’augmentation du nombre de pages indexées et l’ajout de nouveaux services, ces opérations sont régulières.

Voici un petit résumé des étapes marquantes de la vie de nos centres de production.

Initialement, Exalead hébergeait quelques machines chez des prestataires. Mais compte tenu de notre croissance, il a été nécessaire de prévoir des salles dédiées, n’utilisant que nos équipements.

Mars 2005 : Nous avons installé la première salle dédiée, avec l’ouverture de notre site 1, constitué de plus d’une dizaine de machines réparties dans plus de 6 armoires. Oui c’était de grosses machines :) Nous étions alors capables d’indexer 1 milliard de pages.

Août 2005 : Nous rajoutons une trentaine de serveurs, pour faire face au trafic et être capable d’indexer 2 milliards de pages.

Mars 2006: Les choses commencent à devenir vraiment sérieuses, nous ouvrons un second site et nous rajoutons plus d’une cinquantaine de serveurs (une dizaine d’armoires) pour pouvoir indexer 8 milliard de pages.

Janvier 2007 : Face à l’abondance de services et d’idées qui sortent de nos laboratoires, nous devons rajouter plus de serveurs sur notre site 1.

Courant 2007 : Nos laboratoires continuent à travailler et préparent une réorganisation en profondeur de notre architecture, qui sera plus rapide, plus robuste, plus efficiente. Mais nous devons pour cela rajouter une vingtaine de machines dans notre site 1 en août 2007.

Depuis, nous travaillons activement à la mise en ligne de toutes ces merveilles, donc nos centres ont peu évolués, mais ce n’est que le calme avant la tempête.

Comments

Leave a comment   9

  1. Lynk Hirosue says: 23 avril 2008

    “nous travaillons activement à la mise en ligne de toutes ces merveilles”

    Et c’est quand ? :)

      Facebook Twitter Linkedin

  2. Carole&co says: 23 avril 2008

    en ce moment même :)

      Facebook Twitter Linkedin

  3. Fanclub says: 23 avril 2008

    Vraiment une équipe épatante ! Est-il indiscret d’avoir un petit indice sur la grosseur de la RAM, des CPU et des HDD ? Pardon, mais on n’a pas toujours la chance de pouvoir gérer des systèmes à haute charge. Bonne continuation à vous en tout cas !

      Facebook Twitter Linkedin

  4. Nicknick63 says: 28 avril 2008

    Wouhou, j’espère que ça va booster un peu la rapidité ( http://feedback.exalead.fr/feedbacks/6218-plus-de-legerete ) et que ça va vous permettre d’indexer plus de pages. Avec les 8 milliards, vous êtes à 1/3 de Google selon François Bourdoncle.

      Facebook Twitter Linkedin

  5. Skan says: 29 avril 2008

    Euh, je le répète encore une fois, c’est pas la taille qui compte.

    Si on supprime toutes les pages de fishing, fermes de liens et cie on arrive à moins que ça. Et puis je pense qu’il y a la façon de compter les pages… les liens morts, les redirections… on peut vite grimper.

    Bon, je rebaisse la tête faut que jboss!

      Facebook Twitter Linkedin

  6. Nicknick63 says: 29 avril 2008

    Oui, mais il n’empêche que des pages manquent, surtout dans les sites anglo-saxons.
    Mais bon, il ne faut pas se voiler la face, il y a aussi des pages indexées par Exalead qui ne le sont pas par Google par exemple.

      Facebook Twitter Linkedin

  7. Marc says: 2 septembre 2008

    Bonjour,

    Il y a également quelques informations ici :
    http://www.haute-disponibilite.net/2008/04/25/plateforme-materielle-exalead/

    Marc

      Facebook Twitter Linkedin

  8. Kedare says: 28 août 2009

    Hello,
    Simple curiosité, Vous utilisez quoi comme Base de données ? Et pour la recherche Fulltext ?

    Merci !

      Facebook Twitter Linkedin

  9. Carole&co says: 31 août 2009

    Aucune. Ou pour être plus précis aucune base de données relationnelle classique, style MySQL ou Oracle. Le métier d’Exalead c’est précisément de développer une base de donnée adaptée aux besoins d’un moteur de recherche, donc capable de traiter de très gros volumes de données et tournant sur le modèle du cloud computing.

      Facebook Twitter Linkedin

Laissez une réponse

Your email address will not be published. Required fields are marked *

*

You may use these HTML tags and attributes: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <strike> <strong>