Elasticsearch

Juste un petit message pour savoir si certains d'entre vous ont déjà utilisé Elasticsearch sur un de leur projet ?

Oui, nous l'utilisons en prod pour la recherche et le "clustering" des points sur https://fr.chargemap.com. Nous prévoyons de l'utiliser également pour notre système de BI.

Niveau performances, c'est top. Le plus pénible c'est de bien faire la synchro entre la base de données PostgreSQL et l'index d'Elasticsearch pour que les deux n'aient pas d'incohérence.

Avec du "queuing" (RabbitMQ ou autre) on peut facilement garder la synchro entre les deux systèmes. On utilise RabbitMQ pour faire pas mal de tâches en ce sens. Après il faut garder une commande de resynchro totale au cas où.
Pour la recherche, on utilise SphinxSearch.

Pour avoir une perf descente avec du "home made" je te souhaite quand même bien du courage, sans parler de la compréhension du langage ...

SphinxSearch est plus accessible mais moins puissant (moins de fonctionnalité, doc au lance pierre), mais je pense que pour énormément de besoin à notre niveau, il suffit très largement, et comme c'est une syntaxe "SQL", tu peux même garder tes outils. Sur ce forum, il y en a qui forme pas mal pour l'utiliser ;)

ElasticSearch c'est la solution en vogue et très puissante, assez complexe à prendre en main mais je pense que tu trouveras forcement plus d'aide sur les forums et Q&R (anglais). Il suffit de regarder la liste des clients pour comprendre le succès du produit, tel que FB, ebay, github, netflix, salesforce etc.

ES semble bien adapté à tes besoins. Les facettes typiquement c'est LA feature pour laquelle on l'utilise en premier.

Regarde le site de Blablacar, leur moteur de recherche est fait avec ES.

J'ai déjà bossé avec, si tu veux en parler pas de soucis.

Bonjour,

Merci à tous pour vos réponses, j'ai regardé une vidéo du CTO Blablacar très intéressante pour bien comprendre le fonctionnement d'elasticsearch. Par ailleurs, la documentation est on ne peut plus claire et la facilité pour démarrer impressionnante :-)

Je conseille à ceux qui veulent améliorer leur recherche d'y jeter un coup d'oeil ça vaut vraiment le coup

La perf, la scalabilité (suffit d'ajouter un serveur dans le cluster et paf c'est reparti) et la puissance de la recherche : mots clés, synonymes, pondération, scoring, facettes... un truc infaisable avec MySQL et tout ça ultra rapidement.

Le seul inconvénient c'est qu'il faut maintenir une deuxième base de données mais à partir du moment où on a besoin de faire de la vraie recherche MySQL ne suffit plus.

Oui y'a vraiment des trucs que tu mettrais des mois à développer, je suis sûr que ça t'intéresserait JC

Concernant le maintien de la deuxième bdd, c'est hyper simple. Elasticsearch est considéré comme une base instable = ils ne veulent pas que tu t'en serves pour des données qui sont disponibles uniquement dans la bdd elasticsearch ; et il s'agit d'une base NoSQL. Il suffit donc de faire un script qui te génère l'index de la bdd en json puis l'indexer par paquet de 1.000 à 5.000 datas. Un index se reconstruit rapidement.

Si tu veux je pourrai échanger mon expérience par rapport à brico une fois que ce sera mis en place

j'ai mis en prod il y a plusieurs mois pour un client. install rapide et simple. toutes les nuits je recharge complètement l'index ( ça prend rien et marché FR, donc à 3h du mat', ca ne gène personne )

api php nickel aussi. je recommande, je suis en train de le mettre en place pour un autre système de recherche de duplicate dans du contenu.