Thomas Murphy a présenté lors de l'atelier DA-3 un rapport sur l'efficacité des méthodes de recherche basées sur le LLM pour trouver les arrêts pertinents de la Cour suprême fédérale suisse. Afin de déterminer la qualité de la recherche, c'est-à-dire si les arrêts pertinents sont effectivement trouvés ou non, il est essentiel de disposer d'une collection test. Thomas utilise une collection test d'Eurospider comprenant 123 requêtes test pour lesquelles les arrêts pertinents sont connus. Il a comparé l'efficacité de recherche de différentes méthodes en fonction de leur rendement et de leur précision. Après de nombreuses expériences, une amélioration a été obtenue sur la collection test grâce à une combinaison de recherche vectorielle basée sur le LLM et de recherche textuelle optimisée pour les informations juridiques.