LSA Is not Dead: Improving Results of Domain-Specific Information Retrieval System Using Stack Overflow Questions Tags

Szymon Olewniczak; Julian Szymański; Piotr Malak; Robert Komar; Agnieszka Letowska

doi:10.5220/0012358400003636

LSA Is not Dead: Improving Results of Domain-Specific Information Retrieval System Using Stack Overflow Questions Tags

Abstrakt

The paper presents the approach to using tags from Stack Overflow questions as a data source in the process of building domain-specific unsupervised term embeddings. Using a huge dataset of Stack Overflow posts, our solution employs the LSA algorithm to learn latent representations of information technology terms. The paper also presents the Teamy.ai system, currently developed by Scalac company, which serves as a platform that helps match IT project inquiries with potential candidates. The heart of the system is the information retrieval module that searches for the best-matching candidates according to the project requirements. In the paper, we used our pre-trained embeddings to enhance the search queries using the query expansion algorithm from the neural information retrieval domain. The proposed solution improves the precision of the retrieval compared to the basic variant without query expansion.

Cytowania

0

CrossRef
0

Web of Science
0

Scopus

Autorzy (5)

Szymon Olewniczak mgr inż.
Julian Szymański dr hab. inż.
Piotr Malak
Robert Komar
- Wydział Elektroniki, Telekomunikacji i Informatyki
- Politechnika Gdańska
Agnieszka Letowska
- Scalac sp. z o.o.

Cytuj jako

Pełna treść

pobierz publikację

pobrano 80 razy

Wersja publikacji: Accepted albo Published Version
Licencja: otwiera się w nowej karcie

pełna treść artykułu zobacz w serwisie zewnętrznym otwiera się w nowej karcie

Słowa kluczowe

Informacje szczegółowe

Kategoria:

Aktywność konferencyjna

Typ:

publikacja w wydawnictwie zbiorowym recenzowanym (także w materiałach konferencyjnych)

Język:

angielski

Rok wydania:

2024

Opis bibliograficzny:

Olewniczak S., Szymański J., Malak P., Komar R., Letowska A.: LSA Is not Dead: Improving Results of Domain-Specific Information Retrieval System Using Stack Overflow Questions Tags// / : , 2024,

DOI:

10.5220/0012358400003636

Źródła finansowania:

The National Centre for Research and Development within the project POIR.01.01.01-00-0761/20 "System sztucznej inteligencji korelujacy zespoły pracownikow z projektami IT"

Weryfikacja: