Using web scraping to optimize databases. Implementation project

Celem podjętym w tej pracy jest stworzenie słownika słów kluczowych bazy wynalazków CITTRU Uniwersytetu Jagiellońskiego, który mógłby się przyczynić do jej usprawnienia. Analiza bazy danych wykazała odstępstwa od zasad poprawnego zapisu słów kluczowych, co świadczyło o braku gotowego słownika. Dane zostały pobrane ze strony z zastosowaniem techniki web scraping i poddane stosownym modyfikacjom, a następnie wygenerowano z nich gotowy słownik zawierający 228 pozycji. Dodatkowo ustalono występujące pomiędzy słowami kluczowymi relacje bazujące na synonimii i bliskości podejmowanych zakresów tematycznych, przedstawiając możliwości ich zastosowania w usprawnieniu generowania opisów ofert i poprawienia działania wyszukiwarki, a także zaproponowano badanie z zakresu User Experience Design.

The purpose of this work is to create a keyword dictionary of the CITTRU invention database of Jagiellonian University, which could contribute to its improvement. Analysis of the database revealed deviations from the rules of correct keyword notation, which indicated the lack of a ready-made dictionary. The data was downloaded from the site using web scraping technique and subjected to modifications, which generated a dictionary containing 228 keywords. In addition, the work established relationships occurring between certain keywords, based on synonymy and the similarity of the concerned subject, showcasing the resulting possibilities for their use in creating descriptions of offers, improving search engine performance, and proposed a User Experience Design study.