Nazwa Projektu:
Od danych do decyzji: Zaawansowany system AI do błyskawicznej analizy badań
Skontaktuj się
Wyobraź sobie system, który pozwala na swobodną rozmowę z setkami dokumentów jednocześnie. System, który błyskawicznie analizuje, rozumie i syntetyzuje ogromne ilości danych, dostarczając odpowiedzi na Twoje pytania. Tak właśnie działa nasz system RAG.
Od ponad roku, wspólnie z radlab, pracujemy nad autorskim systemem RAG (Retrieval-Augmented Generation). RAG to zaawansowane narzędzie AI, które łączy wyszukiwanie informacji z generowaniem odpowiedzi, pozwalając na inteligentną analizę ogromnych zbiorów dokumentów.
Aktualnie eksperymentujemy z wykorzystaniem RAG w badaniach z sektora publicznego. System może błyskawicznie przeanalizować dziesiątki raportów z ewaluacji programów UE i odpowiedzieć na dowolne pytanie dotyczące zawartych w nich danych i wniosków.
Co wyróżnia nasz RAG?
- Analizujemy nie 5 czy 10, ale setki dokumentów jednocześnie
- Trenujemy różne modele generatywne (Llama 3 i 3.1) na korpusie danych specyficznych z obszaru polityk publicznych, co zwiększa trafność odpowiedzi w porównaniu z modelami uniwersalnymi (modele mówią także po polsku)
- Tworząc odpowiedź, możemy kontrolować jego powstawanie i wybierać źródła, które go kształtują
- Trenujemy także inne modele do przetwarzania tekstu na dane numeryczne (klasyfikatory, embeddery, rerankery) oraz do czyszczenia danych, zapewniając dobrą jakość na każdym etapie procesu
Jak to działa?
- Konwertujemy dokumenty do postaci wektorowej, co umożliwia ich analizę przez generatywną AI
- Czyścimy dane, usuwając błędy i nieistotne informacje
- Wyszukujemy najbardziej odpowiednie fragmenty dokumentów
- Generujemy odpowiedzi na podstawie znalezionych informacji
Korzyści dla sektora publicznego
- Dostęp do wiedzy dzięki błyskawicznej analizie tysięcy dokumentów
- Dobre odpowiedzi na złożone pytania
- Lepsza podstawa do podejmowania decyzji
Jesteśmy blisko finalizacji tego projektu i wkrótce udostępnimy wyniki oraz playground do testowania!