LiveAssist – lokalny asystent rozmowy w czasie rzeczywistym

LiveAssist to projekt badawczy lokalnego asystenta wspierającego handlowców, konsultantów, lekarzy i doradców podczas rozmowy. System analizuje wypowiedzi w czasie rzeczywistym, przeszukuje kontrolowaną bazę wiedzy organizacji, wyświetla kontekstowe podpowiedzi, a po zakończeniu spotkania przygotowuje notatkę, zadania, projekt wiadomości oraz dane do zapisania w CRM.

LiveAssist to projekt badawczy systemu wspomagającego profesjonalistów prowadzących rozmowy wymagające jednoczesnego korzystania z wiedzy organizacyjnej, dokumentowania ustaleń i podejmowania decyzji. Rozwiązanie ma działać na laptopie lub tablecie użytkownika i dostarczać podpowiedzi w czasie rzeczywistym, bez konieczności przesyłania treści rozmowy do zewnętrznych, ogólnodostępnych usług chmurowych.

Problem badawczy

Handlowcy, konsultanci, lekarze, prawnicy i doradcy mogą prowadzić codziennie wiele rozmów, z których każda wymaga dostępu do innego zestawu informacji.

Mogą to być między innymi:

  • historia klienta lub pacjenta,
  • katalog produktów i usług,
  • aktualne cenniki,
  • dokumenty techniczne,
  • procedury wewnętrzne,
  • regulacje prawne,
  • wcześniejsze ustalenia,
  • status prowadzonych spraw.

Po zakończeniu rozmowy użytkownik musi dodatkowo przygotować notatkę, zaktualizować CRM, zapisać zadania i wysłać wiadomość podsumowującą. Dostępne narzędzia koncentrują się głównie na nagrywaniu, transkrypcji i analizie przeprowadzanej po zakończeniu spotkania. LiveAssist ma działać w trakcie rozmowy i natychmiast udostępniać informacje potrzebne użytkownikowi.

Opis rozwiązania

LiveAssist będzie składał się z czterech głównych modułów.

1. Transkrypcja w czasie rzeczywistym - pierwszy moduł będzie odpowiadał za lokalne lub działające w kontrolowanej infrastrukturze rozpoznawanie mowy.

2. Kontekst organizacyjny i RAG - drugi moduł będzie przeszukiwał bazę wiedzy organizacji na podstawie przebiegu rozmowy.

3. Podpowiedzi podczas rozmowy - podpowiedzi mają mieć charakter wspierający, a ich wykorzystanie pozostaje po stronie użytkownika.

4. Dokumentacja po zakończeniu rozmowy - po zakończeniu spotkania system ma automatycznie przygotowywać.

Luka technologiczna

Projekt odpowiada na brak systemu łączącego jednocześnie:

  • działanie w czasie rzeczywistym,
  • lokalne lub izolowane przetwarzanie,
  • dostęp do wewnętrznej wiedzy organizacji,
  • generowanie podpowiedzi podczas rozmowy,
  • automatyczne przygotowanie dokumentacji,
  • integrację z CRM,
  • kontrolę użytkownika nad przetwarzaniem danych.

Prywatność i zgodność

LiveAssist ma być rozwijany zgodnie z zasadami privacy by design i minimalizacji danych.

Odbiorcy projektu

LiveAssist jest przeznaczony dla organizacji posiadających zespoły prowadzące dużą liczbę rozmów zawodowych.

Potencjalni odbiorcy to:

  • przedsiębiorstwa z zespołami sprzedaży,
  • software houses,
  • firmy konsultingowe,
  • kliniki i placówki medyczne,
  • kancelarie prawne,
  • firmy ubezpieczeniowe,
  • instytucje finansowe,
  • zespoły obsługi klienta,
  • organizacje prowadzące specjalistyczne doradztwo.

Pilotaże i walidacja

Projekt zakłada przeprowadzenie testów na co najmniej 100 rozmowach oraz dwóch pilotaży w organizacjach reprezentujących różne profile zastosowania.

Status i oczekiwane rezultaty

Projekt znajduje się na poziomie TRL 2. Dostępne są komponenty infrastrukturalne niezbędne do rozpoczęcia prac: środowisko GPU, lokalne modele językowe, rozpoznawanie mowy, stos technologiczny RAG oraz doświadczenie w aplikacjach działających w czasie rzeczywistym. Rezultatem projektu będzie MVP gotowe do pilotaży komercyjnych, dwie integracje CRM, metodyka oceny trafności podpowiedzi oraz publikacja naukowa dotycząca systemów wspomagania decyzji podczas rozmów.

Powiązane osoby: dr hab. inż. Piotr Senkus

Udostępnij: LinkedIn X / Twitter Facebook