Wykonanie w ramach prac badawczo-rozwojowych algorytmów AI i ML wspierających pracę lekarzy oraz wspierających komunikację z pacjentem,

Usługi informatyczne: konsultacyjne, opracowywania oprogramowania, internetowe i wsparcia, w tym dostawy

Tryb zamówienia	Zapytanie ofertowe
Rodzaj zamówienia	Usługi
Tytuł	Wykonanie w ramach prac badawczo-rozwojowych algorytmów AI i ML wspierających pracę lekarzy oraz wspierających komunikację z pacjentem,
Zamawiający	Dostępne dla zalogowanych
Miejsce realizacji	Polska
Data publikacji	2024-09-23
Data składania ofert	02/10/2024, Godzina 23:59
Dokumenty do pobrania	Dostępne dla zalogowanych
Kod CPV	722600005 Usługi w zakresie oprogramowania 722660007 Usługi doradcze w zakresie oprogramowania
Numer przetargu	5691972

<div>
<h1>ZAPYTANIE OFERTOWE nr 1/SMART/09/2024</h1>
<h2>Załączniki</h2>
<ul>
<li><a href="https://bazakonkurencyjnosci.funduszeeuropejskie.gov.pl/api/files/1602689">ZAŁĄCZNIK 1_form_ofert</a></li>
<li><a href="https://bazakonkurencyjnosci.funduszeeuropejskie.gov.pl/api/files/1602692">ZAŁĄCZNIK 2_osw_wykluczenia</a></li>
<li><a href="https://bazakonkurencyjnosci.funduszeeuropejskie.gov.pl/api/files/1602690">ZAŁĄCZNIK 3_osw_warunki</a></li>
<li><a href="https://bazakonkurencyjnosci.funduszeeuropejskie.gov.pl/api/files/1602691">ZAŁĄCZNIK 4_osw_RODO</a></li>
<li><a href="https://bazakonkurencyjnosci.funduszeeuropejskie.gov.pl/api/files/1602694">Zap_ofert_nr_1_SMART_09_2024_podpisany</a></li>
<li><a href="https://bazakonkurencyjnosci.funduszeeuropejskie.gov.pl/api/files/1602693">Zap_ofert_nr_1_SMART_09_2024_wer_niedysk</a></li>
</ul>
<h2>Części zam&oacute;wienia</h2>
<h3>Postępowanie numer: 1/SMART/09/2024 na wyb&oacute;r Podwykonawcy</h3>
Przedmioty zam&oacute;wienia
Przedmiotem zam&oacute;wienia jest wykonanie w ramach prac badawczo-rozwojowych algorytm&oacute;w AI i ML wspierających pracę lekarzy oraz wspierających komunikację z pacjentem, kt&oacute;rych celem jest zwiększenie stosowania się pacjent&oacute;w do zaleceń medycznych. Szczeg&oacute;łowa specyfikacja przedmiotu zam&oacute;wienia o minimalnych parametrach: PRACE BADAWCZO &ndash; ROZWOJOWE W RAMACH POSZCZEG&Oacute;LNY ZADAŃ PRZEWIDZIANE DLA WYKONAWCY: ZADANIE 1: Opracowanie systemu detekcji niesp&oacute;jności i błęd&oacute;w w dokumentacji medycznej 1. Opracowanie modelu AI do wykrywania błęd&oacute;w i niesp&oacute;jności w dokumentacji medycznej: a) Zbudowanie i przeszkolenie modelu sztucznej inteligencji zdolnego do wykrywania błęd&oacute;w w dokumentacji medycznej, takich jak nieprawidłowe dawkowanie lek&oacute;w, niejasne skr&oacute;ty, brak istotnych informacji, czy niesp&oacute;jności w zaleceniach medycznych. b) Bazy danych: Modele będą trenowane i testowane na zanonimizowanej bazie dokumentacji medycznej, kt&oacute;ra zostanie dostarczona przez Zamawiającego. Baza będzie zawierała dokumenty z co najmniej 10 plac&oacute;wek medycznych, reprezentujących trzy r&oacute;żne typy plac&oacute;wek o r&oacute;żnych specjalizacjach. Dane będą pochodzić od minimum 20 r&oacute;żnych lekarzy i obejmować co najmniej 10 000 dokument&oacute;w, w tym opisy wywiad&oacute;w medycznych, opisy badań laboratoryjnych i obrazowych oraz zalecenia lekarskie. Baza zostanie przygotowana i zaanotowana przez Zamawiającego. 2. Zdefiniowanie i optymalizacja wskaźnik&oacute;w skuteczności wykrywania błęd&oacute;w: a) Przeprowadzenie eksperyment&oacute;w mających na celu osiągnięcie F1-Score na poziomie minimum 85% w systemie detekcji błęd&oacute;w. b) Ocena poprawności wykrytych błęd&oacute;w na podstawie wcześniej zanonimizowanych danych medycznych dostarczonych przez Zamawiającego. c) Wsp&oacute;łpraca z ekspertami medycznymi Zamawiającego do walidacji wynik&oacute;w detekcji AI. 3. Opracowanie modelu AI generującego podpowiedzi w wybranych przypadkach: a) Opracowanie modelu AI generującego sugestie poprawek dla lekarza dla wybranych klas przypadk&oacute;w (np. Ręka prawa / lewa, częstotliwość na dzień / tydzień itd.). b) Bazy danych: Proces generowania podpowiedzi będzie testowany na dodatkowej bazie 1 000 rekord&oacute;w, pochodzącej z dokumentacji medycznej, dla kt&oacute;rych eksperci wskażą możliwość zastosowania systemu podpowiedzi. Dane te zostaną poddane ręcznej anotacji przez ekspert&oacute;w Zamawiającego, a następnie posłużą jako punkt odniesienia dla systemu podpowiedzi. c) Analiza algorytm&oacute;w &bdquo;self-evaluation&rdquo; oraz &bdquo;cross-validation&rdquo; w celu oceny zgodności wygenerowanych sugestii z opiniami ekspert&oacute;w. 4. Poprawa wygenerowanych modeli po przeprowadzeniu test&oacute;w przez Zamawiającego. BADANIA PRZEMYSŁOWE - PLANOWANY CZAS REALIZACJI ZADANIA: 10 MIESIĘCY (M1-M10) ZADANIE 2: Opracowanie metody bezpiecznego zwiększania zrozumiałości dokumentacji i zaleceń medycznych 1. Dostosowanie miar oceny czytelności tekstu a) Wykonawca opracuje metody dostosowania miar trudności tekstu (PLI &ndash; Polski Indeks Czytelności i SMOG) do dokumentacji medycznej w języku polskim. o Budowa polskiego medycznego korpusu językowego dla algorytmu oceny czytelności tekstu MOG przy użyciu dużych modeli językowych we wsp&oacute;łpracy z konsultantami medycznymi zamawiającego. o Kalibracja istniejących algorytm&oacute;w dla polskiego języka medycznego. b) Opracowane miary będą wykorzystywane do kontroli jakości upraszczania dokumentacji oraz zaleceń medycznych przez Zamawiającego i Wykonawcę w trakcie kolejnych zadań. 2. Generowanie bazy uproszczeń do anotacji za pomocą: a) Wykonawca wykorzysta modele LLM (Large Language Models), dostępne medyczne korpusy językowe, słowniki medyczne oraz istniejące na rynku oprogramowanie (np. Logios) do generowania uproszczeń dokumentacji medycznej dla pacjenta. Celem jest osiągnięcie uproszczeń zr&oacute;żnicowanych pod kątem: o długości tekstu o Jakości o Zrozumiałości - w szczeg&oacute;lności dla os&oacute;b o r&oacute;żnym wieku, poziomie edukacji oraz na urządzeniach o r&oacute;żnej wielkości wyświetlaczach o stylu b) Wzbogacenie bazy streszczeń o celowo indukowane błędy takie jak: o Losowe usunięcie fragmentu tekstu (np. kluczowej informacji medycznej), o Zamiana wartości liczbowych (np. dawki lek&oacute;w), o Zmiana jednostek chorobowych lub innych kluczowych informacji. Celem celowego indukowania błęd&oacute;w jest zwiększenie ich udziału w badanej pr&oacute;bie oraz umożliwienie kontroli jakości pracy anotator&oacute;w Zamawiającego. c) Baza danych: minimum 1000 dokument&oacute;w wybranych ze zbioru z Zad. 1 3. Opracowanie algorytmu automatycznej oceny bezpieczeństwa uproszczenia dokumentacji medycznej a) Na podstawie bazy uproszczonej w Zadaniu 2.1. Zamawiający dokona eksperckiej oceny błęd&oacute;w, jakie zostały zrobione w trakcie tworzenia wygenerowanych uproszczonych dokument&oacute;w medycznych. Oceniane będą r&oacute;żnorodne elementy dokument&oacute;w, takie jak: o opis przypadku / wywiad o opis wykonanych badań i procedur o diagnoza o zalecenia b) Szczeg&oacute;lny nacisk zostanie położony na błędy wpływające na bezpieczeństwo pacjenta, takie jak pominięcia oraz halucynacje. Zastosowana zostanie metodologia analogiczna do publikacji Zaretsky, Jonah, et al. "Generative artificial intelligence to transform inpatient discharge summaries to patient-friendly language and format." JAMA network open 7.3 (2024): e240357-e240357. c) W ramach zadania Wykonawca na podstawie przygotowanej bazy opracowuje algorytm automatycznej oceny bezpieczeństwa uproszczenia dokumentacji medycznej. System ten będzie por&oacute;wnywał tekst wyjściowy oraz uproszczony i wykrywał istotne błędy medyczne uproszczenia oraz ich typ. Planowane jest określenie F1-score na poziomie 85%. Wykonawca w ramach badań przetestuje minimum 3 r&oacute;żne metody wykrywania błęd&oacute;w, takie jak: Self-validation (walidacja za pomocą tego samego modelu językowego), Cross-validation (walidacja za pomocą innego językowego), feature extraction (por&oacute;wnanie za pomocą por&oacute;wnania listy poszczeg&oacute;lnych cech poszczeg&oacute;lnych tekst&oacute;w za pomocą modeli językowych), feature reasoning (zadawanie do obydwu tekst&oacute;w pytań dotyczących ich wpływu na proces leczenia, takich jak &ldquo;czy z tekstu wynika, że mam um&oacute;wić się na wizytę u specjalisty&rdquo;) oraz kombinacji r&oacute;żnych metod połączonych z modelem klasyfikacyjnym. Lista pytań oraz szczeg&oacute;ły testowanych prompt&oacute;w będą ustalane ze specjalistami medycznymi Zamawiającego. 4. Budowa algorytm&oacute;w upraszczających dokumentację medyczną nie generujących błęd&oacute;w powodujących ryzyko medyczne a) Aby zbudować algorytmy upraszczające dokumentację medyczną nie generujące błęd&oacute;w powodujących ryzyko medyczne planowane jest, że Wykonawca wypr&oacute;buje następujące metody: o Wyb&oacute;r sieci oraz prompt&oacute;w z Zadania 2.2 generujących najlepsze wyniki o Optymalizacja prompt&oacute;w o Klastrowanie wynik&oacute;w wygenerowanych r&oacute;żnymi wariantami, klastrowanie i budowa tekst&oacute;w konsensusowych o Obr&oacute;bka iteracyjna tekst&oacute;w, np. najpierw generowanie pośredniej najprostszej semantycznie formy tekstu (np. pozbawionej zdań złożonych) o Podział tekstu na części o r&oacute;żnym znaczeniu i upraszczane każdej z nich z osobna. o Użycie korpusu językowego oraz ekspercko wyselekcjonowanych najprostszych do zrozumienia termin&oacute;w medycznych. b) W ramach prac wykonawca przeprowadzi minimum 50 r&oacute;żnych eksperyment&oacute;w optymalizując wartości metryk bezpieczeństwa oraz czytelności tekst&oacute;w. Końcowe oraz pośrednie wyniki będą analizowane przez konsultant&oacute;w medycznych Zamawiającego. Oczekiwane jest zmniejszenie częstości występowania błęd&oacute;w powodujących ryzyko dla pacjenta do 5%, co umożliwi ich ręczną weryfikację przez personel medyczny przed przekazaniem pacjentowi. 5. Automatyczna ekstrakcja zaleceń medycznych: a) Celem podzadania jest poprawna ekstrakcja z dokumentacji medycznej pacjenta szczeg&oacute;lnego rodzaju informacji - zaleceń dla pacjenta. Zalecenia mogą obejmować: o wykup recepty o przyjmowanie lek&oacute;w o wykonanie badań (i zapisanie się na nie) o powt&oacute;rną wizytę u specjalisty wykonującego badanie o wizytę u innego specjalisty (w tej samej lub innej plac&oacute;wce) o wykonanie zabieg&oacute;w (np. fizjoterapeutycznych) o wykonanie ćwiczeń o zalecenia dietetyczne o obserwacje o ograniczenia (np. nie jeździć na rowerze) o inne specyficzne zalecenia (np. stosować wkładki do but&oacute;w) Zalecenia mogą być sformułowane wprost lub warunkowo (np. jeżeli b&oacute;l nie ustanie w przeciągu 3 dni, proszę&hellip;.) Dla zaleceń istotne jest nie tylko uproszczenie fragment&oacute;w treści opisujący zalecenia, ale także zaprezentowanie ich w postaci jednolitej listy. Istotne jest także określenie typu zalecenia, gdyż na tej podstawie system Proassist będzie sugerował kolejne działania, np. rejestrację wizyty. b) Do wykonania tego zadania Zamawiający przekaże Wykonawcy bazę minimum 1000 listy zadań przygotowanych przez ekspert&oacute;w z historycznej dokumentacji pacjent&oacute;w. c) W ramach tego podzadania Wykonawca: o Stworzy metryki umożliwiające zgodność tworzonych za pomocą algorytm&oacute;w list na podstawie dokumentacji medycznych ze standardem przygotowanym przez ekspert&oacute;w. o Dokona optymalizacji modeli z podzadania 2.4 tak, aby skutecznie tworzyły listę zaleceń dla pacjenta. o Wykona model klasyfikujący typy zaleceń. o Dokona ewaluacji i optymalizacji modeli na podstawie wynik&oacute;w test&oacute;w wykonanych. przez ekspert&oacute;w medycznych Zamawiającego. BADANIA PRZEMYSŁOWE - PLANOWANY CZAS REALIZACJI ZADANIA: 14 MIESIĘCY (M11-M24) ZADANIE 3. Testy w warunkach zbliżonych do rzeczywistych 1. Rozszerzenie i dostosowanie modeli AI W ramach Zadania 3 Wykonawca dokona rozszerzenia i dostosowania modeli opracowanych w ramach Zadania 2 oraz Zadania 3 na podstawie wynik&oacute;w test&oacute;w wykonanych przez Zamawiającego w warunkach zbliżonych do rzeczywistych. PRACE ROZWOJOWE - PLANOWANY CZAS REALIZACJI ZADANIA: 12 MIESIĘCY (M25-M36)
<h2>Kryteria oceny</h2>
Zgodnie z opisem Zapytania pkt. XX tj. KRYTERIUM - WAGA: K1: Cena netto: 100% (100 pkt) PC= ( Cn/Co) x 100 pkt. Gdzie: PC &ndash; oznacza liczbę punkt&oacute;w, kt&oacute;re uzyskała dana oferta Cn &ndash; oznacza cenę najniższą netto wśr&oacute;d złożonych ofert, Co &ndash; oznacza cenę netto oferty badanej.
<h2>Warunki zmiany umowy</h2>
WARUNKI ISTOTNYCH ZMIAN UMOWY ZAWARTEJ W WYNIKU PRZEPROWADZONEGO POSTĘPOWANIA O UDZIELENIE ZAM&Oacute;WIENIA 1) Zamawiający przewiduje możliwość wprowadzenia istotnych zmian postanowień zawartej umowy z wybranym Wykonawcą w stosunku do treści oferty, na podstawie kt&oacute;rej dokonano wyboru Wykonawcy. 2) Dokonywanie istotnych zmian postanowień zawartej umowy w stosunku do treści oferty, na podstawie kt&oacute;rej dokonano wyboru Wykonawcy następuje z uwzględnieniem zmian przewidzianych i określonych w pkt. 4 Sekcji 3.2.4. Wytycznych dotyczących kwalifikowalności wydatk&oacute;w na lata 2021-2027 oraz zapis&oacute;w niniejszego punktu określonych poniżej. 3) Dopuszczalny zakres zmian obejmuje: a) jeżeli umowa została zawarta pod warunkiem zawieszającym polegającym na wpisaniu projektu Zamawiającego na listę projekt&oacute;w, kt&oacute;rym Instytucja przyznała dofinansowanie (co jest zdarzeniem poprzedzającym zawarcie umowy o dofinansowanie) - możliwa jest zmiana tego warunku zawieszającego przez ustalenie, że warunek ten będzie polegał na zawarciu przez Zamawiającego z Instytucją umowy o dofinansowanie projektu. Zmiana w tym zakresie może skutkować odpowiednią zmianą (dostosowaniem) początku terminu realizacji umowy lub terminu końcowego, b) określenie zaliczek na poczet wynagrodzenia, c) zmiana sposobu zapłaty wynagrodzenia z jednorazowej na częściowe (płatne etapami) lub z częściowych na jednorazową, d) zmiana terminu zapłaty wynagrodzenia lub jego części, e) zmniejszenie zakresu zam&oacute;wienia, tj. zmniejszenie zakresu usług będących przedmiotem zam&oacute;wienia, w szczeg&oacute;lności w przypadku, gdyby poszczeg&oacute;lne usługi okazały się niecelowe lub gdyby Zamawiający nie uzyskał dofinansowania pozwalającego na ich sfinansowanie (przy czym w przypadku zmiany wniosku o dofinansowanie, na podstawie kt&oacute;rego Zamawiający realizuje projekt lub w przypadku nieotrzymania dofinansowania na pełen zakres zam&oacute;wienia, Zamawiający jest uprawniony do dokonania jednostronnej zmiany w ww. zakresie); f) zwiększenie zakresu zam&oacute;wienia (wymiaru określonych usług objętych przedmiotem zam&oacute;wienia) w zakresie nie wyższym niż 15% wartości usług, kt&oacute;rych wymiar jest zwiększany; g) jeśli się to okaże konieczne ze względu na zmianę przepis&oacute;w powszechnie obowiązującego prawa po zawarciu umowy, w zakresie niezbędnym do dostosowania Umowy do zmienionych przepis&oacute;w, w tym np. w przypadku zmiany stawek VAT, itp; h) zmiany specyfikacji przedmiotu umowy pod warunkiem, że nie wpływa ona na cenę, w przypadku zapewnienia r&oacute;wnoważności proponowanych rozwiązań lub w przypadku zaproponowania przez Oferenta rozwiązań lepszych pod warunkiem, że Oferent wykaże, że nowe rozwiązania są lepsze lub będą lepsze dla Zamawiającego; i) zmian istotnych umowy w stosunku do treści oferty w przypadku zmiany w: &bull; umowie o dofinansowanie &bull; Wytycznych dotyczących kwalifikowalności wydatk&oacute;w na lata 2021-2027 lub innych Wytycznych programowych wymaganych do stosowania przez Wykonawcę z tytułu realizacji przedmiotu zam&oacute;wienia w ramach projektu. j) zmiany terminu rozpoczęcia lub wykonania zam&oacute;wienia o nie więcej niż 6 miesięcy &ndash; niezależnie od przyczyn, k) zmiany terminu realizacji zam&oacute;wienia, w tym terminu początkowego lub termin&oacute;w poszczeg&oacute;lnych etap&oacute;w, gdy: - zaistnieje niemożliwa do przewidzenia w momencie zawarcia umowy okoliczność faktyczna, prawna, ekonomiczna lub wystąpi siła wyższa - okoliczność, za kt&oacute;rą żadna ze stron nie ponosi odpowiedzialności, skutkująca brakiem możliwości należytego wykonania zawartej umowy, w tym także z uwagi na utrudnienia stanowiące skutki pandemii Covid-19 lub innej epidemii/stanu zagrożenia epidemicznego, takie jak ograniczenia administracyjne, przestoje w transporcie międzynarodowym, itp. - wykonanie zam&oacute;wienia w terminie określonym w Umowie jest niemożliwe z powodu okoliczności leżących po stronie/ za kt&oacute;re ponosi odpowiedzialność Zamawiający, w tym z uwagi na terminy określone w harmonogramie realizacji Projektu, w ramach kt&oacute;rego realizowane będzie zam&oacute;wienie, - określony w umowie warunek zawieszający został spełniony po planowanym terminie rozpoczęcia Umowy, - termin naboru lub oceny wniosku o dofinansowanie, o kt&oacute;rym mowa w pkt. II. 2 uległ przedłużeniu, co skutkuje przedłużeniem terminu uzyskania dofinansowania przez Zamawiającego. 4) Umowa warunkowa zawarta w wyniku postępowania wszczętego na skutek niniejszego zapytania ofertowego, może zostać zmieniona w drodze aneksu do umowy. 5) Zamawiający jest uprawniony do rozwiązania Umowy ze skutkiem natychmiastowym w przypadku zakwestionowania procedury wyboru Wykonawcy przez Instytucję udzielającą dofinansowania lub w przypadku stwierdzenia błęd&oacute;w w przeprowadzeniu tej procedury. 6) Wszelkie zmiany i uzupełnienia do umowy z Wykonawcą dokonywane będą w formie pisemnej, pod rygorem nieważności. 7) Nie stanowi zmiany umowy: a) zmiana danych związanych z obsługą administracyjno-organizacyjną umowy (np. zmiana nr rachunku bankowego,); b) zmiana nazw stron lub ich formy prawnej (przy zachowaniu ciągłości podmiotowości prawnej) teleadresowych, zmiana os&oacute;b wskazanych do kontakt&oacute;w miedzy Stronami; c) udzielenie zam&oacute;wień uzupełniających wykraczających poza Przedmiot Zam&oacute;wienia.
</div>