We’ll create a bespoke patient video based on the specialist documentation: the doctor selects the diagnosis and patient group, the AI suggests scenes, and the doctor approves them.
The problem Doctors explain the same information to patients over and over again, but they have little time for each one. Under stress, patients cannot remember everything, and when they look things up online at home, they find information that frightens them even more.
Solution EduAIttractive transforms specialist material (a document, transcript or recording) into a short video tailored to a specific patient. The video follows on from the consultation with the doctor, explaining things simply, step by step, and clearly distinguishing between what applies generally and what depends on the patient’s specific condition.
How it works
- Source material. The doctor uploads a PDF, Word document, text, transcript or recording. They may optionally select a diagnosis from the ICD-10-CZ code list.
- Target audience. Age (from children to the over-75s), situation, language style, length, purpose and tone of the video, format (landscape, portrait, square) and image style (3D or flat illustrations).
- Three perspectives on the same task. The AI proposes three scenarios: a step-by-step explanation, a practical perspective, and the patient’s questions and concerns. The doctor edits these in the editor (up to 20 scenes).
- Approval. The doctor goes through the scenes one by one. They approve each scene individually, and approval is tied to the exact wording of each sentence.
- Video. A video is rendered with voice-over, subtitles and illustrations.
What we believe and what we don’t The video content is based on recorded specialist materials, not on the internet as a whole. Each sentence includes a reference to its source and a measure of support (stated in the source / transcribed / beyond the scope of the source). A sentence that goes beyond the scope of the source cannot be approved without editing. The AI makes suggestions; the doctor makes the decision.
Technologies Azure OpenAI (scripting), Azure AI Speech (transcription and voice), an image model on Azure (illustrations), Remotion (rendering), Next.js.
What we’ve achieved The entire workflow, from uploading a document to the finished video, is fully operational. It includes an animated tutorial using sample data.
Next steps
- A library of approved reference materials linked to ICD-10 diagnoses, so that doctors do not need to upload anything.
- Measuring the benefits: time saved by doctors and patients’ understanding after watching the video.
- Regular clinical review and content updates.
- Had before
- nič
- Use of AI
- Používáme Azure OpenAI (GPT) na rozdělení přepisu nahrávky do témat a na návrh scén z pevného katalogu motivů, Azure AI Speech na přepis řeči a syntetický hlas na namluvení vět, obrazový model (MAI-Image na Azure) na ilustrační snímky a vizuální model na určení polohy objektů v nich. Pracujeme jen s podklady od odborníků, žádná data pacientů nenahráváme. Správnost hlídá architektura: každá věta nese odkaz na zdroj (čas v nahrávce) a míru opory (zdroj to říká / přeformulováno / nad rámec zdroje). Věta nad rámec zdroje nejde schválit, jen přepsat, podložit nebo odstranit. Pravidlové kontroly (např. délka titulků) běží mimo AI. Každou scénu schvaluje zdravotník a schválení se váže na otisk přesného znění věty, takže jakákoli změna ho zruší. Generované obrázky jsou označené „vytvořeno AI“ a nenesou žádná fakta, ta jsou jen v textu.
- Impact
- Z jedné odborné nahrávky vznikne 30–60s video pro konkrétní skupinu pacientů (věk, situace, jednodušší jazyk) v řádu minut místo týdnů klasické produkce. Práce zdravotníka se zúží na schválení scén, takže kapacita odborníků jde do péče, ne do natáčení. Odhad: při 10–20 videích měsíčně úspora desítek hodin odborníka a výrazně nižší produkční náklady. Pacient dostane srozumitelnou a ověřenou informaci, která navazuje na rozhovor s lékařem: lépe se připraví na návštěvu, méně se opakují stejné dotazy a roste šance, že léčbu pochopí a dodrží. Oprava jedné scény se přegeneruje bez nové produkce celého videa, takže lze levně vytvářet varianty pro další cílové skupiny a jazyky a obsah průběžně aktualizovat.
- Who benefits
- Patients and their families, Doctors and nurses
- InterSystems technologies
- No
Machine translation from Czech
- Team
- JOTOZO & Magdalánka — Zuzana Kuchťáková, Magdaléna Kuchťáková, Jorik Veselko
- Challenge
- EduAIttractive · Brno