NotebookLM či ChatGPT na dokumenty: rozhodujú citácie

Ak musí čitateľ pri každom dôležitom tvrdení nájsť príslušnú pasáž v dokumente, vhodnejší je NotebookLM. Ak je hlavnou úlohou vytvoriť z podkladov zrozumiteľný text v rôznych podobách, viac voľnosti dáva ChatGPT. Pilotné akademické porovnanie s jedným PDF a jedným zadaním zachytilo tento rozdiel: v skúšanej konfigurácii NotebookLM ponúkol dohľadateľné pasáže, zatiaľ čo ChatGPT vytvoril čitateľný súhrn bez rovnako priamych odkazov. Takto úzko postavený pokus nie je všeobecným rebríčkom produktov.

Google premenoval NotebookLM na Gemini Notebook; naďalej ide o samostatný produkt. ChatGPT podľa prehľadu práce so súbormi od OpenAI umožňuje sumarizovať a porovnávať dokumenty, analyzovať tabuľky aj upravovať štýl textu. Rozhodujúca otázka preto znie, či má byť výsledok predovšetkým podkladom na kontrolu zdrojov, alebo materiálom na ďalšie spracovanie.

Kedy citácia skutočne pomáha

Klikateľná citácia šetrí prácu iba vtedy, keď vedie k pasáži, ktorá podopiera práve tvrdenie vedľa odkazu. Správny názov dokumentu nestačí: označený úsek musí obsahovať údaj, podmienku alebo záver, ktorý sa objavil v súhrne. Pri rešerši a internom analytickom podklade je rozdiel medzi odkazom na celý súbor a odkazom na príslušnú vetu podstatný.

V skúšanej konfigurácii NotebookLM sa dali tvrdenia spojiť s miestami v nahranom texte, no niektoré označené úseky boli príliš široké alebo nerelevantné. Citácia teda skracuje cestu ku kontrole; sama o sebe ešte neznamená, že súhrn vystihol zdroj presne. Ak odpoveď vypustí výnimku, zamení možnosť za povinnosť alebo spojí údaje z rôznych období, treba opraviť samotné tvrdenie.

Rovnako záleží na kvalite nahraného podkladu. Presný odkaz na staršiu verziu interného pravidla dokazuje, čo stojí v tejto verzii, ale nerieši, či už platí novšia. Pri protichodných dokumentoch treba vidieť aj ich pôvod a vzájomný vzťah; plynulý spoločný súhrn môže rozdiel medzi nimi zakryť.

Rozhodovacia matica podľa úlohy

Nasledujúce voľby vychádzajú z doložených funkcií a z obmedzeného pilotného porovnania. Sú to pracovné odporúčania pre konkrétny druh výstupu, nie výsledok rozsiahleho testu všetkých plánov, nastavení a typov dokumentov.

Overiteľnosť: Pri práci, ktorú má ďalší človek skontrolovať voči nahraným podkladom, má prednosť NotebookLM. Jeho odkazy pomáhajú prejsť od záveru k pasáži; pri rozhodujúcej vete treba stále posúdiť, či pasáž záver naozaj unesie.
Čitateľnosť: Ak má vzniknúť stručné vysvetlenie pre vedenie, osnova prezentácie alebo text v inom tóne, ChatGPT poskytuje širší priestor na úpravy. V pilotnom porovnaní boli súhrny všeobecného asistenta ľahšie stráviteľné, no táto výhoda nenahrádza väzbu medzi tvrdením a nahraným zdrojom.
Typ zdrojov: Pri textových materiáloch, v ktorých potrebujete dohľadať oporu jednotlivých záverov, dáva zmysel začať v NotebookLM. Pri úlohe spájajúcej dokumenty, tabuľkové údaje a následné prepísanie výstupu je prirodzenou voľbou ChatGPT. Podporu konkrétneho formátu treba posudzovať podľa účtu a nastavení, v ktorých budete pracovať.
Citlivosť dát: Pri osobných údajoch, zmluvách či interných zápisniciach rozhodujú pravidlá konkrétneho účtu a organizácie. Skôr než súbor nahráte, zistite, či to vaša organizácia povoľuje a aké podmienky spracovania sa na daný pracovný priestor vzťahujú.

Ako spoznať vynechaný podklad

Odpoveď môže správne citovať použité dokumenty a zároveň obísť ďalší, ktorý by zmenil záver. Riziko rastie pri dodatkoch, novších verziách a stanoviskách, ktoré si odporujú. Preto má zmysel porovnať zoznam nahraných súborov so zdrojmi, ktoré sa v odpovedi skutočne objavili; samotný počet citácií o úplnosti nič nehovorí.

Ak chýba podklad s možnou výnimkou alebo odlišným číslom, vyžiadajte si jeho samostatné zhrnutie a porovnanie s pôvodným záverom. Doplnenie názvu do zoznamu zdrojov problém nerieši, pokiaľ sa nezmení aj príslušné tvrdenie. Pri viacerých verziách toho istého dokumentu si všímajte, ku ktorej verzii odkaz smeruje.

Kontrola piatich náhodných citácií

Na rýchlu kontrolu konkrétneho výstupu vyberte päť citovaných tvrdení z rôznych častí odpovede. Náhodný výber bráni tomu, aby ste preverili iba zjavné a ľahko dostupné údaje. Ak je citácií menej, skontrolujte všetky a osobitne si všimnite podstatné tvrdenia bez odkazu.

Očíslujte citované tvrdenia a náhodne vyberte päť pozícií. Vyberajte tvrdenie spolu s jeho odkazom, nie izolovaný odkaz bez kontextu.
Otvorte každú citáciu a zaznamenajte, ktorý dokument a ktorá pasáž sa zobrazili. Pri podobne pomenovaných súboroch skontrolujte aj verziu podkladu.
Porovnajte celé tvrdenie s pasážou. Osobitnú pozornosť venujte obdobiu, podmienkam, výnimkám a slovám, ktoré menia mieru istoty alebo povinnosti.
Každé tvrdenie označte ako podložené, čiastočne podložené alebo nepodložené. Pri čiastočnej zhode pomenujte presne tú časť, pre ktorú treba ďalší podklad alebo užšiu formuláciu.
Nakoniec porovnajte citované zdroje so zoznamom nahraných dokumentov. Ak chýba súbor schopný zmeniť záver, vráťte sa k nemu ešte pred použitím súhrnu.

Takáto kontrola neurčuje presnosť produktu ako celku. Pomáha zachytiť chyby v jednom konkrétnom výstupe: nesprávnu pasáž, významový posun aj chýbajúci dokument.

Citlivé dokumenty závisia od typu účtu

Prehľad Googlu pre vzdelávanie opisuje odpovede s odkazmi na vložené zdroje a uvádza, že nahrané údaje, otázky ani odpovede v opísanom edukačnom prostredí neslúžia na trénovanie modelov ani na ľudské posudzovanie. Toto vyhlásenie treba čítať v kontexte uvedeného vzdelávacieho prostredia, nie automaticky prenášať na každý účet.

Pravidlá OpenAI pre spracovanie dát rozlišujú osobné a spravované účty: obsah osobných účtov vrátane súborov sa môže podľa nastavení použiť na zlepšovanie modelov, zatiaľ čo obsah priestorov ChatGPT Business, Enterprise a Edu sa na tento účel štandardne nepoužíva. Pre firmu alebo školu je preto pred voľbou nástroja podstatné vedieť, do ktorého pracovného priestoru dokumenty vkladá a aké pravidlá preň platia.

Prečítajte si aj: