Který model AI na kterou úlohu?

To nejdůležitější

Nerozhoduje model, ale to, jakou vlastnost úloha vyžaduje: přesnost, aktuálnost, délku, tempo nebo náklady.
Pět vlastností pokryje běžný marketingový provoz – kdo je zná, dokáže si každou novou generaci modelů zařadit sám.
Většině malých firem stačí dva modely: jeden na dlouhou, přesnou práci, jeden na rychlé, levné hromadné úlohy.
Přechod mezi modely stojí čas – hlavně proto, že se pokyny a šablony musí pokaždé nastavit znovu.

Modely stárnou rychleji než jakékoli srovnání. Co nestárne, je otázka, jakou vlastnost daná úloha vyžaduje – a toto přiřazení přežije každou generaci.

Pět vlastností

1. Přesnost u dlouhých pokynů

Jak spolehlivě se dodrží deset číslovaných pravidel – i ta, která stojí uprostřed? Rozhodující u prověřovacích úloh a všude tam, kde se má dodržet stylový rámec.

2. Přístup k aktuálnímu

Umí model hledat a jak dobře vybírá zdroje? Rozhodující u průzkumu, sledování konkurence a u všeho, co se stalo po datu trénování.

3. Zpracovatelná délka

Kolik textu se dá zohlednit najednou – a jak dobře se ještě bere v potaz začátek, když je vzadu hodně? Rozhodující při prověřování celých dokumentů.

4. Tempo a náklady

U hromadných úloh – sto textů k produktům, padesát překladů – určuje tempo a cena, jestli má úloha vůbec smysl.

5. Používání nástrojů

Jak spolehlivě se napojené nástroje skutečně použijí místo hádání? Rozhodující, jakmile jsou ve hře napojení na vlastní systémy.

Přiřazení podle pracovního kroku

Pracovní krok	Nejdůležitější vlastnost	Co se pokazí, když chybí
Průzkum aktuálních otázek	aktuálnost	Zastaralé údaje, přesvědčivě zformulované
Hrubá verze odborného příspěvku	přesnost u pokynů	Stylový rámec se přehlíží, pravidla vypadávají
Prověření dlouhého dokumentu	délka	První polovina se prověří povrchně
Překlad do mnoha jazyků	tempo a náklady	Úloha se stane nehospodárnou
Práce s napojenými systémy	používání nástrojů	Odpovědi se hádají místo dotazování
Zkracování a přeformulování	žádná zvláštní	–
Sbírání nápadů a variant	žádná zvláštní	–

Poslední dva řádky jsou důležitější, než vypadají: u značné části každodenních úloh je volba modelu prostě lhostejná. Kdo tam investuje čas do výběru, optimalizuje špatné místo.

Věděli jste, že…?

Nejčastějším důvodem špatného výsledku není model, ale pokyn, který obsahuje uprostřed příliš mnoho důležitého. Údaje na začátku a na konci promptu se zohledňují spolehlivěji než ty mezi tím – u všech běžných modelů.

Kdo tedy má dojem, že se model nedrží zadání, měl by nejdřív přesunout ústřední pravidlo na konec. To v praxi zabírá častěji než přechod na větší model – a nestojí to nic.

Proč většinou stačí dva modely

Pro malé firmy je použitelné rozdělení přehledné:

Jeden výkonný model na práci, na které záleží. Hrubé verze, prověřování, všechno s dlouhými pokyny a dlouhými texty. Tady se vyšší cena vyplatí, protože alternativou je předělávání.
Jeden rychlý, levný model na množství. Překlady, shrnutí, přeformulování, zařazování. Tady se počítá průchodnost.

Třetí model se vyplatí teprve tehdy, když nějaká úloha vyžaduje vlastnost, kterou první dva nemají – třeba zvlášť velkou zpracovatelnou délku.

Z praxe

Přechod mezi poskytovateli stojí víc, než by se ze srovnání zdálo. Ne ovládání – to se podobá. Ale nastavené rámce: stylový dokument, uložené pokyny, šablony, napojení, zaběhnuté formulace.

V praxi trvá dva až tři týdny, než nové prostředí dodá stejnou kvalitu jako to zaběhnuté. Model musí být zřetelně lepší, ne o kousek, aby se přechod vyplatil – a zřetelně lepší se dá zjistit jen na vlastní úloze, ne z žebříčku.

Jak to prověřit na vlastní úloze

Žebříčky měří standardizované úlohy. Vaše úloha mezi ně nepatří. Použitelné vlastní srovnání potřebuje čtyři věci:

Tři skutečné úlohy z běžného provozu, ne testovací otázky. Nejlépe takové, u kterých dobrý výsledek už znáte.
Tentýž prompt, doslova stejný. Jinak porovnáváte formulace místo modelů.
Pevné hodnocení. Předem stanovit, podle čeho poznáte, co je lepší – třeba: pravidla dodržena, žádné vymyšlené údaje, délka trefena.
Dva průchody na model. Rozptyl mezi dvěma odpověďmi téhož modelu bývá větší než rozdíl mezi dvěma modely.

Prompt

Pomoz mi určit vhodnou volbu modelu pro naše pracovní kroky.
Nedoporučuj poskytovatele – řaď podle vlastností.

Naše úlohy:
[seznam opakujících se úloh, každá na řádek, s
přibližnou četností za měsíc]

Naše rámcové podmínky:
- Rozpočet na nástroje AI za měsíc: [částka]
- Jsou ve hře osobní údaje? [ano / ne / zčásti]
- Máme napojení na vlastní systémy? [ano / ne]
- Pracujeme vícejazyčně? [jazyky]

Úkoly:
1. Přiřaď každou naši úlohu právě jedné hlavní vlastnosti:
   přesnost u dlouhých pokynů / aktuálnost / zpracovatelná
   délka / tempo a náklady / používání nástrojů / žádná zvláštní.
2. Uveď úlohy, u kterých je volba modelu lhostejná –
   to jsou ty, do kterých bychom neměli investovat čas.
3. Řekni mi, jestli nám stačí dva modely a na co který.
4. Navrhni vlastní srovnání: tři skutečné úlohy z mého
   seznamu, pevné hodnocení, kolik průchodů.

Neuváděj názvy modelů ani žebříčky.

Závěr

Užitečná otázka nezní, který model je nejlepší, ale jakou vlastnost tato úloha vyžaduje. Pět vlastností pokryje běžný marketingový provoz a u dobré části úloh zní odpověď: žádnou zvláštní.

Dva modely – jeden na náročnou práci, jeden na množství – stačí většině malých firem. A než člověk mění, vyplatí se levnější pokus: přesunout ústřední pravidlo na konec promptu.

Časté otázky

Který model AI se hodí na kterou úlohu?

Závisí to na požadované vlastnosti: průzkum aktuálních otázek potřebuje přístup k webovému vyhledávání, hrubé verze a prověřování potřebují přesnost u dlouhých pokynů, prověřování celých dokumentů potřebuje velkou zpracovatelnou délku, překlady do mnoha jazyků potřebují tempo a nízké náklady a práce s napojenými systémy potřebuje spolehlivé používání nástrojů.

Kolik různých modelů potřebuje malá firma?

Dva většinou stačí: jeden výkonný na hrubé verze, prověřování a dlouhé pokyny a jeden rychlý, levný na množství – překlady, shrnutí, zařazování. Třetí se vyplatí teprve tehdy, když nějaká úloha vyžaduje vlastnost, kterou ani jeden nepokrývá.

Proč se model nedrží mého zadání?

Často to není modelem, ale umístěním pokynu. Údaje na začátku a na konci promptu se zohledňují spolehlivěji než ty uprostřed. Přesunout ústřední pravidlo na konec zabírá v praxi častěji než přechod na větší model.

Vyplatí se přechod na nový model?

Jen když je zřetelně lepší, ne o kousek. Přechod stojí dva až tři týdny, než se znovu zaběhne stylový dokument, uložené pokyny, šablony a napojení. Jestli platí zřetelně lepší, ukáže jen srovnání na vlastních úlohách – ne obecný žebříček.

Jak se modely porovnají na vlastní úloze?

Třemi skutečnými úlohami z běžného provozu místo testovacích otázek, doslova stejným promptem, předem stanoveným hodnocením – třeba: pravidla dodržena, žádné vymyšlené údaje, délka trefena – a dvěma průchody na model. Druhý průchod je důležitý: rozptyl uvnitř jednoho modelu bývá větší než rozdíl mezi dvěma.