A/B test embedding modelů (pomocný nástroj)
Pomocný mezikrok při vývoji větší appky – zjistit, který embedding model nejlíp sedne na daný obsah a jazyk.
O projektu
Když jsem stavěl větší appku s vektorovým vyhledáváním, potřeboval jsem vědět, který embedding model nejlíp sedne na ten typ obsahu a jazyk.
Místo hádání jsem si udělal malý nástroj, který mi je nechal porovnat vedle sebe.
Jednorázový pomocný mezikrok, ne samostatný produkt. Splnil účel, pomohl mi vybrat, a šel k ledu – přesně tak, jak takové vibe codované utilitky fungují.
Proč to vzniklo
- Vznikl, abych vybral správný embedding model.
- Modely jsem porovnal vedle sebe, ne od oka.
- Splnil účel a šel k ledu – jednorázovka.
Jak to funguje (pod kapotou)
- Proxy server pro Ollama embeddingy.
- Jednoduché HTML rozhraní na A/B porovnání.
- Node.js + Express, postaveno rychle.
Postaveno s
Chcete tohle umět taky?
Stavět appky bez programování učím v kurzu AI First.
Další z kategorie Nástroj
Shoutbase – appka na správu referencí
Interní nástroj na správu referencí – fronta koho oslovit, sbírka získaných a přehled, kde je používáme.
Toucan – sdílený second brain pro tým
Sdílená znalostní báze v cloudu, ze které čerpá tým i jeho AI agenti – „second brain" napojený na můj lokální context1.
Řízení marketingu projektu přes Claude Code
Marketingový tým jako sada skillů v Claude Code – ředitel, manažeři oddělení i specialisté, co se mnou v tandemu táhnou projekt.