Ranking product manager pro Firmy.cz

Tým Vyhledávání ve zkratce řeší, aby lidé na dotaz dostali to, co hledají. Za tímhle jednoduchým shrnutím ale stojí mravenčí práce. Na dotaz poskytneme až 10 dokumentů, ze kterých se staví výsledek vyhledávání, a to v takovém pořadí, aby uživatel co nejdříve spokojeně řekl “ahá.” To s sebou přináší spoustu zajímavých problémů. Třeba když někdo napíše do vyhledání “restaurace”, co bychom mu měli nabídnout? Přehled restaurací v okolí? Recenze restaurací? Etymologii slova “restaurace”? Problémy, co řešíme, jsou velmi nestrukturované a velmi těžko uchopitelné. A to je pro nás dělá extrémně zajímavé. Nutno dodat, že nejsme typičtí produkťáci, ale spíše “decision making data scientist”. Velkou část práce trávíme hrabáním se v datech a až podle našich závěrů z nich uděláme rozhodnutí.

• Naše projekty se odvíjí od aktuální vize celého Vyhledávání. Například teď chceme poskytovat jasnější a důvěryhodnější odpovědi, proto se zabýváme důležitostí slov v dotazech, jak lépe vyhodnotit, jestli je stránka důvěryhodná, nebo jak rychleji návštěvníka nasměrovat na správnou stránku, kterou hledá. Aktuálně také pracujeme na rychlejší identifikaci “nadějných” stránek, ve kterých se nachází odpověď. Musíme tedy umět zhodnotit více než miliardu stránek na českém internetu ve velice krátkém čase a vybrat z nich ty nejrelevantnější. Abychom dokázali rychle hledat mezi takovým množstvím stránek využíváme tzv. invertované a vektorové indexy. Ve vektorových indexech jsou dané stránky uloženy ve formě vektorů vytvořených pomocí sémantických jazykových modelů. Tyto indexy nám pomáhají hlavně ve chvílích, kdy daná stránka neobsahuje přesně slova z dotazu, ale slova sémanticky blízká.
• Základem veškeré práce u nás je Python a jeho knihovny, pandas, matplotlib, seaborn, sklearn, polars, pyspark. Zkrátka všechny knihovny pro práci s velkými daty a jejich vizualizací. Jakmile máme data prozkoumaná, tak trénujeme modely. A samozřejmě stále sledujeme nové technologie, které by nám s prací píchly. V týmu máme velkou svobodu v jejich použití a jsme pro (skoro) každou novinku.
• Ve Vyhledávání využíváme spoustu lidských kontrolorů, kteří zajišťují, aby Vyhledávání fungovalo jako po drátkách. Do budoucna chceme část ručních kontrol nahradit jazykovými modely, například pro detekci špatných výsledků ve Vyhledávání. Náš vztah s LLM v naší firmě je ale spíš opačný. My totiž dodáváme podklady, se kterými LLM pracují, třeba při shrnování odpovědí. Pokud má jazykový model poskytnout dobrou a krátkou odpověď, musí od nás obdržet dobrou stránku jako podklad, z které tu odpověď vytvoří.
• Datová centra jsou páteří veškeré naší práce. Naštěstí se o ně nemusíme moc starat, protože na to máme znalejší kolegy. Naše práce se celá točí kolem dat a čísel, takže jsme na datová centra napojení v jednom kuse. Ať už zjišťujeme, jak často uživatelům nabízíme nějaký e-shop, nebo trénujeme nový model pro rozhodování o pořadí výsledků, anebo třeba rozjíždíme nějaký monitoring, to vše řešíme přes naše datová centra.

Produktový management v Seznamu se pyšní úzkou spoluprací s výzkumem v oblasti strojového učení, kde se věnujeme vývoji modelů pro zlepšení relevance a personalizovaného doporučování obsahu. Veškeré naše rozhodování je podpořeno daty – od A/B testování až po ověřování hypotéz na základě analytických výstupů. Využíváme vlastní velké jazykové modely (LLM) k inovaci a rozvoji našich produktů a úspěch (i radost) nám přináší nejmodernější technologie a spolupráce s odborníky, kteří projekty posouvají neustále dál.  

Počítejte s pravidelnými rychlými releasy, testováním na reálných datech a tím, že opravdu podrobně řešíme zpětnou vazbu komunity. Každý návrh prochází krátkou debatou s produkťákem a designem. Díky vlastní kartografii i backendu máte v rukou celou službu – od mapové vrstvy až po uživatelský zážitek v terénu.

Rozhodně ano, v produkci nám běží například Linux, PostgreSQL, Redis, Prometheus, Kubernetes, Grafana a další. Open-source je pro nás klíčový, protože nám umožňuje flexibilitu, škálovatelnost a rychlé inovace.

V případě platformy Firmy.cz se produktový management zaměřuje na poskytování přesných a aktuálních informací o firmách, které pak využívají naše další služby, jako jsou Mapy.cz nebo Vyhledávání. Máme k dispozici velké jazykové modely, což jsou naši nepostradatelní parťáci, a datový model i neustále rozvíjíme.

• Vylepšujeme náš datový model pro přesnější zpracování informací, automatizujeme proces stahování a aktualizace dat z veřejných rejstříků. A musíme se pochlubit i optimalizací procesu zakládání nových poboček firem v databázi pomocí LLM nástrojů a dat stažených z veřejných zdrojů. Zákazníkům jsme také ulehčili práci automatickým generováním popisků k firmám a tvorbou landing pages, které lidem usnadní hledání nejlepších firem v okolí. A v neposlední řadě zachycujeme duplicitní obsah v databázi našimi novými modely, což je radost.
• Jako produkťáci pracujeme s různými nástroji a technologiemi, které nám usnadňují každodenní práci. Nepostradatelné jsou pro nás Tabulky pro analýzu dat a tvorbu reportů. Komunikujeme přes Zoom a Teams a pro plánování a tvorbu ticketů je náš parťák YouTrack. A Grafanu a Reportera si nemůžeme vynachválit u analýzy databáze a statistik.
• S Large Language Models pracujeme především na dvou hlavních úlohách. První je generování popisků pro firmy. Zde využíváme modely k automatické tvorbě popisů firem na základě dostupných dat z webových stránek. Druhá oblast je stahování dat z veřejných rejstříků. Tady pomocí LLM zefektivňujeme proces získávání a zpracování dat z různých veřejných zdrojů.

Náš tým má na triku vyhledávací funkce pro služby Mapy.com a Firmy.cz. Výsledky našeho hledání můžete vidět také v podobě mapových a firemních upoutávek ve vyhledávání Seznam.cz. Primárním cílem je poskytovat lidem kvalitní a relevantní výsledky při hledání různých informací spojených s Mapami a Firmami. Jsme menší specializovaný tým a naše jádro tvoří šest vývojářů a produktový manažer. No a co nás dělá produkťáky? Že máme zodpovědnost za výsledek. A o ten se staráme napříč týmy.

• Naším hlavním současným projektem je technologické sjednocení vyhledávání pro Mapy.com a Firmy.cz. Historicky se tyto dva systémy vyvíjely nezávisle na sobě, ale jejich funkce a cíle se časem stále více přibližovaly. Sloučení těchto dvou systémů nám umožní zachovat silné stránky obou přístupů a výrazně zjednoduší a urychlí další vývoj. Těšíme se, že tento krok přinese nejen zvýšení efektivity, ale také lepší zážitek návštěvníkům.
• Hledáni pro Mapy.com a Firmy.cz je postavené na řadě open-source technologií. Provozujeme je v našem interním cloudovém prostředí, které je založeno na platformách Kubernetes a OpenStack. V rámci projektu sjednocení vyhledávání se postupně zbavujeme starších technologií a přecházíme na ElasticSearch jako hlavní nástroj pro vyhledávání.
• Kromě využívání nástrojů jako ChatGPT a GitHub Copilot pro usnadnění každodenní práce využíváme LLM zatím pouze opatrně. Přemýšlíme o jejich možném využití ve vyhledávání, v blízké budoucnosti plánujeme zkusit LLM použít k hodnocení kvality nalezených výsledků.
• S datovými centry spolupracujeme už standardně. Využíváme moderní infrastrukturu, která nám umožňuje efektivně provozovat a spravovat naše vyhledávací systémy a zajišťovat jejich vysokou dostupnost a výkon.