NutriFind · flujo de ingesta del catálogo

NutriFind · flujo de ingesta del catálogo Un diagrama de flujo de datos generado por Archify. 01 / Fuente 02 / Extracción 03 / Transformación 04 / Carga 05 / Consumo Lider.cl · catálogo sin gluten · 01 / Fuente · sitio público Lider.cl catálogo sin gluten sitio público Descarga paginada · cloudscraper · 02 / Extracción · ?page=N hasta vacío Descarga paginada cloudscraper ?page=N hasta vacío Extrae JSON · BeautifulSoup · 02 / Extracción · __NEXT_DATA__ Extrae JSON BeautifulSoup __NEXT_DATA__ Normaliza · buscar_productos · 03 / Transformación · nombre · precio · marca · url Normaliza buscar_productos nombre · precio · marca · url Deduplica · set + Polars unique · 04 / Carga · clave: nombre Deduplica set + Polars unique clave: nombre productos_demo · Supabase upsert · 04 / Carga · on_conflict=nombre productos_demo Supabase upsert on_conflict=nombre App Astro · products.ts · 05 / Consumo · lectura REST App Astro products.ts lectura REST GET ?page=N HTTPS HTML respuesta __NEXT_DATA__ JSON dicts lista Python upsert lote manual lectura REST PostgREST Leyenda datos primarios lote asíncrono almacén de datos flujo de datos