Duckle 0.1.0

Duckle je nástroj pro návrh a spouštění datových toků pomocí vizuálního editoru, kde se jednotlivé kroky skládají jako diagram a následně se převádějí do strukturovaných dotazů pro rychlé zpracování. Umožňuje propojit desítky zdrojů dat od tabulkových souborů přes databáze a úložiště až po služby přístupné přes síťová rozhraní. Veškerá práce probíhá lokálně bez potřeby externích serverů nebo předplatného.

Součástí je asistent, který po popsání požadavku běžným jazykem vytvoří odpovídající tok automaticky. Model běží přímo na daném zařízení, takže nejsou potřeba žádné programátorské klíče ani připojení k externím službám. Každý uzel nabízí okamžitý náhled výstupu i zobrazení vygenerovaného dotazu. Nastavení, připojení i celé toky se ukládají jako čitelné soubory ve složce, kterou lze verzovat a sdílet mezi týmem.

Hlavní možnosti

• Vizuální editor: Skládání toků přetažením uzlů na plátno a jejich propojením.
• Široká paleta zdrojů: Propojení se soubory, databázemi, cloudovými úložišti, streamovacími službami a síťovými rozhraními.
• Lokální asistent: Vytvoření toku z popisu běžným jazykem s během výhradně na daném zařízení.
• Živý náhled: Okamžité zobrazení výstupních dat a dotazu pro každý uzel v diagramu.
• Kontrola kvality: Validátory s odděleným výstupem pro záznamy, které neprošly kontrolou.
• Transformace textu a dat: Deduplikace, rozdělení, shlukování, extrakce podle vzoru, práce s časovými údaji a polohou.
• Práce s vektory: Ukládání textových reprezentací, fulltextové vyhledávání a příprava dat pro vyhledávání podle významu.
• Plánování běhů: Automatické spouštění podle času, intervalu nebo změny souboru.
• Verzování: Celé pracovní prostředí jako čitelné soubory vhodné pro sdílení mezi členy týmu.
• Vícejazyčnost: Rozhraní dostupné v desítkách jazyků včetně podpory pravolevého písma.