CSV-transform capability in transformers #106
Labels
No labels
prio/P1
prio/P2
prio/P3
status/leftover
status/new
status/parked
type/feature
type/ops
type/research
No milestone
No project
No assignees
2 participants
Notifications
Due date
No due date set.
Dependencies
No dependencies set
Reference
MeshFlowsGPL/meshflows#106
Loading…
Reference in a new issue
No description provided.
Delete branch "%!s()"
Deleting a branch is permanent. Although the deleted branch may continue to exist for a short time before it actually gets removed, it CANNOT be undone in most cases. Continue?
Wat / waarom
Transformers kan al XSLT, XML↔JSON en Liquid. CSV (BizTalk flat file / Logic Apps CSV) ontbreekt als first-class capability. Dat is een kleine hap op de bestaande transformers-service: geen nieuwe orchestrator-stap, geen visuele mapper.
Related to #105
Wiki
wiki/docs/about/capability-comparison-gaps.mdAcceptatie
transformers.csv_to_json(en optioneeljson_to_csv), aan te roepen viaservice_call.flows/workflows/met een klein CSV-voorbeeld.Ik pak dit ticket op.
Branch:
feat/issue-106-csv-transform(vanaf latestmain)Plan: CSV als first-class transformers-capability (
transformers.csv_to_json+ optioneeltransformers.json_to_csv), registry + designer (category transform), demo-workflow, tests, wiki-tabellen. Geen nieuwe orchestrator-stap, geen PR tot jullie dat vragen.Related to #105.
Opgepakt en afgerond op
feat/issue-106-csv-transform.Commit:
bc7bd98a12Branch: https://code.meshflows.org/MeshFlowsGPL/meshflows/src/branch/feat/issue-106-csv-transform
Wat erin zit
transformers.csv_to_json(POST /csv2json) entransformers.json_to_csv(POST /json2csv) op de bestaande transformers-servicetransform; geen nieuwe orchestrator-stapflows/workflows/csv_transform_demo.yaml+ triggercsv-transform-demo-httpQuoting / delimiter in een waarde
RFC 4180 via stdlib
csv— geensplit(delimiter).id:"meshflows:runs"metdelimiter: ":"blijft één veld (path=meshflows:runs).1:meshflows:runsis drie kolommen. Als dat meer niet-lege cellen geeft dan de header → 400 (niet stilletjesrunsdroppen). Quote het veld.Headers
has_header(aliasheader) default true: eerste rij = object keys.column_N; duplicaten →skudaarnasku_1.has_header: false/header: false: alle rijen zijn data; keyscolumn_1,column_2, …Geen PR, geen VERSION-bump.
PR staat open (CI op de branch was al groen, 30/30 success):
#113
Commit:
bc7bd98a12Branch:
feat/issue-106-csv-transformNog niet gemerged — zeg het als die naar
mainmag.Gemerged naar
main(eerstmainin de branch gemerged vanwege #114). Geen VERSION-bump.PR: #113
Merge-commit:
c5b3c082b6Waar vind ik de XML to CSV en CSV to XML?

Na de merge: CSV zit niet in het oude xml2json/json2xml-palet.
Wat er is:
transformers.csv_to_json/transformers.json_to_csv(CSV ↔ JSON), designer categorytransform, democsv_transform_demo.XML ↔ CSV is geen aparte capability. Dat is een keten:
transformers.xml2json→json_to_csv(of omgekeerdcsv_to_json→json2xml).Als de stappen in de designer nog ontbreken: even wachten tot de transformers-image van PR #113 op het cluster staat, daarna
service_call+ capabilitytransformers.csv_to_json.Snellere hap dan #110: geen nieuwe XML↔CSV-endpoints.
Waar: designer Add step → groep transformers → CSV → JSON / JSON → CSV (zelfde lijst als XML → JSON). YAML:
transformers.csv_to_json/json_to_csv.XML ↔ CSV is een keten:
xml2jsondaarnajson_to_csv(of omgekeerdcsv_to_json→json2xml). Staat nu in de transformers-wiki.Waarom het ontbrak op cluster: de nieuwste transformers-image crashte (
httpxontbrak). Fix gemerged in #118 (cec0cb2). Na die deploy zou CSV in de picker staan; op de oude pod zat CSV al.Deploy-check na PR #118 (merge
cec0cb2/ httpx-fix)v2026.08.14.2017Running, ready, 0 restarts. Heartbeats naar de registry slagen (httpxis weer aanwezig). Catalogus zoucsv_to_json/json_to_csvmoeten bevatten.v2026.08.14.1935+ crashloop opv2026.08.14.1994(pre-fix).Ticket blijft open tot UI-bevestiging op DEV: designer Add step → groep transformers → CSV → JSON / JSON → CSV. Daarna mag dit dicht.
Is eigenlijk een workaround. Graag een native implementatie
Oppakken op
feat/issue-106-xml-csv(vanaf latestmainna #115).CSV↔JSON staat al op main. Ticket blijft open omdat XML↔CSV als keten een workaround was — native
transformers.xml_to_csv/csv_to_xml(zelfde transformers-service, designer XML → CSV / CSV → XML). Geen nieuwe orchestrator-stap. Geen VERSION-bump.