feat: conceptos tab, filters, backfill, facturapi live keys, fixes

- Add Conceptos tab in CFDI page with column filters, sorting, pagination
- Add GET /cfdi/conceptos endpoint with filters and orderBy
- Backfill cfdi_conceptos from legacy XMLs (824k concepts inserted)
- Fix CFDI delete button (bypass subscription check, add alerts)
- Fix export to Excel (fetch all filtered results, limit 10k)
- Fix facturacion page concepto delete bug (immutable updates, unique ids)
- Add Facturapi live key auto-generation and caching
- Fix SAT fechaPagoP parsing
- Add metrics cache support for current year
- Increase DB pool max to 15

scripts/backfill-conceptos.js

@@ -0,0 +1,143 @@
+const { Pool } = require('pg');
+const { XMLParser } = require('fast-xml-parser');
+
+const DB_NAME = process.argv[2] || 'horux_roem691011ez4';
+const BATCH_SIZE = parseInt(process.argv[3]) || 100;
+
+const pool = new Pool({
+  host: 'localhost',
+  port: 5432,
+  user: 'postgres',
+  password: 'ZxHMrmnwanvLfLDdNJdRthFjWF2Lj1Rb',
+  database: DB_NAME,
+});
+
+const xmlParser = new XMLParser({
+  ignoreAttributes: false,
+  attributeNamePrefix: '@_',
+  removeNSPrefix: true,
+});
+
+function toArray(val) {
+  if (!val) return [];
+  return Array.isArray(val) ? val : [val];
+}
+
+function pf(v) {
+  const n = parseFloat(v);
+  return isNaN(n) ? 0 : n;
+}
+
+function extractConceptos(comprobante) {
+  const conceptosNode = comprobante.Conceptos?.Concepto;
+  if (!conceptosNode) return [];
+  const conceptos = toArray(conceptosNode);
+  return conceptos.map((c) => {
+    const trasladosC = toArray(c.Impuestos?.Traslados?.Traslado);
+    const retencionesC = toArray(c.Impuestos?.Retenciones?.Retencion);
+    let ivaTraslado = 0, iepsTraslado = 0;
+    for (const t of trasladosC) {
+      const importe = pf(t['@_Importe']);
+      if (t['@_Impuesto'] === '002') ivaTraslado += importe;
+      else if (t['@_Impuesto'] === '003') iepsTraslado += importe;
+    }
+    let isrRetencion = 0, ivaRetencion = 0, iepsRetencion = 0;
+    for (const r of retencionesC) {
+      const importe = pf(r['@_Importe']);
+      if (r['@_Impuesto'] === '001') isrRetencion += importe;
+      else if (r['@_Impuesto'] === '002') ivaRetencion += importe;
+      else if (r['@_Impuesto'] === '003') iepsRetencion += importe;
+    }
+    return {
+      claveProdServ: c['@_ClaveProdServ'] || null,
+      noIdentificacion: c['@_NoIdentificacion'] || null,
+      descripcion: c['@_Descripcion'] || '',
+      cantidad: pf(c['@_Cantidad']) || 1,
+      claveUnidad: c['@_ClaveUnidad'] || null,
+      unidad: c['@_Unidad'] || null,
+      valorUnitario: pf(c['@_ValorUnitario']),
+      importe: pf(c['@_Importe']),
+      descuento: pf(c['@_Descuento']),
+      isrRetencion,
+      ivaTraslado,
+      ivaRetencion,
+      iepsTraslado,
+      iepsRetencion,
+    };
+  });
+}
+
+function parseXml(xmlContent) {
+  try {
+    const result = xmlParser.parse(xmlContent);
+    const comprobante = result.Comprobante;
+    if (!comprobante) return null;
+    const tc = pf(comprobante['@_TipoCambio']) || 1;
+    return { tipoCambio: tc, conceptos: extractConceptos(comprobante) };
+  } catch (e) {
+    console.error('Parse error:', e.message);
+    return null;
+  }
+}
+
+async function run() {
+  let totalProcessed = 0;
+  let totalConceptos = 0;
+  let batch = 0;
+
+  while (true) {
+    batch++;
+    const { rows: cfdis } = await pool.query(`
+      SELECT c.id, c.xml_original
+      FROM cfdis c
+      LEFT JOIN cfdi_conceptos cc ON cc.cfdi_id = c.id
+      WHERE c.xml_original IS NOT NULL AND cc.id IS NULL
+      LIMIT $1
+    `, [BATCH_SIZE]);
+
+    if (cfdis.length === 0) break;
+
+    let batchConceptos = 0;
+    for (const row of cfdis) {
+      try {
+        const parsed = parseXml(row.xml_original);
+        if (!parsed || !parsed.conceptos || parsed.conceptos.length === 0) continue;
+
+        const tc = parsed.tipoCambio || 1;
+        const m = (v) => v * tc;
+
+        for (const c of parsed.conceptos) {
+          await pool.query(`
+            INSERT INTO cfdi_conceptos (
+              cfdi_id, clave_prod_serv, no_identificacion, descripcion, cantidad,
+              clave_unidad, unidad, valor_unitario, valor_unitario_mxn, importe, importe_mxn,
+              descuento, descuento_mxn, isr_retencion, isr_retencion_mxn,
+              iva_traslado, iva_traslado_mxn, iva_retencion, iva_retencion_mxn,
+              ieps_traslado, ieps_traslado_mxn, ieps_retencion, ieps_retencion_mxn
+            ) VALUES ($1,$2,$3,$4,$5,$6,$7,$8,$9,$10,$11,$12,$13,$14,$15,$16,$17,$18,$19,$20,$21,$22,$23)
+          `, [
+            row.id, c.claveProdServ, c.noIdentificacion, c.descripcion, c.cantidad,
+            c.claveUnidad, c.unidad, c.valorUnitario, m(c.valorUnitario), c.importe, m(c.importe),
+            c.descuento, m(c.descuento), c.isrRetencion, m(c.isrRetencion),
+            c.ivaTraslado, m(c.ivaTraslado), c.ivaRetencion, m(c.ivaRetencion),
+            c.iepsTraslado, m(c.iepsTraslado), c.iepsRetencion, m(c.iepsRetencion),
+          ]);
+          batchConceptos++;
+        }
+      } catch (err) {
+        console.error(`Error CFDI ${row.id}:`, err.message);
+      }
+    }
+
+    totalProcessed += cfdis.length;
+    totalConceptos += batchConceptos;
+    console.log(`Batch ${batch}: procesados ${cfdis.length}, conceptos ${batchConceptos}, total procesados ${totalProcessed}, total conceptos ${totalConceptos}`);
+
+    if (cfdis.length < BATCH_SIZE) break;
+  }
+
+  console.log(`\nBackfill completado. Total CFDIs procesados: ${totalProcessed}, total conceptos insertados: ${totalConceptos}`);
+  await pool.end();
+}
+
+run().catch((e) => { console.error(e); process.exit(1); });