DBLakeTag
Producto El Problema Fundamentos Arquitectura Comparativa Métricas Consola CDC →

DBLakeTag Console

Acceso a la plataforma de replicación y streaming CDC

← Ir al sitio web dblaketag.com
Fuentes de datos Consultas Replicaciones Seguimiento Documentación
Tareas · Linear Código · GitLab

Fuentes de datos

Revisá tus conexiones y elegí la base que querés consultar.

Cargando conexiones…
Fuente / motor Conexión Base de datos Estado Rol Acciones

El estado se verifica en cada conexión. Los puertos corresponden a la conexión que usa el servidor.

Consultas

Elegí una fuente, explorá su catálogo y consultá sus datos.

Solo lectura

Tablas

Seleccioná una tabla

SQL admitido

SELECT sobre una tabla del catálogo, columnas, filtros WHERE unidos con AND, ORDER BY y LIMIT (máximo 500). No se admiten funciones, JOIN, subconsultas ni escrituras. LIMIT funciona con todos los motores.

Todavía no ejecutaste una consulta.

Explorá el contenido de una tabla

Las tablas disponibles se cargan desde la base seleccionada.

Replicaciones

Elegí el origen, las tablas y el destino de cada flujo de datos.

Configuración de replicaciones

Podés guardar qué querés replicar. La activación de estas configuraciones todavía no está conectada al motor de captura; guardarlas no copia ni modifica datos.

Nueva configuración

Origen

Tablas a replicar

0 tablas seleccionadas

Destino

Los cambios incluyen altas, modificaciones y eliminaciones. Las tablas mantienen su nombre en el esquema de destino.

Cada configuración tiene un origen y un destino. Para combinar distintas fuentes, creá una configuración por origen.

La configuración quedará guardada con la captura pendiente.

Documentación

Decisiones, arquitectura y guías del proyecto.

Copia de Obsidian

La actualización de esta copia es manual.

Cargando biblioteca…

Cargando documentación…

En esta nota

Seguimiento

Tablero, tareas y avance de DBLakeTag en Linear.

DBLakeTag

Contexto del proyecto

Vista de solo lectura. Las tareas se actualizan en Linear; el avance refleja su estado allí.

Descripción

Abrir tarea en Linear

Seguimiento

Código, merge requests y pipelines del repositorio GitLab.

Abrir repositorio en GitLab

Último commit de la rama principal

Pipeline de este commit

Un merge o una pipeline correcta no certifican un despliegue. Esta vista muestra el estado del código y de CI en GitLab.

Merge requests abiertos

Integrados recientemente

Pipelines recientes

Commits de la rama principal

Vista de solo lectura. Los cambios de código, las revisiones y las ejecuciones de CI se gestionan en GitLab.

Next-Gen CDC Engine · IBM i & SQL Server to Cloud

Replicación y Streaming CDC en Tiempo Real para Sistemas de Misión Crítica

Conectá tus bases transaccionales IBM i (AS/400) y Microsoft SQL Server con PostgreSQL, ClickHouse, Apache Kafka y Data Lakes modernos. Sin agentes invasivos, sin Java y con menos de 50 MB de memoria RAM.

Acceder al Sistema → Ver Arquitectura
Memoria
< 50 MB RAM
Binario nativo Go
Impacto
Zero App Impact
OS Journals & LSN Logs
Latencia
< 5 ms
Sostenida
Decodificación
COMP-3 & EBCDIC
On-the-fly
Flujo de replicación de extremo a extremo Captura continua, decodificación y apply
Streaming Activo
01 · Origen

Sistemas Transaccionales

IBM i
Db2 for i (AS/400)Journals QjoRetrieveJournalEntries
MSSQL
SQL Server (Always On)Transaction Log · LSN CDC
Zero-Copy Stream
02 · Motor Central

DBLakeTag CDC Engine

Binario Nativo Go · < 50 MB RAM
  • Ring Buffer TransaccionalCola circular lock-free sin allocs
  • Decodificador COMP-3 / EBCDICDesempaquetado a 3.75 ns/op
  • LSN Tracking & CheckpointsGarantía de entrega exactly-once
< 5 ms Latency
03 · Destinos

Modern Data Stack

PG
PostgreSQLACID · Replicación continua
CH
ClickHouseAnalítica columnar
KFK
Apache KafkaEvent streaming
LAKE
Data LakesParquet / Iceberg / S3
El desafío enterprise

El Problema de las Alternativas Tradicionales

Las arquitecturas actuales fuerzan a las organizaciones a elegir entre costos millonarios de licencias o infraestructuras JVM colosales y frágiles.

Suites Propietarias Legacy

Precisely Connect, InfoSphere CDC, Qlik Replicate

  • Costos desorbitados: Licencias anuales de $50k a más de $200k USD/año con modelos opacos por volumen o cantidad de núcleos.
  • Semanas de consultoría: Despliegues lentos que requieren especialistas certificados y contratos de servicios profesionales extensos.
  • Agentes residentes invasivos: Software residente en la máquina de producción que consume ciclos de CPU e impacta la estabilidad del host.
  • Interfaces arcanas y cerradas: Dificultad para integrarse con pipelines modernos de CI/CD, monitoreo o contenedores.

Alto costo de propiedad & bloqueo tecnológico

Ecosistema JVM / Kafka

Debezium + Kafka Connect

  • Huella de memoria colosal: Demanda entre 2 y 4 GB de memoria RAM por cada conector bajo el runtime de Java.
  • Clúster obligatorio: Requiere desplegar y mantener un clúster de Kafka con ZooKeeper o KRaft solo para transportar eventos básicos.
  • Soporte IBM i comunitario y frágil: No incluye decodificación nativa para formatos de almacenamiento binario Packed Decimal COMP-3.
  • Múltiples saltos y capas intermedias: Aumenta la latencia y añade puntos únicos de fallo que complican el diagnóstico.

Sobrecarga de infraestructura & complejidad operativa

La Solución DBLakeTag

DBLakeTag CDC Engine

  • Binario único y autónomoEscrito en Go nativo sin dependencias de Java, JVM, drivers pesados ni clústeres auxiliares.
  • Arranque instantáneoInicio en milisegundos con un consumo sostenido menor a 50 MB de memoria RAM a máxima carga.
  • Soporte nativo de bajo nivelLectura directa de diarios de OS/400 (IBM i) y Transaction Logs con LSN (SQL Server).
  • Decodificación binaria en memoriaConversión directa de COMP-3 y EBCDIC a UTF-8 a nivel de nanosegundos sin degradar la fuente.

Ultra ligero, predecible y optimizado para la nube

Fundamentos

Integridad, gobernanza y data lake: por qué el CDC es la base

Un dato solo genera valor cuando es exacto, consistente y está disponible a tiempo. La captura de cambios transaccional es el mecanismo que mantiene esas tres propiedades entre el sistema de registro y la plataforma analítica.

I

Integridad de datos

La integridad es la garantía de que un dato es exacto, completo y consistente en todo su ciclo de vida: desde que se crea en la transacción hasta que se consulta en el lago. Sus dimensiones clásicas son exactitud, consistencia entre sistemas, fidelidad (sin corrupción), completitud, unicidad, validez y oportunidad.

  • Fidelidad La lectura pasiva de journals y transaction logs replica exactamente lo que confirmó la base, sin reinterpretar la lógica de la aplicación.
  • Exactitud numérica La decodificación nativa de COMP-3 y EBCDIC evita el redondeo y las conversiones intermedias que corrompen importes y códigos.
  • Consistencia y oportunidad Checkpoints por LSN con entrega exactly-once: ni duplicados ni huecos, con latencia inferior a 5 ms.
II

Gobernanza de datos

La gobernanza define políticas, responsables y controles sobre calidad, seguridad y disponibilidad del dato. Su función es que información verificada fluya por canales seguros hacia destinos y usuarios de confianza, con linaje auditable de cada transformación.

  • Linaje verificable Cada evento replicado conserva su número de secuencia o LSN de origen: se puede reconstruir qué cambió, cuándo y desde qué diario.
  • Mínimo privilegio El motor solo necesita permisos de lectura sobre journals y logs; nunca escribe en el origen ni instala agentes residentes.
  • Un solo origen de verdad El sistema transaccional sigue siendo el registro autoritativo y los destinos analíticos son réplicas fieles y continuas.
III

Data lake y lakehouse

Un data lake centraliza datos en formato abierto sobre almacenamiento de objetos de bajo costo. Sin transacciones, calidad ni gobernanza degenera en un pantano de datos; el lakehouse resuelve eso agregando una capa transaccional sobre el lago.

  • Zona de aterrizaje siempre actualizada El streaming continuo convierte al lago en un reflejo vivo del sistema de registro, no en una foto nocturna.
  • Formatos abiertos Escritura en Parquet e Iceberg sobre S3, sin lock-in y compatible con cualquier motor de consulta.
  • Del pantano al lakehouse Al entregar cambios ordenados y completos, el CDC habilita la capa transaccional que exige la analítica y la IA.
Contexto de mercado

Lo que reportan los líderes de datos y analítica en el estudio 2026 State of Data Integrity and AI Readiness de Precisely y el Center for Applied AI and Business Analytics de Drexel LeBow (505 encuestados).

71% confía en sus datos cuando existe un programa de gobernanza, frente al 50% sin programa.
51% señala la calidad de datos como la prioridad número uno de integridad para 2026.
43% identifica la preparación de los datos como la mayor barrera para alinear IA con el negocio.
38% prioriza la integración de datos como palanca para mejorar la integridad este año.

Fuentes conceptuales: IBM Think · Integridad de datos, IBM Think · Gobernanza de datos, Databricks · Introducción a data lakes y el reporte 2026 State of Data Integrity and AI Readiness (Precisely / Drexel LeBow).

Ingeniería interna

Arquitectura del Pipeline de Replicación

Tres pilares de diseño de bajo nivel para garantizar streaming continuo, cero degradación transaccional y resiliencia determinística.

  1. 01 Zero App Impact

    Source Capture

    Lectura directa de diarios del OS (QjoRetrieveJournalEntries / QSYS2.JOURNAL_ENTRY_INFO) y Transaction Logs con LSN. Sin triggers ni modificaciones a programas RPG/COBOL/TSQL.

    Captura IBM i
    QjoRetrieveJournalEntries / QSYS2
    Captura SQL Server
    fn_dblog() · LSN CDC Continuous
    Impacto transaccional
    0 Triggers · Lectura asíncrona de diarios
  2. 02 Ultra-Fast Decoding

    Motor en Memoria & Decodificación Binaria

    Ring buffer transaccional, desempaquetado de alta velocidad para Packed Decimal (COMP-3) y Zoned a 3.75 ns/op, traducción CCSID EBCDIC a UTF-8.

    Buffer de eventos
    Ring buffer lock-free en memoria sin GC churn
    Packed COMP-3 / Zoned
    3.75 ns/op a nivel de nibbles binarios
    Conversión CCSID
    Tablas EBCDIC mapeadas a UTF-8 sin allocs
  3. 03 Resiliencia & Exactly-Once

    Target Apply & Resiliencia con Checkpoints

    Streaming optimizado hacia PostgreSQL, ClickHouse y Kafka. Checkpoints por LSN / Sequence Number que reanudan automáticamente ante cortes sin duplicar transacciones.

    Destinos nativos
    PostgreSQL, ClickHouse, Apache Kafka, Data Lakes
    Gestión de estado
    LSN / Sequence Number checkpoints
    Tolerancia a fallos
    Reanudación atómica sin duplicar transacciones
Análisis competitivo

Matriz Comparativa

Comparación de capacidades técnicas y operativas entre DBLakeTag CDC Engine, suites propietarias y el stack JVM/Kafka.

Criterio de evaluación RecomendadoDBLakeTag CDC Engine Precisely Connect / InfoSphere CDC Debezium + Kafka Connect
Huella de memoria (RAM) < 50 MBBinario nativo Go 1 – 2 GB + Agentes en servidor 2 – 4 GB+ (JVM + Kafka cluster)
Tiempo de despliegue MinutosBinario único / Docker Semanas a meses de consultoría Días (Clúster Kafka + Conectores)
Soporte IBM i (AS/400) Nativo de primer nivelJournals OS & SQL Nativo (Propietario / Cerrado) Comunitario y frágil
Decodificación COMP-3 3.75 ns/opNativo en memoria Soportado con drivers pesados Manual o plugins frágiles
Impacto en apps Zero ImpactLectura pasiva de logs Medio (Agentes residentes) Medio (Consultas JDBC recurrentes)
Costo total de propiedad Fracción del costo tradicionalSin licencias leoninas Muy alto ($50k – $200k+ USD/año) Alto (Infraestructura JVM y Kafka)
Benchmarks comprobados

Métricas y Rendimiento

Resultados medidos en bancos de pruebas bajo cargas transaccionales reales continuas.

3.75ns/op

Velocidad COMP-3

Velocidad de desempaquetado binario COMP-3 en Go nativo sin asignaciones intermedias de memoria.

< 5ms

Latencia Continua

Latencia de replicación continua hacia PostgreSQL desde la confirmación del diario de transacciones.

< 50MB

Consumo de RAM

Consumo de RAM en operación normal sostenida, permitiendo despliegues de bajo costo en cualquier host.

0triggers

Cero Degradación

Cero degradación en el rendimiento transaccional del origen al operar directamente sobre los diarios del sistema.

DBLakeTag

Plataforma de replicación y streaming CDC en tiempo real para bases de datos de misión crítica.

© 2026 DBLakeTag. Todos los derechos reservados.

Navegación

Producto El Problema Fundamentos Arquitectura Comparativa Métricas

Recursos

Documentación Técnica Benchmarks & Rendimiento Especificaciones Go Engine

Repositorio & CI/CD

GitHub Repository Go 1.27 · Node.js 24