Fácil uso del Túnel Submarino (anteriormente conocido como Túnel de Gota de Agua)

Sincronice datos de varias tablas en Hive con Clickhouse para proporcionar consultas en tiempo real. Cada tabla tiene un promedio de 200 millones de registros. Los requisitos para la herramienta de sincronización son: en primer lugar, debe poder extraer datos durante un tiempo prolongado; en segundo lugar, puede personalizar y controlar la extracción de datos de la instancia de nodo especificada por el clúster de Clickhouse; Como desarrollador de Java, naturalmente no quiero depender demasiado de Hadoop. Después de buscar en línea, decidí usar Seatunnel, que puede extraer datos mediante una configuración simple.

Apache SeaTunnel (incubación) es una plataforma de integración de datos distribuida, de alto rendimiento, fácilmente escalable, fuera de línea y en tiempo real para sincronización y transformación.

Documentos oficiales: https://interestinglab.github.io/seatunnel-docs/#/

La instalación es relativamente simple, solo consulte los documentos oficiales.

La configuración debajo de config.conf es la configuración que extrae datos de Hive y los inserta en clickhouse. La fuente de datos es una tabla en Hive, que el complemento Seatunnel segmenta según el campo ID y se inserta en diferentes segmentos del clúster de Clickhouse.

上篇: ¿Se subastarán las acciones perdidas por los accionistas de las empresas cotizadas? Los accionistas de las empresas cotizadas pierden el juicio y las acciones de la empresa en quiebra serán subastadas. Una empresa pública es un componente específico de una sociedad anónima. Emitió acciones públicamente y alcanzó una escala considerable. Después de ser aprobada para ingresar al mercado centralizado de negociación de valores de acuerdo con la ley, la empresa liquidó todas las acciones de sus principales accionistas y quebró mediante subasta, lo que tuvo un cierto impacto en la empresa y la llevó a la quiebra. La quiebra se refiere a un sistema legal en el que los acreedores o deudores solicitan al tribunal que se declare en quiebra y pague las deudas de acuerdo con los procedimientos de quiebra cuando un deudor no puede pagar las deudas o se vuelve insolvente. 下篇: ¿Qué significa integración vertical?