ODBC

允许 ClickHouse 通过 ODBC 方式连接到外部数据库.

为了安全地实现 ODBC 连接,ClickHouse 使用了一个独立程序 clickhouse-odbc-bridge. 如果ODBC驱动程序是直接从 clickhouse-server中加载的,那么驱动问题可能会导致ClickHouse服务崩溃。 当有需要时,ClickHouse会自动启动 clickhouse-odbc-bridge。 ODBC桥梁程序与clickhouse-server来自相同的安装包.

该引擎支持 Nullable 数据类型。

创建表

  1. CREATE TABLE [IF NOT EXISTS] [db.]table_name [ON CLUSTER cluster]
  2. (
  3. name1 [type1],
  4. name2 [type2],
  5. ...
  6. )
  7. ENGINE = ODBC(connection_settings, external_database, external_table)

详情请见 CREATE TABLE 查询。

表结构可以与源表结构不同:

  • 列名应与源表中的列名相同,但您可以按任何顺序使用其中的一些列。
  • 列类型可能与源表中的列类型不同。 ClickHouse尝试将数值映射 到ClickHouse的数据类型。
  • 设置 external_table_functions_use_nulls 来定义如何处理 Nullable 列. 默认值是 true, 当设置为 false 时 - 表函数将不会使用 nullable 列,而是插入默认值来代替 null. 这同样适用于数组数据类型中的 null 值.

引擎参数

  • connection_settings — 在 odbc.ini 配置文件中,连接配置的名称.
  • external_database — 在外部 DBMS 中的数据库名.
  • external_tableexternal_database中的表名.

用法示例

通过ODBC从本地安装的MySQL中检索数据

本示例已经在 Ubuntu Linux 18.04 和 MySQL server 5.7 上测试通过。

请确保已经安装了 unixODBC 和 MySQL Connector。

默认情况下(如果从软件包安装),ClickHouse以用户clickhouse的身份启动. 因此,您需要在MySQL服务器中创建并配置此用户。

  1. $ sudo mysql
  1. mysql> CREATE USER 'clickhouse'@'localhost' IDENTIFIED BY 'clickhouse';
  2. mysql> GRANT ALL PRIVILEGES ON *.* TO 'clickhouse'@'clickhouse' WITH GRANT OPTION;

然后在/etc/odbc.ini中配置连接.

  1. $ cat /etc/odbc.ini
  2. [mysqlconn]
  3. DRIVER = /usr/local/lib/libmyodbc5w.so
  4. SERVER = 127.0.0.1
  5. PORT = 3306
  6. DATABASE = test
  7. USERNAME = clickhouse
  8. PASSWORD = clickhouse

您可以从安装的 unixodbc 中使用 isql 实用程序来检查连接情况。

  1. $ isql -v mysqlconn
  2. +---------------------------------------+
  3. | Connected! |
  4. | |
  5. ...

MySQL中的表:

  1. mysql> CREATE TABLE `test`.`test` (
  2. -> `int_id` INT NOT NULL AUTO_INCREMENT,
  3. -> `int_nullable` INT NULL DEFAULT NULL,
  4. -> `float` FLOAT NOT NULL,
  5. -> `float_nullable` FLOAT NULL DEFAULT NULL,
  6. -> PRIMARY KEY (`int_id`));
  7. Query OK, 0 rows affected (0,09 sec)
  8. mysql> insert into test (`int_id`, `float`) VALUES (1,2);
  9. Query OK, 1 row affected (0,00 sec)
  10. mysql> select * from test;
  11. +--------+--------------+-------+----------------+
  12. | int_id | int_nullable | float | float_nullable |
  13. +--------+--------------+-------+----------------+
  14. | 1 | NULL | 2 | NULL |
  15. +--------+--------------+-------+----------------+
  16. 1 row in set (0,00 sec)

ClickHouse中的表,从MySQL表中检索数据:

  1. CREATE TABLE odbc_t
  2. (
  3. `int_id` Int32,
  4. `float_nullable` Nullable(Float32)
  5. )
  6. ENGINE = ODBC('DSN=mysqlconn', 'test', 'test')
  1. SELECT * FROM odbc_t
  1. ┌─int_id─┬─float_nullable─┐
  2. 1 ᴺᵁᴸᴸ
  3. └────────┴────────────────┘

另请参阅

原始文章