木地板JDBC 一个简单的SPARK / SCALA工具，该工具从Parquet文件或目录中读取数据并插入到JDBC数据库中。 先决条件 Java 1.8或更高版本 JDBC驱动程序，已通过DB2和PostreSQL测试 sbt 安装 git clone cd ParquetJDBC sbt汇编 确保创建了jar。 ls target / scala-2.12 / classes ParquetJDBC.jar update zinc 启动应用程序 在启动应用程序之前，应手动创

鳗鱼 Eel是用于在hadoop生态系统中处理数据的工具包。 通过hadoop生态系统，我们指的是大数据世界通用的文件格式，例如HDFS或Hive表等位置中的镶木地板，兽人，csv。 与诸如或分布式批处理或流引擎相比，Eel是旨在直接在过程中使用的SDK。 与较高级别的引擎（例如Spark）相比，Eel是较低级别的API，适用于需要文件API之类的用例。 用例范例 从JDBC之类的源导入到Hive / HDFS之类的另一源 将多个文件（例如spark的输出）合并为一个文件 直接从您的过程中查询