墨墨导读：本文主要介绍PostgreSQL的日志文件参数及注意事项，从csv日志中载入数据库。通过灵活的数据加载方式，让SQL在处理很多问题上更加简捷便利。  运行日志参数 1.1 运行日志主要参数 运行日志主要相关的参数如下，默认没有开启的话没有log目录，开启后会自动生成。 1.2  注意事项 设置csv格式日志的话一定要设置logging_collector 为 on pg10版本的运行日志一般在$PGDATA/log目录下 log目录是开启运行日志后自动生成的 可以通过lo

使用Postgres进行数据建模 罗德里戈·科埃略（Rodrigo Coelho） 介绍 这是Udacity数据工程纳米学位的项目。 在此项目中，为Sparkify创建了一个数据库，该公司的目标是提高其分析能力 概括 应用所有ETL步骤以为Sparkify提供星型模式模型。 选择了启动模式，因为它是最易于分析的模型之一。 总而言之，数据是从JSON源提取的，使用Pandas DataFrame进行转换，然后加载到数据库中。 ETL过程中使用了两组数据。 歌曲和日志数据。 歌曲数据可提供歌曲和艺术

见解 大数据领域中有关各种主题的教程。 这些教程既没有详细介绍任何主题，也不是其目的。 目的是给出快速而准确的指导或答案。 目录 Linux-管理 交换空间：RAM内存不足时 TPCH 创建dbgen脚本 产生资料 将数据加载到PostgreSQL PostgreSQL 更改数据默认目录 使用表空间-处理可伸缩性问题 播放CSV文件 规模很重要 磁盘使用命令df ， du 命令mount 以正确的方式将数据加载到Hadoop 重定向Hive执行临时文件 集群问题使用pdsh一次处理集