InsightProject 该项目的目标是跟踪各种技术和社交媒体资源中的技术趋势。 这有助于衡量技术背后的势头，并确定最佳的帖子以供用户讨论。 管道 历史reddit数据使用spark sql进行批处理，以python处理，保存在sqlite中，并使用破折号进行可视化。 使用Web API整合了近实时更新。 搜索标签是使用reddit搜索API实现的，每个调用可获取1000条记录以生成图形和比较表。