注册会员 | 设为首页 | 加入收藏夹
您好，欢迎光临本网站！[请登录] ！[注册会员]！  

搜索资源列表

  1. 浅谈分布式消息技术Kafka

  2. Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），常见可以用于web/nginx日志、访问日志，消息服务等等，Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。主要应用场景是：日志收集系统和消息系统。Kafka主要设计目标如下：1.以时间复杂度为O(1)的方式提供消息持久化能力，即使对TB级以上数据也能保证常数时间的访问性能。2.高吞吐率。即使在非常廉价的商用机器上也能做

  3. 所属分类：其它

    • 发布日期：2021-02-25
    • 文件大小：796672
    • 提供者：weixin_38519082

  1. 建设DevOps统一运维监控平台，全面的系统监控你做好了吗？

  2. 随着Devops、云计算、微服务、容器等理念的逐步落地和大力发展，机器越来越多，应用越来越多，服务越来越微，应用运行基础环境越来多样化，容器、虚拟机、物理机不一而足。面对动辄几百上千个虚拟机、容器，数十种要监控的对象，现有的监控系统还能否支撑的住？来自于容器、虚拟机、物理机、网络设备、中间件的指标数据如何采用同一套方案快速、完整的收集和分析告警？怎样的架构、技术方案才更适合如此庞大繁杂的监控需求呢？上篇文章《建设DevOps统一运维监控平台，先从日志监控说起》主要从日志监控的方面进行了分享，本篇

  3. 所属分类：其它

    • 发布日期：2021-02-25
    • 文件大小：749568
    • 提供者：weixin_38592455

  1. Flume架构以及应用介绍

  2. 本文来自于csdn,从Flume的概念、Event的概念作为起点，然后讲解了架构一些日志采集，代码叙述等等。在具体介绍本文内容之前，先给大家看一下Hadoop业务的整体开发流程：从Hadoop的业务开发流程图中可以看出，在大数据的业务处理过程中，对于数据的采集是十分重要的一步，也是不可避免的一步，从而引出我们本文的主角—Flume。本文将围绕Flume的架构、Flume的应用(日志采集)进行详细的介绍。flume是分布式的日志收集系统，它将各个服务器中的数据收集起来并送到指定的地方去，比如说送到

  3. 所属分类：其它

    • 发布日期：2021-02-25
    • 文件大小：492544
    • 提供者：weixin_38609401

  1. Flume1.5.0入门：安装、部署、及flume的案例

  2. 本文来自于about云开发,文章主要从安装、部署、及flume的案例，运用代码进行详细介绍，希望对大家有帮助。　　flume作为cloudera开发的实时日志收集系统，受到了业界的认可与广泛应用。Flume初始的发行版本目前被统称为FlumeOG（originalgeneration），属于cloudera。但随着FLume功能的扩展，FlumeOG代码工程臃肿、核心组件设计不合理、核心配置不标准等缺点暴露出来，尤其是在FlumeOG的最后一个发行版本0.94.0中，日志传输不稳定的现象尤为严重

  3. 所属分类：其它

    • 发布日期：2021-02-25
    • 文件大小：224256
    • 提供者：weixin_38526823

  1. Flink在美团平台的实践与应用

  2. 上图呈现的是当前美团实时计算平台的简要架构。最底层是数据缓存层，可以看到美团测的所有日志类的数据，都是通过统一的日志收集系统收集到Kafka。Kafka作为最大的数据中转层，支撑了美团线上的大量业务，包括离线拉取，以及部分实时处理业务等。在数据缓存层之上，是一个引擎层，这一层的左侧是我们目前提供的实时计算引擎，包括Storm和Flink。Storm在此之前是standalone模式的部署方式，Flink由于其现在运行的环境，美团选择的是OnYARN模式，除了计算引擎之外，我们还提供一些实时存储功

  3. 所属分类：其它

    • 发布日期：2021-02-24
    • 文件大小：780288
    • 提供者：weixin_38750829

  1. ELK原理与介绍

  2. 一般我们需要进行日志分析场景：直接在日志文件中grep、awk就可以获得自己想要的信息。但在规模较大的场景中，此方法效率低下，面临问题包括日志量太大如何归档、文本搜索太慢怎么办、如何多维度查询。需要集中化的日志管理，所有服务器上的日志收集汇总。常见解决思路是建立集中式日志收集系统，将所有节点上的日志统一收集，管理，访问。一般大型系统是一个分布式部署的架构，不同的服务模块部署在不同的服务器上，问题出现时，大部分情况需要根据问题暴露的关键信息，定位到具体的服务器和服务模块，构建一套集中式日志系统，可

  3. 所属分类：其它

    • 发布日期：2021-02-24
    • 文件大小：373760
    • 提供者：weixin_38682406

  1. 建设DevOps统一运维监控平台，全面的系统监控你做好了吗？

  2. 随着Devops、云计算、微服务、容器等理念的逐步落地和大力发展，机器越来越多，应用越来越多，服务越来越微，应用运行基础环境越来多样化，容器、虚拟机、物理机不一而足。面对动辄几百上千个虚拟机、容器，数十种要监控的对象，现有的监控系统还能否支撑的住？来自于容器、虚拟机、物理机、网络设备、中间件的指标数据如何采用同一套方案快速、完整的收集和分析告警？怎样的架构、技术方案才更适合如此庞大繁杂的监控需求呢？上篇文章《建设DevOps统一运维监控平台，先从日志监控说起》主要从日志监控的方面进行了分享，本篇

  3. 所属分类：其它

    • 发布日期：2021-02-20
    • 文件大小：749568
    • 提供者：weixin_38710323

  1. yulong-hids：一种由YSRC开源的主机入侵检测系统-源码

  2. 驭龙隐藏 由于此项目缺少维护，建议仅用于参考学习和二次开发 驭龙HIDS是一种由YSRC开源的开源的入侵检测系统，由Agent ， Daemon ， Server和Web四个部分组成的，集合异常检测，监控管理为一体，拥有异常行为发现，快速中断，高级分析等功能，可从多个维度行为信息中发现入侵行为。 代理为收集者角色，收集服务器信息，启动启动项，计划任务，监听端口，服务，登录日志，用户列表，实时监控文件操作行为，网络连接，执行命令，初步筛选整理后通过RPC协议传输到服务器官员。 Daemon为守

  3. 所属分类：其它

    • 发布日期：2021-02-20
    • 文件大小：12582912
    • 提供者：weixin_42179184

  1. zipkin：Zipkin是一个分布式跟踪系统-源码

  2. 邮编 是一个分布式跟踪系统。 它有助于收集解决服务体系结构中的延迟问题所需的时序数据。 功能包括该数据的收集和查找。 如果日志文件中有跟踪ID，则可以直接跳至该跟踪ID。 否则，您可以基于属性进行查询，例如服务，操作名称，标签和持续时间。 将为您总结一些有趣的数据，例如在服务中花费的时间百分比以及操作是否失败。 Zipkin UI还提供了一个依赖关系图，该关系图显示了每个应用程序中跟踪了多少个请求。 这对于识别聚合行为（包括错误路径或对不赞成使用的服务的调用）很有帮助。 需要“指示”应用

  3. 所属分类：其它

    • 发布日期：2021-02-18
    • 文件大小：1048576
    • 提供者：weixin_42123191

  1. RALF：Reflex Active Linux防火墙从日志文件内容填充IP集，以实现自动动态防火墙（ADF）-源码

  2. 拉尔夫 Reflex Active Linux防火墙 这是什么 动态防火墙自动化工具。 它能做什么 从自动动态防火墙（ADF）的日志文件内容中自动填充IP集。 运作方式 监视指定的日志文件以获取通常归因于恶意活动的状态消息，以收集IP地址并将其添加到用于防火墙过滤的IP集（例如iptables）。 一旦将日志文件版本轮换到指定要解析的日志文件版本的数量之外，则在下次运行脚本时，将从该日志文件版本中收集的IP地址将从IP集中删除。 好处 利用具有防火墙功能的动态生成的IP集来自动阻止在网络防火墙而

  3. 所属分类：其它

    • 发布日期：2021-02-12
    • 文件大小：32768
    • 提供者：weixin_42121272

  1. ci-firewall：用于在防火墙后面与CI防火墙一起运行CI，并收集结果-源码

  2. ci防火墙 用于在防火墙后运行CI并将结果流收集到公共场所 免责声明 警告：通过使用此方法，您正在防火墙上打一个洞。 请确保您的触发机制配置正确，以便不允许随机人以滥用系统（通过触发随机构建等）或公开方式更改您的代码/脚本（例如，可以进行测试的过滤器）私人信息。 警告：此工具不会处理日志清理，以防止泄露私人信息。 您对自己的擦洗负责。 无论您的脚本将什么打印到stdout / stderr，此工具都会流化。 因此，请确保您的脚本正在处理擦洗 先决条件 可公开访问的AMQP RabbitMQ（带

  3. 所属分类：其它

    • 发布日期：2021-02-09
    • 文件大小：559104
    • 提供者：weixin_42121725

  1. Windows事件日志消息：检索嵌入在Windows二进制文件中的Windows事件日志消息的定义，并以可发现的格式提供它们。 #nsacyber-源码

  2. Windows事件日志消息 Windows事件日志消息（WELM）工具检索嵌入在二进制文件中的Windows事件日志消息的定义。 该工具的输出可用于为操作系统创建事件信息的详尽列表。 该工具最初是为了帮助编写“ 论文而开发的，但已证明在许多情况下很有用： 确定是否存在捕获特定感兴趣数据的事件。 操作系统版本之间的差异事件更改。 操作系统补丁程序级别之间的差异事件更改（在Windows 10中更常见）。 记录事件特定的信息字段及其数据类型，这对于丰富事件收集和分析系统很有用。 确定日志

  3. 所属分类：其它

    • 发布日期：2021-02-06
    • 文件大小：115712
    • 提供者：weixin_42114580

  1. whids：Windows开源端点检测系统-源码

  2. 什么 这是一种混合解决方案，将灵活的主机IDS与基于检测的事件响应功能结合在一起。 该检测引擎建立在以前开发的规则引擎基础上， 专门设计用于将Windows事件与用户定义的规则进行匹配。 为什么 提供类似开源EDR的工具 灵活的检测 易于与其他开源工具（MISP，Hive ...）集成 怎么样 侦测 主机实时检测 侦听Windows事件日志通道并应用检测规则 用户定义的规则（我们知道为什么我们检测到某些东西） 设计用于MS 丰富Windows事件，以构建功能强大的检测原语 中央代理分发规则并

  3. 所属分类：其它

    • 发布日期：2021-02-06
    • 文件大小：9437184
    • 提供者：weixin_42114645

  1. mogu_blog_v2：蘑菇博客（MoguBlog），一个基于微服务架构的前分离博客系统。Web端使用Vue + Element，移动端使用uniapp和ColorUI。可以使用Spring cloud + Spring boot + m

  2. 蘑菇博客 蘑菇博客，一个基于微服务架构的前合并分离博客系统 |||||||||| 前言 陌溪是一个从三本院校一路摸滚翻爬上来的程序员。目前就职于字节跳动的数据广告部门，是字节跳动全线产品的商业变现研发团队。这两天创建了一个微信公众号【陌溪教你学编程】 ，未来将会在公众号上持续性的输出很多原创小知识以及学习资源，欢迎各位小伙伴关注我，和我一起共同学习，同时我也希望各位小伙伴能够给蘑菇博客项目多多Star支持，您的点赞就是我维护的动力！ 微信公众号【陌溪教你学编程】 微信群【陌溪教你学编程】 项目已

  3. 所属分类：其它

    • 发布日期：2021-02-05
    • 文件大小：45088768
    • 提供者：weixin_42131790

  1. SysmonSearch：通过可视化Sysmon的事件日志来调查可疑活动-源码

  2. SysmonSearch SysmonSearch通过汇总Microsoft Sysmon生成的事件日志，使事件日志分析更有效，更省时。 系统总览 SysmonSearch使用Elasticserach和Kibana（以及Kibana插件）。 弹性ser Elasticsearch收集/存储Sysmon的事件日志。 基巴纳Kibana提供了用于Sysmon事件日志分析的用户界面。 以下功能作为Kibana插件实现。 可视化功能此功能将Sysmon的事件日志可视化，以说明进程和网络的相关性

  3. 所属分类：其它

    • 发布日期：2021-02-05
    • 文件大小：7340032
    • 提供者：weixin_42168745

  1. WatchAD：AD安全入侵检测系统-源码

  2. 观看广告 AD安全入侵检测系统 英文文件|文件 在收集所有域控制器上的事件日志和kerberos流量之后，WatchAD可以通过功能匹配，Kerberos协议分析，历史行为，敏感操作，蜜罐帐户等来检测各种已知或未知威胁.WatchAD规则涵盖了许多常见的AD攻击。 WatchAD在Qihoo 360 Intranet上运行良好已超过六个月，并且发现了一些威胁活动。 为了支持开源社区并促进项目的改进，我们决定基于事件日志检测来开放系统的开源部分。 当前支持以下检测： 发现：使用目录服务查

  3. 所属分类：其它

    • 发布日期：2021-02-05
    • 文件大小：509952
    • 提供者：weixin_42153615

  1. JustLog：JustLog使iOS上的日志记录更上一层楼。 它毫不费力地通过TCP套接字支持控制台，文件和远程Logstash日志记录。 支持logz.io-源码

  2. JustLog JustLog将登录iOS提升到一个新水平。 它毫不费力地通过TCP套接字支持控制台，文件和远程Logstash日志记录。 支持logz.io。 总览 在Just Eat，日志记录和监视是我们作为工程师的基本工作。 无论您是后端工程师还是前端工程师，通常都会遇到这样的情况：了解软件在生产中的行为很重要，即使不是很重要。 近年来，用于实时日志记录的ELK堆栈得到了广泛的采用，主要是在后端世界中，多个微服务经常相互交互。 在移动世界中，调查问题的常用方法是从设备收集日志或尝试按照

  3. 所属分类：其它

    • 发布日期：2021-02-04
    • 文件大小：1048576
    • 提供者：weixin_42160252

  1. geophysical_notes：以IPythonJupyter笔记本的形式收集的地球物理注释-源码

  2. // geophysical_notes // 我以Jupyter笔记本形式写的地球物理记录集。 地震岩石物理学 用良好的日志数据做魔术。 支持数据“地震岩石物理学” well_2*.txt ：来自 2井的原始测井数据 qsiwell2.csv ：从各种文件中收集所有日志 qsiwell2_frm.csv ：qsiwell2 +用流体代替的弹性测井仪 qsiwell2_augmented.csv ：准系统井数据，仅Ip，Vp / Vs和LFC（液流类日志） qsiwell2_synthet

  3. 所属分类：其它

    • 发布日期：2021-02-04
    • 文件大小：140509184
    • 提供者：weixin_42116794

  1. odin：可编程，可观察和分布式的工作编排系统-源码

  2. :open_book: 总览 Odin是一个可编程的，可观察的分布式工作流程系统，它允许在基于Linux的系统上对用户创建的任务进行调度，管理和无人值守的后台执行。 按照定义，作业调度程序应该消除劳动，这是一项与运行服务相关的工作，该工作是手动的，重复的，最重要的是可自动化的。 尽管Odin关心要执行的内容以及何时执行，但Odin同样关心您的工作的预期行为，这完全由用户代码描述。 这种可观察性通过面向Web的用户界面来显示，该界面显示作业日志和指标。 所有这些都是通过使用Go，Node.js

  3. 所属分类：其它

    • 发布日期：2021-02-03
    • 文件大小：4194304
    • 提供者：weixin_42175516

  1. 通过日志监控并收集Java应用程序性能数据

  2. 针对JVM的CPU使用及内存占用的性能分析，已经有各种剖析(Profiling)工具可供使用。但是如果想要得具体的调用栈，这些工具往往会给应用程序服务器增加大量额外压力。Perf4j则是通过对自定义监控范围进行日志记录，再经统计分析生成所需性能数据，Perf4j提供了对常用日志工具的扩展以方便与产品集成，它产生的数据可用于生成可视化的性能图表。在实际部署的生产环境能够以较低的风险及成本实现对业务逻辑级别性能问题的追踪。本文将介绍如何集成Perf4j到Java应用程序中并生成性能数据。系统日志是应

  3. 所属分类：其它

    • 发布日期：2021-02-03
    • 文件大小：183296
    • 提供者：weixin_38627234
« 1 2 ... 4 5 6 7 8 910 11 12 13 14 ... 29 »