Part1 前言 大家好,我是ABC_123。本期分享一个之前做过的针对某物联网云平台的渗透测试案例,包括了对Hadoop生态系统的内网横向过程,由于内网很多都是Yarn、Map...
FOFA网络测绘命令整理
本文章仅供学习使用,如若非法他用,与平台和本文作者无关,需自行负责! 公众号回复fofa下载PDF版序号组件名fofa网络测绘命令1360新天擎title="360新天擎"2ACME mini_htt...
基于 Spark 大数据平台的云上用户日志行为审计系统
摘 要:网络安全已经逐渐成为一个全球性的问题,受到各行各业的高度重视。除了采用一些主动措施来提高系统的安全性,还可以通过审计来提高网络的安全性。针对这一现状,设计了基于 Spark 大数据平台的云上用...
Apache Iceberg 中引入索引提升查询性能
动手点关注干货不迷路Apache Iceberg 是一种开源数据 Lakehouse 表格式,提供强大的功能和开放的生态系统,如:Time travel,ACID 事务,partition evo...
【漏洞预警】Apache Spark UI shell 命令注入漏洞
漏洞描述:该漏洞是针对此前CVE-2022-33891漏洞的修订,原有漏洞通告中认为3.1.3版本已修复该漏洞,后发现仍受到影响,3.1.3版本已不再维护,官方建议升级至3.4.0版本。Apache ...
Shuttle2.0: 大数据计算引擎推进器
PART00前言Shuttle [1]是 OPPO 大数据团队自研的高可用高性能的 Spark Remote Shuffle Service,2022年4月份已经对外开源 [2],...
Apache Spark UI 命令注入漏洞预警
01情况概述7月18日, Apache 发布安全公告,修复了一个 Apache Spark UI 中存在的命令注入漏洞。漏洞编号:CVE-2022-33891,漏洞威胁等级“高危”当Apache Sp...
大数据环境hadoop spark的安装
最近开发的数据库脱敏系统含有多数据源,今天单独虚出一个机器部署大数据环境,好久以前部署过,今天有部署一次,整理记录下来,以后会用到。教程中涉及到的安装包通过关注公众账号,发送消息hadoop获取一、d...
Hadoop、Spark等5种大数据框架对比,你的项目该用哪种?
来源:数据学堂编辑:谈数据全文共 9060 个字,建议阅读 20 分钟大数据是收集、整理、处理大容量数据集,并从中获得见解所需的非传统战略和技术的总称。虽然处理...
远程监控工具 -- Spark
=================================== 免责声明 请勿利用文章内的相关技术从事非法测试,由于传播、利用此文所提供的信息而造成的任何直接或者间接的后果及损失,均由使用者本...
Python速查表大全,第二弹
Python 作为当下最大众化的编程语言,相信每天都会有大量的新手朋友进入学习大军的行列。但是无论一门语言是多么的容易学习,其基本概念、基础知识还是比较多的,对于小白来说,一时间要掌握这么多还是有些吃...
Apache 相关漏洞
Apache Airflow是一个由社区创建的平台,用于以编程方式创作、安排和监控工作流程。Apache Spark是美国阿帕奇(Apache)基金会的一款支持非循环数据流和内存计算的大规模数据处理引...
7