最近开发的数据库脱敏系统含有多数据源，今天单独虚出一个机器部署大数据环境，好久以前部署过，今天有部署一次，整理记录下来，以后会用到。教程中涉及到的安装包通过关注公众账号，发送消息hadoop获取一、d...
02月18日安全闲碎24 views评论docker
root
大数据环境hadoop spark的安装
02月18日安全闲碎24 views评论docker
root
02月18日安全闲碎24 views评论docker
root
Hadoop、Spark等5种大数据框架对比，你的项目该用哪种？
来源：数据学堂编辑：谈数据全文共 9060 个字，建议阅读 20 分钟大数据是收集、整理、处理大容量数据集，并从中获得见解所需的非传统战略和技术的总称。虽然处理...
02月06日56 views评论大数据
数据集
远程监控工具 -- Spark
=================================== 免责声明 请勿利用文章内的相关技术从事非法测试，由于传播、利用此文所提供的信息而造成的任何直接或者间接的后果及损失，均由使用者本...
02月04日109 views评论原文
工具
Python速查表大全，第二弹
Python 作为当下最大众化的编程语言，相信每天都会有大量的新手朋友进入学习大军的行列。但是无论一门语言是多么的容易学习，其基本概念、基础知识还是比较多的，对于小白来说，一时间要掌握这么多还是有些吃...
01月09日30 views评论机器学习
深度学习
Apache 相关漏洞
Apache Airflow是一个由社区创建的平台，用于以编程方式创作、安排和监控工作流程。Apache Spark是美国阿帕奇（Apache）基金会的一款支持非循环数据流和内存计算的大规模数据处理引...
11月09日125 views评论spark
攻击者
漫谈实时数仓
来源：数据社全文共1984字，建议阅读5分钟01什么是实时数仓数据仓库大家非常熟悉，在1991年出版的“Building the Data Warehouse”，数据仓库之父比尔·恩门首次提出数据仓库...
10月29日39 views评论spark
数据量
案例：Spark SQL on Kubernetes在网易传媒的落地实践
随着云原生技术的发展和成熟，大数据基础设施积极拥抱云原生是业内发展的一大趋势。网易传媒在2021年成功将Spark SQL部署到了Kubernetes集群，并实现与部分在线业务的混合部署，到目前已经稳...
09月17日156 views评论kubernetes
spark
腾讯安全威胁情报中心推出2022年7月必修安全漏洞清单
长按二维码关注腾讯安全威胁情报中心腾讯安全攻防团队A&D Team腾讯安全 企业安全运营团队腾讯安全威胁情报中心推出2022年7月份必修安全漏洞清单，所谓必修漏洞，就是运维人员必须修复、不可拖...
08月24日29 views评论威胁情报
攻击者
RASP| Apache Spark Shell(CVE-2022-33891)
Apache发布安全公告，修复了一个Apache Spark中存在的命令注入漏洞。漏洞编号：CVE-2022-33891，漏洞威胁等级：高危。 ...
08月14日37 views评论apache
shell
Apache Spark 命令注入漏洞（CVE-2022-33891）复现
CVE-2022-33891漏洞复现
简介Spark 是用于大规模数据处理的统一分析引擎。它提供了 Scala、Java、Python 和 R 中的高级 API，以及支持用于数据分析的通用计算图的优化引擎。它还支持一组丰富的高级工具，包括...
07月25日96 views评论apache
版本
Apache Spark UI 命令注入漏洞（CVE-2022-33891）
影响版本：3.0.3 and earlier, versions 3.1.1 to 3.1.2, and versions 3.2.0 to 3.2.1.Fix：https://github.com/...
07月24日97 viewsApache Spark UI 命令注入漏洞（CVE-2022-33891）已关闭评论https
rce
5