2024中国数据安全十大发展趋势预测

在大数据时代,数据已经成为企业的核心资产。然而,随着数据量的不断增加,数据安全问题也愈发突出。如何保障数据安全,成为企业必须面对的难题。作为中国新一代信息安全技术企业的代表厂商,明朝万达数据安全专家对数据安全领域未来一年的发展趋势进行了预测,旨在帮助企业更好地...

   沸羊羊  发表于2024-02-02 15:42  123  0

Hive优化之监控

Hive是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的一个点,因此掌握一些Hive调优是必不可少的技能。影响Hive效率的主要有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和Hive本身...

   沸羊羊  发表于2024-02-02 15:39  102  0

Hive优化之Spark执行引擎的参数优化

Hive是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的的一个点,因此掌握一些Hive调优是必不可少的一项技能。影响Hive效率的主要有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和Hiv...

   沸羊羊  发表于2024-02-02 15:39  99  0

SQL Server性能优化初探:聚焦阻塞SQL,快速定位与解决之道

引言我们在运维数据库的时候,经常会面对这样的问题:数据库现在运行得怎么样有哪些会话在执行,当前状态是什么,在执行什么SQL哪些会话被阻塞,阻塞原因是什么会话是从哪些IP连接过来的,使用了什么账号通过这篇文章介绍的方法,我们可以快速找到SQL Server中正在...

   数栈君  发表于2024-01-31 10:37  104  0

实战指南:排查服务器CPU过高问题,揪出幕后进程

背景节点报CPU使用率高,需要定位是什么进程占用CPU使用率高。CPU使用率持续较高在对应节点使用 “top”命令,然后键盘输入“P”,即按照CPU使用率排序进程。执行ps -ef | grep 使用率高的pid>。确认该进程的详细信息,确认该进程的日志...

   数栈君  发表于2024-01-31 10:32  82  0

MySQL排障实战(一)—— 连接异常中断丨运维实战

问题背景数栈数据质量模块,接入客户的数据源后,一执行就报错。报错信息:{"logInfo": {{"jobid":"1a4ebbbd","msg_info":"2021-12-20 14:23:54:submit job is success"}} "engi...

   数栈君  发表于2024-01-29 11:33  147  0

Hadoop集群小文件合并优化建议指导

1 综述1.1 综述本指导书旨在指导大数据集群使用者在大数据集群小文件较多的情况下,针对小文件进行优化处理,有效减小集群文件对象数目,减缓namenode所承载的压力,减少mapreduce任务扫描文件数。2 关于小文件2.1 什么是小文件小文件是指文件大小明...

   数栈君  发表于2024-01-29 11:31  108  0

Hive优化之配置参数的优化(一)

Hive是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的一个点,因此掌握一些Hive调优是必不可少的一项技能。影响Hive效率的主要有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和、Hiv...

   数栈君  发表于2024-01-29 11:29  99  0

统一融合,助力知名烟草集团打通互联网营销平台数据脉络丨运维案例

某烟草集团,集卷烟生产销售、烟草物资配套供应、科研以及多元化经营等为一体,在卷烟产销总量、全国市场覆盖率、国际市场销量等多项指标上均位居行业前列。该集团基于微信服务号运营,策划了以烟包二维码为载体,通过单品活动项目探索了烟草互联网营销的转化路径,初步建立了与渠...

   数栈君  发表于2024-01-29 11:25  94  0

某系统被入侵挖矿排查案例丨运维案例实战

1、当时的出现的情况是:执行 top、w、netstat命令的时候,会出现卡住的情况,无法正常使用2、我们上传新的top命令之后,只是看到CPU使用率比较高,但是看不到占用CPU的异常进程3、我们通过perf生成火焰图,发现存在很多异常进程占用CPU资源,这里...

   数栈君  发表于2024-01-29 11:19  110  0
1767条数据,每页显示10条
社区公告
  • 大数据领域最专业的产品&技术交流社区,专注于探讨与分享大数据领域有趣又火热的信息,专业又专注的数据人园地

最新活动更多
微信扫码获取数字化转型资料
钉钉扫码加入技术交流群