时间：2025/2/3 11:52:34
Spark调优之Shuffle调优 本节开始先讲解Shuffle核心概念；然后针对HashShuffle、SortShuffle进行调优；接下来对map端、reduce端调优；再针对Spark中的数据倾斜问题进行剖析及调优；最后是Spark运行过程中的故障排除。 本文首发于公众…
2025/2/3 15:06:31 人评论 次浏览
1.定义一个函数，该函数可以实现控制台输入，最终返回一个int类型的正整数 def chr_to_int():user_input input(请输您要转换的字符串：)if user_input.isdigit():return int(user_input)return False 2.定义一个函数，该函数可以实现…
2025/2/3 15:02:27 人评论 次浏览
使用master 下的sysprocesses 查询 db正在使用的spid 如 1. 查询哪个用户链接在连接数据库 use 数据库名 select spid from sysprocesses where dbidDB_ID(数据库名)、 2.杀掉对应的进程 exec(‘kill xx) 3.把数据库设置成多用户 alter database 数据库名 set MULT…
2025/2/3 12:41:52 人评论 次浏览
一、概述 group 模块可以帮助我们管理远程主机上的组。 二、常用参数 name参数：必须参数，用于指定要操作的组名称。 state参数：用于指定组的状态，两个值可选，present，absent，默认为 present&…
2025/2/3 11:54:36 人评论 次浏览
Qt使用html生成word文档零、前言一、效果图二、核心代码零、前言 项目中要用到把一些图片和一些报告保存为word文件，今天研究了一下，主要是使用html方法保存为word文档，这对html的使用有一定的要求，由于自己之前html的使用也不多…
2025/2/3 15:07:02 人评论 次浏览
Spark调优之Shuffle调优 本节开始先讲解Shuffle核心概念；然后针对HashShuffle、SortShuffle进行调优；接下来对map端、reduce端调优；再针对Spark中的数据倾斜问题进行剖析及调优；最后是Spark运行过程中的故障排除。 本文首发于公众…
2025/2/3 15:06:31 人评论 次浏览
文章目录1、自定义分区2、分配boot分区3、创建LVM物理卷4、生成卷组5、创建逻辑卷6、点击下一步就可以格式化安装了我们先用新安装Linux系统时的图形化界面，来演示一下LVM逻辑卷如何进行分区。 提示：安装Linux系统步骤请看 安装Linux系统（一&…
2025/2/3 15:05:31 人评论 次浏览
【参考资料】 【1】https://tools.ietf.org/html/rfc3501 一 基本概念 IMAP(Internet Mail Access Protocal) Internet 邮件访问协议,RFC3501定义,用于邮件客户端（如outlook等）从邮件服务器获取、下载邮件信息。IMAP基于TCP协议，默认监听14…
2025/2/3 15:05:00 人评论 次浏览
前言 参考文章 FastDFS搭建单机图片服务器（二） 这篇文章也是参考了网上的文章，为什么不直接说是转载的？因为上面文章只说了一半—实际生产环境，譬如，nginx除了fastdfs，实际上可能还要编译open…
2025/2/3 15:04:29 人评论 次浏览
刚刚配置了新的环境来搭建的Android，刚启动一个项目的时候会出现一些问题，让我没有方法解决，同事一看接着就给解决了，还希望大家以后遇见这个问题也会很快的解决。问题描述： 01.[2014-04-14 20:57:08 - XGX - DEMO] Re…
2025/2/3 15:03:59 人评论 次浏览
Ubuntu系统安装好后，默认字体对于中文的支持看上去不太美丽，于是很多朋友可能需要设置系统的默认字体为自己喜欢的字体。本文主要介绍如何解决这两个问题。说明：测试系统是Ubuntu14.04。安装字体：以微软雅黑字体为例(其他的宋体、…
2025/2/3 11:52:04 人评论 次浏览
目录第0级，Excel第1级，敏捷BI第1级，润乾报表第1级，易明建模第2级，SPL第3级，SQL第3级，国产报表工具与企业BI软件第3级，SPL第3级，AutoML平台路线图SPL资料大数据和人工智能…
2025/2/3 11:51:33 人评论 次浏览
近来没什么技术更新，但是又想写点东西。就随便扯一点吧。因为疫情，断断续续的隔离了快一个月，平时的工作也是以系统运维和前端开发为主，没有什么新的技术开发，就准备学习下CSS，补补前端的短板。借着新项目&…
2025/2/3 11:50:02 人评论 次浏览
汇集网上焦点轮播图的实现方式，自己试了下，不过鼠标悬浮停止动画和鼠标离开动画播放好像没生效，不太明白，最后两行代码中，为什么可以直接写stop和play。不用加括号调用函数么？求懂的大神指点！ 所…
2025/2/3 11:48:30 人评论 次浏览
1.substring 应用类型：stringsubstring(indexstart,indexend) 方法返回一个字符串在开始索引到结束索引之间的一个子集返回内容：[1,3)当 indexstart > indexend，则默认反向取负数 任意参数小于0，则被当做0 2.substr 应用类型…
2025/2/3 11:47:59 人评论 次浏览
Mac os环境下home目录下是没有profile文件的开启终端后，读取的是/etc/profile文件因为个人喜欢使用ll命令，mac默认并没有这个命令，所以使用如下方法设置别名cp -rp /etc/profile ~/.bash_profilechmod w ~/.bash_profileecho "alias lll…
2025/2/3 11:47:29 人评论 次浏览