小结 经验 问题linux

数据倾斜问题

## 数据倾斜的简介 数据倾斜即单个节点任务处理的数据量远高于同类型任务处理的数据量,成为整个作业的性能瓶颈。 本文将从产生数据倾斜的原因、不同计算引擎下的解决方法讨论。 ## 数据倾斜的场景和对应的解决方案 ### Suffle过程 数据倾斜和Suffle过程是密不可分的,Suffle过程在MR和 ......
数据 问题

vuepress 安装报错问题

关于vuepress部署出现样式的问题及解决 6月前作者:我yi癫狂分类: 博客文章阅读(35)原文违法举报 目录 vuepress部署出现样式问题 vuepress个人博客部署遇到的一些问题 1、js和css出现404问题 2、每次都要重复操作打包、运行、上传github很麻烦怎么办? 3、git ......
vuepress 问题

linux环境编程(1): 实现一个单元测试框架-2

之前实现的c语言项目单元测试框架cutest, 功能更新, 已上传至ubuntu ppa仓库, 方便安装使用, 文末附带视频说明. ......
框架 单元 环境 linux

Qt安卓开发经验技巧总结V202308

### 01:01-05 1. pro中引入安卓拓展模块 QT += androidextras 。 2. pro中指定安卓打包目录 ANDROID_PACKAGE_SOURCE_DIR = $$PWD/android 指定引入安卓特定目录比如程序图标、变量、颜色、java代码文件、jar库文件等。 ......
经验技巧 V202308 经验 技巧 202308

COMP2401A Pokemon 问题

COMP2401A – Assignment 5PrerequisitesPlease review the lectures up to and including Module 15 – Scripting.Download the csv file containing Pokemon des ......
Pokemon 问题 2401A COMP 2401

windows系统下从硬盘安装linux-ubuntu

# windows系统下从硬盘安装linux-ubuntu - 1.使用系统自带的分区工具,划10G左右的空间当作安装盘。分区格式为FAT32,取个名字叫A。 - 2.把下载好的ubuntu镜像打开,复制内容到安装盘A。 - 3.重启电脑,按F12选择硬盘启动项。这里选ubuntu。 ......
linux-ubuntu 硬盘 windows ubuntu 系统

CTP tick数据合成K线的问题

各个交易所的tick数据 上海期货交易所(SHFE):以rb2310为例 日盘收盘15:00:00的tick是有效数据,今收盘ClosePrice和结算价SettlementPrice也在15:00:00推送。中间休息前的收盘10:15:00是有效数据,夜盘收盘23:00:00是有效数据。这些时间的 ......
数据 问题 tick CTP

Linux之定时器

###Linux下的实现方式 + socket选项SO_RECVTIMEO和SO_SNDTIMEO + SIGALRM信号 信号相关笔记:[Linux之信号](https://www.cnblogs.com/beishangeyu/p/17630183.html "Linux之信号") + I/O复 ......
定时器 Linux

Linux进程间通信(IPC)——管道和FIFO

# 管道和FIFO ## 一、 匿名管道 ```c #include int pipe(int fd[2]); /* fd[0] 管道输出端FD, fd[1]管道输入端FD */ int pipe2(int pipefd[2], int flags); /* flags:O_NONBLOCK */ ......
管道 进程 Linux FIFO IPC

windows上安装linux,nodejs笔记

安装ubuntun 打开store,并关闭其自动更新 搜索ubuntu,安装最新版LTS 安装nodejs sudo apt purge nodejs sudo apt autoremove sudo apt update sudo apt install -y curl curl -fsSL ht ......
windows 笔记 nodejs linux

Linux Mint 21.3 计划于 2023 年圣诞节发布

Linux Mint 项目近日公布了基于 Ubuntu 的 Linux Mint 发行版下一个重要版本的一些初步细节,以及备受期待的基于 Debian 的 LMDE 6(Linux Mint Debian Edition)版本。 近日,Linux Mint 项目负责人克莱门特-勒菲弗(Clement ......
Linux 21.3 2023 Mint 21

Linux --- 查看PID

一、概要 1. 概念 PID是进程标识符(Process ID)的简称,它是Linux系统中标识一个独立进程的唯一标识符,通过PID我们能定位进程的所有相关信息,比如端口号,进程所属程序地址,进程所属用户等。 二、操作 1. 查看所有运行中的进程 ps aux 2. 获取当前进程的PID #!/bi ......
Linux PID

动态规划--最长公共子序列( LCS 问题)

> 博客地址:https://www.cnblogs.com/zylyehuo/ * ![](https://img2023.cnblogs.com/blog/3071480/202308/3071480-20230819184610651-1700479430.png) * ![](https:/ ......
序列 动态 问题 LCS

安装容器遇到的问题

windows系统上安装docker 先要下载安装包 下载页面为: https://docs.docker.com/desktop/install/windows-install/ 有时候打不开,导致无法下载docker安装包,可以试试将下载连接放到迅雷中试试 https://desktop.doc ......
容器 问题

《区间最值操作与历史最值问题》(吉如一)阅读笔记

## A. 基础区间最值操作 ### 问题描述 给定一个序列 $A$,需要支持以下操作: 1. 给定区间,将内部所有元素对 $X$ 取最大值。 1. 询问区间和。 ### 解法 首先,传统的线段树区间操作时间复杂度为 $\Theta(\log n)$,这是基于任何一个区间在线段树上作拆解,最终得到的 ......
区间 笔记 问题 历史

动态规划--钢条切割问题

> 博客地址:https://www.cnblogs.com/zylyehuo/ * ![](https://img2023.cnblogs.com/blog/3071480/202308/3071480-20230819124858130-2039268591.png) * ![](https:/ ......
钢条 动态 问题

解决达梦数据库密码复杂性导致的数据导出问题 - 问题记录

问题描述 在使用达梦数据库时,遇到了以下问题: 密码过于复杂,无法进行数据库的导出备份操作。 数据库导出时存在表数据导出不全的情况。 本文旨在记录并解决这些问题的过程。 问题解决过程 问题1: 密码过于复杂导致无法导出备份 解决方法: 使用管理员账户连接到达梦数据库,并修改数据库密码为较简单的密码。 ......
数据 问题 复杂性 密码 数据库

CHAPTER 7 Linux Operating System Services linux 系统服务

/usr/include/asm-generic/unistd.h /usr/include/errno.h /usr/include/asm-generic/errno.h /usr/include/asm-generic/errno-base.h ......
Operating Services CHAPTER System 系统

Virtualbox安装Linux使用2560以上高分辨率黑屏

Virtualbox安装Linux后,通过VirtualBox的视图菜单默认只有1920的分辨率可供选择,想要使用更高分辨率(比如4K)需要在Linux系统的设置里选择。 但是,通过Linux系统菜单设置分辨率达到2560时,虚拟机就会黑屏,只有鼠标。此时系统仍然正常运行,按esc可取消当前设置,按 ......
Virtualbox 分辨率 Linux 2560

linux root用户密码输入正确还是提示access denied

问题:之前用远程工具连接一直都是好的,第二天上班找开远程工具要输root的密码了,输入用户密码后还是无效,可以确定用户密码是对的,其中有一个远程工具一直是连着的就没有问题。 排查问题: 1、相接用passwd修改密码,无效 2、查看用户是否被锁定,也没有锁 3、因为在前一天晚上我删了liunx中/o ......
密码 还是 用户 access denied

8.19 模拟赛小结

## 前言 结束了 也许这几天很苦 但也是最有意义的几天 这篇写简单一点吧 ## T1 颠倒黑白 ![image](https://img2023.cnblogs.com/blog/3258776/202308/3258776-20230819160142322-194698762.png) 很强的 ......
模拟赛 小结 8.19 19

linux基础

# 1.计算机基础 美团单车 内存 - ram 读写速度快 - 运行程序 - 程序从闪存加载到[内存]中运行 掉电数据丢失 临时存储数据 闪存 - rom 读写速度慢 掉电数据不丢失 - 存储数据 - 存储信息 永久存储数据 程序运行 下载微信 - 闪存 手机 : 12 + 256 12 - 内存 ......
基础 linux

linux之shell脚本quickStart

这篇文章主要参考于《跟老男孩学linux运维:Shell编程实战》,方便写shell脚本时参考,只列一些shell脚本中的容易混淆的知识点。 [TOC] ## 1 变量 变量就是用一个固定的字符串代替更多、更复杂的内容,使用变量的最大好处就是使程序开发更为方便。 ### 1.1 普通变量 变量可分为 ......
脚本 quickStart linux shell

部署Kafka+ZK及其日志采集实战(系统版本:linux_CentOs_7.8)

- 部署ZK ``` docker run -d --name zookeeper -p 2181:2181 -t wurstmeister/zookeeper ``` - 部署Kafka ``` docker run -d --name xdclass_kafka \ -p 9092:9092 \ ......
linux_CentOs 实战 版本 CentOs 系统

项目中多次调用百度地图组件然后页面出现自动刷新的问题——Too many active WebGL contexts. Oldest context will be lost

最近在项目中遇到这么一个奇怪的问题,在调用百度地图组件之后页面会不定期的自动刷新,后来经过排查发现问题是因为内存泄漏的原因: Too many active WebGL contexts. Oldest context will be lost。 是因为chrome浏览器对单个页面能运行的WebGL ......
组件 contexts context 页面 地图

linux下进程间通信

# 进程间通信 ## 一、进程间通信的介绍 ### 1、进程间通信的概念 > 进程通信(Interprocess communication),简称:IPC; > 本来进程之间是相互独立的。但是由于不同的进程之间可能要共享某些信息,所以就必须要有通讯来实现进程间的互斥和同步。比如说共享同一块内存、管 ......
进程 linux

贪心算法--活动选择问题

> 博客地址:https://www.cnblogs.com/zylyehuo/ * ![](https://img2023.cnblogs.com/blog/3071480/202308/3071480-20230819103606130-1305426951.png) * ![](https:/ ......
算法 问题

贪心算法--拼接最大数字问题

> 博客地址:https://www.cnblogs.com/zylyehuo/ * ![](https://img2023.cnblogs.com/blog/3071480/202308/3071480-20230819103408921-1043621003.png) * ![](https:/ ......
算法 数字 问题

linux下gcc/g++创建一个共享库项目以及创建一个可执行项目动态链接该共享库

1.先确保有g++命令 2.创建一个c++项目目录,并cd到该目录 3.创建共享库头文件:dynamic_so.h #ifndef __TEST__ #define __TEST__ int testFun(int a, int b); #endif 4.创建对应共享库的实现文件:dynamic_s ......
项目 链接 动态 linux gcc

【LeetCode1454. 活跃用户】MySQL 用户自定义变量,面向过程编程解决"连续天数"的问题

[TOC] # 题目地址 https://leetcode.cn/problems/active-users/description/ # 题目描述 活跃用户 是指那些至少连续 5 天登录账户的用户。 编写解决方案, 找到 活跃用户 的 id 和 name。 返回的结果表按照 id 排序 。 # 代 ......
用户 天数 quot 变量 LeetCode