性能 环境linux kafka
《Linux基础》04. 用户管理 · 用户组 · 相关文件 · 权限管理
(用户管理) 本文以 CentOS7.6 为例 1：用户管理指令 Linux 系统是一个多用户多任务的操作系统。任何一个要使用系统资源的用户，都必须首先向系统管理员申请一个账号，然后以这个账号的身份进入系统。 1.1：添加用户 基本语法： useradd 用户名 默认一个用户的家目录在 ==/hom ......
以 100GB SSB 性能测试为例，通过 ByteHouse 云数仓开启你的数据分析之路
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 I. 传统数仓的演进：云数仓 近年来，随着数据“爆炸式”的增长，越来越多的数据被产生、收集和存储。而挖掘海量数据中的真实价值，从其中提取商机并洞见未来，则成了现代企业和组织不可忽视的命题。 随着数据量级和复杂度的增 ......
Linux下Shell脚本输出Json格式结果
用NTP命令举例说明 脚本如下： #!/bin/bash #echo " start " resp=$(timedatectl list-timezones)#要执行的命令，并将命令结果赋值给变量 #echo -e $resp | sed "s/ /\n/g"#可以对结果变量进行处理，想要的操作 d ......
linux修改系统时间
0.查看当前系统时间 date 1. 修改当前系统时间（临时） date -s “2021-07-31 17:02:30” 2. 查看硬件时间 hwclock --show 3. 修改硬件时间 hwclock --set --date “2021-07-31 17:02:45” 4. 同步系统时间和 ......
Kafka在本地环境下不消费数据
package com.test.core.condition; import lombok.extern.slf4j.Slf4j; import org.springframework.beans.factory.annotation.Value; import org.springframewo ......
RabbitMQ在本地环境下不消费数据
package com.test.core.condition; import lombok.extern.slf4j.Slf4j; import org.springframework.amqp.rabbit.annotation.RabbitListenerAnnotationBeanPostP ......
MySQL（免安装版）下载，安装，配置环境变量【0基础小白用】
安装版和免安装版的区别： 1.安装版自动帮你配置完成，也有安装引导，上来就能用。2.免安装版可在你自己需要的目录中解压，然后手动配置 my.ini，配置环境变量，初始化数据库，配置账号密码，比较灵活，但是新人配置需要查看教程。 1，下载 https://dev.mysql.com/downloads ......
【环境搭建】docker+nginx部署PHP
目的 使用docker容器完成nginx的安装以及部署PHP网页 步骤 一、 安装nginx 1. 拉取Nginx镜像 docker pull nginx //拉取镜像 docker images //查看本地镜像 这里注意需要记一下nginx的IMAGE ID，我这里的ID是605c 2. 创建N ......
anaconda在linux下的安装配置
首先上Linux官网下载最新 对应版本 的Anaconda安装包 链接: https://www.anaconda.com/products/distribution#Downloads 因为我们是在Linux系统下安装Anaconda，所以选择Linux平台的64位版本 终端找到安装包当前文件目录 ......
30分钟带你熟练性能优化的那点儿事儿（案例说明）
前言 性能优化是数据库运维人员和中、高级软件开发人员的必备技能，很多时候老司机和新司机的区别就在写出的东西是否优化。 博主接触过近千家客户的系统，这些系统都存在着各种各样的性能问题。那么如何透彻的了解我们的数据库性能问题？今天就用一个案例来说明性能优化的那点儿事儿。 PS:很多技术人员对优化有一套自 ......
Linux数据盘挂载
在我们使用云服务器时，一般会分两个磁盘：系统盘与数据盘，一般情况数据盘是需要手动去挂载的。 一、查看系统磁盘信息 1.1 查看磁盘信息 列出所有可用块设备的信息，而且还能显示他们之间的依赖关系，但是它不会列出RAM盘的信息 lsblk 1.2 硬盘实体使用情况，也可对硬盘分区 fdisk -l 如上 ......
docker-zk-kafka
docker-zk-kafka docker-compose.yml version: '2' services: zookeeper: image: wurstmeister/zookeeper ports: - "2181:2181" kafka: image: wurstmeister/kaf ......
React Native 开发环境搭建
一、React Native介绍 二、开发环境的搭建 2.1、Node.js安装 Node.js要求14版或更新 https://nodejs.org/en 查看版本： 2.2、yarn安装 2.3、react-native-cli安装 安装项目： 命令： 2.4、下载Chocolatey包管理器 ......
docker部署zookeeper与kafka
version: '3' services: zookeeper: image: zookeeper:3.6.3 restart: always networks: - kz hostname: zookeeper ports: - 2181:2181 kafka: image: 'bitnami/ ......
kafka的安装与配置
安装并配置Kafka Broker 这里将kafka和zookeeper部署在一起了。 1、下载与安装Kafka kafka官网https://kafka.apache.org/downloads 所以这里推荐的版本是kafka_2.12-2.7.2.tgz 将下载下来的安装包直接解压到一个路径下即 ......
汇总Linux、Git命令、工具
基本命令 uname -m 显示机器的处理器架构 uname -r 显示正在使用的内核版本 dmidecode -q 显示硬件系统部件 hdparm -tT /dev/sda 在磁盘上执行测试性读取操作系统信息 arch 显示机器的处理器架构 uname -m 显示机器的处理器架构 hdparm - ......
kafka、zookeeper入门
ZooKeeper基础与入门 1、ZooKeeper概念介绍 在介绍ZooKeeper之前，先来介绍一下分布式协调技术 所谓分布式协调技术主要是用来解决分布式环境当中多个进程之间的同步控制，让他们有序的去访问某种共享资源，防止造成资源竞争（脑裂）的后果。 这里首先介绍下什么是分布式系统 所谓分布式系 ......
Linux|--sh脚本|--文件执行报错::Error response from daemon: invalid reference format
前言 由于Linux中的docker镜像和容器需要批量处理, 所以搞一个脚本,直接一下处理了, 1.我在Windows 10的本机电脑上新建了一个"test.sh"文件 2.将"test.sh"文件上传到Linux环境中 3.在Linux中执行"sh test.sh" 4.报错了... 第一次报错信 ......
前端性能精进（七）——构建
前端构建是指通过工具自动化地处理那些繁琐、重复而有意义的任务。 这些任务包括语言编译、文件压缩、模块打包、图像优化、单元测试等一切需要对源码进行处理的工作。 在将这类任务交给工具后，开发人员被解放了生产力，得以集中精力去编写代码业务，提高工作效率。 构建工具从早期基于流的 gulp，再到静态模块打包 ......
一 计算机基础与Linux安装
一 计算机基础与Linux安装 1. 一个完整计算系统的简要介绍。 2. 学会进制的转换，并简单举例完成转换。 3. 制作一个教程，说明vmware软件如何下载安装。 4. 说明GPL和MIT开源协议的区别。 5. 制作2个安装教程，安装rocky 8.5, ubuntu 22.04，并结合xshe ......
CI环境搭建排坑记录
Jenkins踩坑记录 Maven项目构建时间太长，会出现构建失败现象 参考文章 原因：使用maven自带的settings文件，下载依赖速度太慢 解决方法：docker挂载目录下导入带有阿里云私服地址的settings文件，jenkins中修改maven配置 步骤演示 前提：宿主机挂载映射了doc ......
linux内核数据结构 --- list_head
以 struct kobject 为例，讲解如何使用链表 struct list_head struct kobject { const char *name; struct list_head entry; struct kobject *parent; ... }; struct list_he ......
【环境安装】anaconda环境安装（Mac）
官网下载 下载地址：https://www.anaconda.com/products/distribution#Downloads 多版本：https://repo.anaconda.com/archive/ 环境变量 cat ~/.bash_profile 测试命令：conda 可以使用 ali ......
【环境搭建】vscode调试php
待解决问题 使用vscode和phpstudy实现PHP的本地调试 解决办法 1.打开xdebug 找到网站使用的PHP版本，在设置中将Xdebug调试组件打开，并确认端口是9000 找到php扩展目录下的php_xdebug.dll，例如我电脑上的路径是"D:\software\phpstudy_ ......
Linux系统下添加防火墙规则（添加白名单）
Linux系统下添加防火墙规则（添加白名单） 防火墙的作用： 可以通过设置ip白名单/黑名单的方式限制外部ip的访问或者限制访问内部某个端口；添加防火墙过滤规则步骤如下;1、查看现有防火墙过滤规则： iptables -nvL --line-number2、添加防火墙过滤规则（设置白名单）： 1）添 ......
Linux数据分析之九个给力的命令行工具
导读 要对数据进行分析，大家会从哪里入手?对于大多数熟悉了图形工作环境的朋友来说，电子表格工具无疑是第一选项。但命令行工具同样能够更快更高效地解决问题——且只须稍微学习即可上手。 要对数据进行分析，大家会从哪里入手? 对于大多数熟悉了图形工作环境的朋友来说，电子表格工具无疑是第一选项。但命令行工具同 ......
linux下gcc/g++版本切换
因为一些道不清说不明的原因，经常需要用到不同的gcc版本 这里先提一个事情，自己编译gcc版本的事情，翻自己的记录（doc文件吧） 然后提下，在ubuntu下，默认gcc版本是11，但需要12版本，安装指令： sudo apt install gcc-12 g++-12 -y 安装完成后，继续执行下 ......
【环境搭建】phpstudy显示目录列表
问题来源 新版本的PHPStudy访问127.0.0.1不再像以前版本一样显示目录列表了 * jdk-8u202-windows-x64 > * jdk-11.0.13_windows-x64_bin > * Burp.Suite.Pro.2021 --> 解决办法 打开vhosts.conf 将图 ......