wordcount案例pyspark

支持向量机(SVM)案例分析

支持向量机(support vector machines, SVM)是一种二分类模型,所谓二分类模型是指比如有很多特征(自变量X)对另外一个标签项(因变量Y)的分类作用关系,比如当前有很多特征,包括身高、年龄、学历、收入、教育年限等共5项,因变量为‘是否吸烟’,‘是否吸烟’仅包括两项,吸烟和不吸烟 ......
向量 案例分析 案例 SVM

KingbaseES V8R6集群运维案例之---在线扩容节点通讯故障问题

案例说明: KingbaseES V8R6集群节点之间通过ssh或securecmdd工具通讯,默认节点之间通过公钥和私钥方式认证,可以密码通讯;在执行集群节点扩容时,出现以下故障,节点之间仍需要输入密码进行连接 : 适用版本: KingbaseES V8R6 一、问题分析 1、测试节点secure ......
节点 集群 KingbaseES 故障 案例

Kingbase ES 自定义聚合函数和一次改写案例

文章概要: KES的SQL的语法暂时不兼容oracle的自定义聚合函数的创建语法和流程,但是可以使用KES已支持的语法改写。 本文整理和简单解析了自定义聚合函数的原理和解读了范例代码。 并根据客户代码进行了改写。 一,oracle自定义聚合函数的简析 oracle的自定义聚合函数需要实现4个ODCI ......
函数 Kingbase 案例 ES

KingbaseES V8R3集群运维案例---failover切换故障分析

案例说明: KingbaseES V8R3集群主库数据库服务重启后,failover切换失败,分析failover失败的具体原因。 适用版本: KingbaseES V8R3 一、集群架构 node13 >主库(primary) node25 >管理备库(standby) node58 >备库(st ......
集群 KingbaseES failover 故障 案例

KingbaseES V8R6集群部署案例之---openEuler系统脚本部署故障

案例说明: 在openEuler系统下通过脚本方式部署KingbaseES V8R6集群,脚本执行过程中,加载vip失败。本次故障问题,主要是因为openEuler系统shell和脚本的不兼容引起。 适用版本: KingbaseES V8R6 系统环境: openEuler-22.03-LTS 一、 ......
集群 脚本 KingbaseES openEuler 故障

KingbaseES V8R6备份恢复案例之---备份crond计划任务的调整

案例说明: 在KingbaseES V8R6数据库通常备份建立的crond任务,默认由root用户建立,写入到/etc/cron.d/KINGBASECRON文件中,在有的生产环境限制了普通用户使用root的权限,创建计划任务可能失败,新的KingbaseES V8R6版本,将计划任务由数据库用户创 ......
备份 KingbaseES 案例 任务 crond

KingbaseES V8R3集群运维案例之---流复制异步同步及全同步模式配置

案例说明: 通过案例描述KingbaseES V8R3集群异步、同步及全同步强一致性配置,本案例为一主二备的架构。 适用版本: KingbaseES V8R3 集群架构: 集群复制配置参数说明: 1)sync_flag [kingbase@node101 bin]$ cat ../etc/HAmod ......
集群 KingbaseES 案例 模式 V8R3

KingbaseES V8R3集群运维案例之---主库数据库服务down后failover切换详解

案例说明: 对KingbaseES V8R3集群,主库数据库服务down后,failover切换进行分析,详解其执行切换的过程,本案例可用于对KingbaseES V8R3集群failover故障的分析参考。 适用版本: KingbaseES V8R3 集群架构: node_id | hostnam ......
集群 KingbaseES failover 案例 数据库

KingbaseES V8R6集群运维案例之---sys_monitor.sh start启动动态库错误

案例说明: 在KingbaseES V8R6集群部署了postgis后,执行sys_monitor.sh start启动集群时,出现动态库错误,如下图所示: 适用版本: KingbaseES V8R6 操作系统: Kylin V10 Server 一、问题分析 1、手工执行sys_ctl启动数据库服 ......
集群 sys_monitor KingbaseES 错误 案例

KingbaseES V8R6集群备份恢复案例之---备份初始化“can not find primary node”故障

案例说明: KingbaseES V8R6集群,备库作为repo-path节点,建立类型为‘cluster’模式的备份,在执行sys_backup.sh init时,出现“can not find primary node”故障。故障如下图所示: 适用版本: KingbaseES V8R6 一、集群 ......
备份 集群 KingbaseES 故障 案例

KingbaseES V8R6备份恢复案例之---sys_restore实现schema转换

**案例说明:** sys_restore用于sys_dump备份的数据恢复,在实际的应用中有需求,将从sys_dump备份对象从原schema中转换到到另外的schema,sys_restore支持此需求的实现,但在应用中需要注意参数的使用。 **适用版本:** ` KingbaseES V8R6 ......
sys_restore KingbaseES 备份 案例 restore

KingbaseES V8R6集群部署案例之---脚本部署节点环境检查故障

KingbaseES V8R6集群部署案例之 脚本部署节点环境检查故障 案例说明: KingbaseES V8R6集群在部署前会对集群节点系统环境进行检测,检测失败后,将中断部署;其中一个检测项,检测节点上是否已经存在数据库服务。如果已经存在数据库服务,则部署将会中断。 适用版本: Kingbase ......
节点 集群 脚本 KingbaseES 故障

KingbaseES V8R6集群案例---一主二备架构单个备库宕机事务影响测试

KingbaseES V8R6集群案例 一主二备架构单个备库宕机事务影响测试 案例说明: 对于KingbaseES V8R6集群,在sync模式下,对于一主一备架构,如果备库宕机时,主库事务commit,会被hang住,在wal_sender_timeout参数(默认60s)超过阈值后,sync转为 ......
集群 单个 KingbaseES 架构 案例

KingbaseES V8R6集群运维案例之---sys_backup.sh init ‘xxxx invalid’故障

KingbaseES V8R6集群运维案例之 sys_backup.sh init ‘xxxx invalid’故障 案例说明 在KingbaseES V8R6集群sys_backup.sh在cluster模式下执行备份初始化,出现 ‘xxxx invalid’故障。 适用版本: KingbaseE ......
集群 KingbaseES sys_backup 故障 案例

KingbaseES V8R6集群运维案例之---securecmd连接需要密码问题

KingbaseES V8R6集群运维案例之 securecmd连接需要密码问题 案例说明: 在KingbaseES V8R6集群可以使用securecmdd代替sshd实现集群主机节点间的通讯,securecmdd通讯认证采用非对称加密方式(公钥和私钥),客户端连接服务器不需要输入密码认证身份,如 ......
集群 KingbaseES securecmd 案例 密码

kingbaseES V8R3集群运维案例之---集群部署前后ssh端口修改

kingbaseES V8R3集群运维案例之 集群部署前后ssh端口修改 案例说明: kingbaseES V8R3集群部署读写分离的集群是使用ssh的默认端口(22)部署,当改为非默认端口时,在部署中或部署后会因kingbasecluster脚本ssh的连接而失败,现提出以下解决方案。 适用版本: ......
集群 端口 kingbaseES 案例 V8R3

KingbaseES集群运维案例之---主备库failover后auto-recovery机制

KingbaseES集群运维案例之 主备库failover后auto-recovery机制 案例说明: KingbaseES集群,在备库数据库服务down后,可以实现节点数据库服务的自动恢复;在集群触发failover的主备切换后,实现原主库自动被recovery为备库,重新加入到集群。对于King ......

KingbaseES V8R6集群运维案例之---sys_hba.conf限制客户端访问数据库

KingbaseES V8R6集群运维案例之 sys_hba.conf限制客户端访问数据库 案例说明: 客户端认证是由一个配置文件(通常名为sys_hba.conf并被存放在数据库集簇目录中)控制(HBA表示基于主机的认证)。 在initdb初始化数据目录时,它会安装一个默认的sys_hba.con ......
集群 KingbaseES 客户端 案例 sys_hba

KingbaseES V8R6 运维案例之---数据库连接访问故障分析

KingbaseES V8R6运维案例之 数据库连接访问故障分析 案例说明: 在部署KingbaseES V8R6后,正常启动数据库服务,但是通过ksql连接数据库服务访问时,出现连接到postgresql socket的错误提示,如下图所示: 适用版本: KingbaseES V8R6 一、问题分 ......
KingbaseES 故障 案例 数据库 数据

KingbaseES V8R6运维案例之---数据库resetwal后启动失败

KingbaseES V8R6运维案例之 数据库resetwal后启动失败 案例说明: KingbaseES V8R6集群触发failover切换后,原主库自动recovery失败,现在需要将原主库启动为单实例的数据库运行,在执行了resetwal后,启动数据库失败。sys_log记录以下故障信息: ......
KingbaseES resetwal 案例 数据库 数据

KingbaseES V8R6集群运维案例之---访问系统表unrecognized token- false故障

KingbaseES V8R6集群运维案例之 访问系统表‘unrecognized token: "false"’故障 案例说明: KingbaseES V8R6集群在升级补丁后,主备库访问系统表出现‘unrecognized token: "false"’故障,如下图所示: 适用版本: Kingb ......
集群 unrecognized KingbaseES 故障 案例

KingbaseES V8R6集群运维案例--cluster模式备份sys_backup.sh init故障

KingbaseES V8R6集群运维案例--cluster模式备份sys_backup.sh init故障 案例说明: 通过脚本方式部署KingbaseES V8R6集群后,在‘cluster’模式备份,执行sys_backup.sh init时,出现“cannot contain // for ......
集群 KingbaseES sys_backup 备份 故障

KingbaseES V8R6集群运维案例之---修改ssh端口后脚本创建互信

案例分析: 在KingbaseES V8R6集群部署时,需要建立节点之间ssh互信(或者使用securecmdd工具),在有的生产环境,为了安全起见会修改ssh的默认端口;KingbaseES V8R6集群部署提供了脚本用于创建ssh互信,如果修改了系统的ssh端口号后,也需要修改对应的脚本。 适用 ......
集群 端口 脚本 KingbaseES 案例

Kingbase ES 游标跨事务及其案例一则

前言 本文介绍游标在PLSQL和SQL层跨事务使用案例,及其案例一则。 本文验证版本: db0=# select version(); db0-# / version KingbaseES V008R006C007B0024 on x86_64-pc-linux-gnu, compiled by g ......
游标 Kingbase 案例 事务 ES

KingbaseES数据库-生产环境慢查询性能优化案例

一、背景 在生产环境中,慢查询不仅影响系统、业务的正常处理。同时严重影响用户的使用感受。 二、表相关信息 2.1 表结构及索引: Table "yktcore.t_dtl_ymt" 栏位 | 类型 | 校对规则 | 可空的 | 预设 + + + + sys_sett_date | character ......
KingbaseES 性能 案例 环境 数据库

【小睿的ML之路】Pandas自定义函数(含泰坦尼克号数据分析案例实战)

import pandas as pd titanic_survival = pd.read_csv("titanic_train.csv") # 返回第一百行数据 def hundredth_row(column): hundredth_item = column.loc[99] return h ......
数据分析 函数 实战 案例 数据

「案例DEMO」直接用maven插件生成springboot2.5.4+mybatis-plus3.5.3.2+hikari+swagger2 2.9.2项目并运行

mybatis-plus-code-maven-plugin-demo 该项目演示如何使用mybatis-plus-code-maven-plugin插件生成项目 demo: https://gitee.com/javalaoniu/mybatis-code-maven-plugin-demo 插件 ......

数据代码分享|R语言回归分析:体脂数据、公交绿色出行与全球变暖2案例|附代码数据

全文链接:http://tecdat.cn/?p=32520 原文出处:拓端数据部落公众号 通常在现实应用中,我们需要去理解一个变量是如何被一些其他变量所决定的。 最近我们被客户要求撰写关于回归分析的研究报告,包括一些图形和统计输出。 回答这样的问题,需要我们去建立一个模型。一个模型就是一个公式之中 ......
数据 代码 案例 语言 绿色

【案例】光电兼修的Alpha Cen,如何应对上升期的甜蜜烦恼?

Alpha Cen(比邻星光)是一家挺酷的公司,专注于超表面技术芯片研发。 所谓超表面芯片,就是通过控制类似下图的一个个独立纳米级别单元实现光操控。用微纳光学超表面技术能够平面化集成唯一还不在wafer上的光学器件,这意味着,在同一家Fab厂里可以制造完成一个完整的光电系统产品,且更轻便,更智能。 ......
上升期 光电 案例 Alpha Cen

JavaWeb综合案例(黑马程序员2023年JavaWeb课程总结,所有功能均实现,包含数据库sql文件)

JavaWeb综合案例(黑马程序员2023年JavaWeb课程总结,所有功能均实现,包含数据库sql文件) 1.案例介绍: 1.前端:Vue.js + element-ui + ajax(axios)+ html 2.后端:maven + mybatis + servlet 2.项目结构: 3.Br ......
JavaWeb 黑马 程序员 案例 课程