前台 后台 接口 数据库

MySQL 空间数据存储及函数

MySQL提供了数据类型geometry用来存储坐标信息,MySQL为空间数据存储及处理提供了专用的类型geometry 前言: 不久前开发了一个地图相关的后端项目,需要提供一些点线面相关的存储、查询、分析相关的操作,于是对MySQL空间函数进行充分调研并应用在项目中;MySQL为空间数据存储及处理 ......
函数 数据 MySQL 空间

Sqlite 命令行导出、导入数据

打开命令行 点击开始,输入cmd,回车 导出数据到data.csv D:\project>sqlite3.exe old.dbSQLite version 3.21.0 2017-10-24 18:55:49Enter “.help” for usage hints.sqlite> .output ......
命令 数据 Sqlite

Vue2数据驱动渲染(render、update)

上一篇文章我们介绍了 Vue2模版编译原理,这一章我们的目标是弄清楚模版 template和响应式数据是如何渲染成最终的DOM。数据更新驱动视图变化这部分后期会单独讲解 我们先看一下模版和响应式数据是如何渲染成最终DOM 的流程 Vue初始化 new Vue发生了什么 Vue入口构造函数 funct ......
数据 render update Vue2 Vue

数据开发【配置文件】和【传参】规范

概述 配置文件 概念:一种计算机文件,可给 计算机程序 配置 参数和初始设置 场景:软件开发时,生产环境数据库账号密码 应写到配置文件,不应明文写到代码中 常见的配置文件后缀示例 .properties Kafka的server.properties用于Java的日志配置文件log4j.proper ......
文件 数据

python基础篇:python中有哪些数据类型,你知道吗?

之前的文章已经简略介绍过python中的数据类型,并没有详细的介绍过,今天通过概念和案例的方式来介绍python中的数据类型。 Python是一种动态类型语言,这意味着变量的类型是在运行时确定的,而不是在编译时确定的。Python有许多内置的数据类型,包括数字、字符串、列表、元组、布尔型、浮点型、复 ......
python 类型 基础 数据

数据开发的代码规范以及代码评审脚本

1、概述 场景 在数据开发中,由于各程序员风格不一、部分程序员代码太烂、代码注释过少等原因,导致代码维护时困难重重 同事A请假去生娃,此时Ta的代码出了问题需要同事B去修改,但由于代码太烂,同事B改不动 代码评审:通过 阅读代码 来 检查代码质量 目的:降低代码维护成本 使用代码评审自动化脚本(Py ......
代码 脚本 数据

Map接口和常用方法

Map接口实现类的特点(Put/Get) 1、Map和Collection并列的存在,用于保存具有映射关系的数据:Key-Value 2、Map中的key和value可以是任何引用类型的数据,会封装到HashMap$Node对象中 3、Map中的key不允许重复 4、Map中的value可以重复 5 ......
接口 常用 方法 Map

一文带你搞懂数据库事务

本文由葡萄城技术团队于博客园原创并首发转载请注明出处:葡萄城官网,葡萄城为开发者提供专业的开发工具、解决方案和服务,赋能开发者。 谈起数据库,事务是绕不开的话题。无论你是研发、实施还是运维,都需要理解、使用无数据事务的特性。数据库事务连接各种数据,是处理各种数据的基础。那么数据库事务究竟是什么意思? ......
事务 数据库 数据

增量查数据库

Person: I hope that I can incrementally query the database to obtain data. I will store the results of each database query in redis and record the tim ......
增量 数据库 数据

python训练自己数据集(官)

参考文档:https://blog.csdn.net/weixin_58577392/article/details/124828281 官网:https://github.com/facebookresearch/maskrcnn-benchmark/blob/main/INSTALL.md 最好 ......
数据 python

ChatGPT的api接口接入小程序

前两天ChatGPT异常的火热╰(‵□′)╯,引领了又一大热点和趋势,闲来无事(其实就是想蹭波热点(●'◡'●))我也尝试了一下,确实让人很惊讶,可能会颠覆一些行业,比如涉及文字处理的像是:短视频文案、商业企划、写论文和论文分析、电商商品描述、商品文案等等。都可以用ChatGPT来尝试写作,效果还挺 ......
接口 ChatGPT 程序 api

pytorch 训练自己的数据集

参考文档:https://blog.csdn.net/weixin_58577392/article/details/124828281 创建一个空的虚拟环境吧 1. 环境: pytorch :根据自己cuda的环境 ninja yacs cython matplotlib tqdm opencv- ......
pytorch 数据

R语言可视化探索BRFSS数据并逻辑回归Logistic回归预测中风|附代码数据

原文链接:http://tecdat.cn/?p=9195 最近我们被客户要求撰写关于逻辑回归的研究报告,包括一些图形和统计输出。 行为风险因素监视系统(BRFSS)是美国的年度电话调查。BRFSS旨在识别成年人口中的危险因素并报告新兴趋势 加载包 library(ggplot2) 载入资料 loa ......
数据 Logistic 逻辑 语言 代码

R语言泰坦尼克号随机森林模型案例数据分析|附代码数据

原文链接:http://tecdat.cn/?p=4281 最近我们被客户要求撰写关于随机森林模型的研究报告,包括一些图形和统计输出。 如果我们对所有这些模型的结果进行平均,我们有时可以从它们的组合中找到比任何单个部分更好的模型。这就是集成模型的工作方式 让我们构建一个由三个简单决策树组成的非常小的 ......
数据 数据分析 模型 森林 案例

ARMA-GARCH-COPULA模型和金融时间序列案例|附代码数据

原文链接: http://tecdat.cn/?p=3385 最近我们被客户要求撰写关于ARMA-GARCH-COPULA的研究报告,包括一些图形和统计输出。 最近我被要求撰写关于金融时间序列的copulas的调查 从读取数据中获得各种模型的描述,包括一些图形和统计输出。 > oil = read. ......

R语言Kmeans聚类、PAM、DBSCAN、AGNES、FDP、PSO粒子群聚类分析iris数据结果可视化比较

全文链接:http://tecdat.cn/?p=32007 原文出处:拓端数据部落公众号 本文以iris数据和模拟数据为例,帮助客户了比较R语言Kmeans聚类算法、PAM聚类算法、 DBSCAN聚类算法、 AGNES聚类算法、 FDP聚类算法、 PSO粒子群聚类算法在 iris数据结果可视化分析 ......
粒子 语言 结果 数据 Kmeans

linux的sssd服务,系统安全服务后台程序 (SSSD)

SSSD是自红帽企业版Linux6起新加入的一个守护进程,该进程可以用来访问多种验证服务器,如LDAP,Kerberos等,并提供授权。 介于本地用户和数据存储之间的进程,本地客户端首先连接SSSD,再由SSSD联系外部资源提供者(一台远程服务器)。 这样做有一些几点优势: 1.避免了本地每个客户端 ......
后台 程序 系统 linux SSSD

机器学习建模中--先“特征选择”还是先“划分数据集”?

应该先进行“特征选择”,再“划分数据集”。这样可以避免数据泄露。 测试集就应该当做“看不见的数据”,只能在最后用一次,按照这个原则处理。 代码实例: # -*- coding: utf-8 -*- import numpy as np from sklearn.feature_selection i ......
特征 机器 还是 数据

sqluldr2 批量抽取数据

sqluldr 抽取数据陈文件 sqluldr2 user=username/pwd@orcl field=0x09 charset=UTF8 direct=true safe=yes parallel=true log=/data/log/D_010202012.log file=/data/da ......
sqluldr2 sqluldr 数据

Redis-单一接口优化

【性能优化】单一接口优化过程全记录(主要涉及Redis) 接口优化过程记录 问题背景 某个接口耗时长(247ms),但里面逻辑不算复杂,只进行了简单的对象引用以及操作了多次Redis 步骤1:链路追踪,确定业务耗时点 接口里通过链路追踪以及日志查询发现主要是操作Redis的这条链路耗时变长 步骤2: ......
接口 Redis

如何使用 RMAN 重定位或移动 oracle 数据库文件

一、背景 这里的要求是将数据库文件移动或重新定位到其他位置。因此,这里有 2 种情况,1. 重新定位所有数据库文件——数据文件、在线重做日志和控制文件(这需要数据库处于挂载模式)2. 重新定位非系统数据文件——这可以在最小中断的情况下重新定位. 下面的示例使用 /data02/oradata 作为新 ......
数据库 文件 数据 oracle RMAN

RMAN-06056:RMAN 引擎无法访问任何数据文件(如何跳过)

背景 今天尝试备份完整数据库时,我遇到了错误,提示 RMAN 无法访问其中一个数据文件。我发现数据文件没有任何用处,因此我已将数据文件脱机删除,但 RMAN 仍然不允许我备份数据库。当您确定数据文件没有任何用处时,这是解决此类问题的解决方案之一。 解决方案 RMAN> backup database ......
RMAN 引擎 文件 数据 06056

Java EasyExcel带格式多线程导出百万数据

Java EasyExcel带格式多线程导出百万数据 1. 背景说明 2. 方案概述 (1)大数据量导出问题主要是以下三个地方: (2)将写入导出Excel等功能单独分开成一个微服务: (3)注意: (4)方案设计: 标注说明 (5)maven依赖: 3. 详细设计 4. 缓存 5. 可行性验证 6 ......
线程 EasyExcel 格式 数据 Java

12种数据量纲化处理方式-学术科研中常用与构建指标

12种数据量纲化处理方式 - 知乎 (zhihu.com)【转载】 在进行数据分析时,数据具有单位是非常常见的,比如说GDP可以以亿作为单元,也可以以百万作为单位,那么此时就会出现由于单位问题导致的数字大小问题;这种情况对于分析可能产生影响,因此需要对其进行处理,但是处理的前提是不能失去数字的相对意 ......
量纲 学术科研 科研 指标 学术

优雅的接口防刷处理方案

前言 本文为描述通过Interceptor以及Redis实现接口访问防刷Demo 这里会通过逐步找问题,逐步去完善的形式展示 原理 通过ip地址+uri拼接用以作为访问者访问接口区分 通过在Interceptor中拦截请求,从Redis中统计用户访问接口次数从而达到接口防刷目的 如下图所示 工程 项 ......
接口 方案

Unity中基于EPPLUS的Excel转换以及Json数据读取

表格示例: 编辑模式下: 生成Json: 生成Class: 运行时数据读取: 以下是代码: Json数据读取器以及泛型基类 using UnityEngine; public class JsonDataManager : Singleton<JsonDataManager> { public Js ......
数据 EPPLUS Unity Excel Json

数据类型之字符串

前言: String 字符串就是一串固定长度的字符连接起来的字符序列。Go的字符串是由单个字节连接起来的,本质是只读的字符型数组。 Go语言的字符串UTF-8编码标识Unicode文本,当字符为 ASCII 码表上的字符时则占用 1 个字节,其它字符根据需要占用 2-4 个字节 (中文占3个字节) ......
字符串 字符 类型 数据

数据类型之整型,浮点型,布尔型

整型: 整型就是存放整数的,数据分为2类,有符号和无符号两种类型 。 有符号整型: int, int8, int16, int32, int64 可存正负数 无符号整型: unsigned uint, uint8, uint16, uint32, uint64, byte 只能存正整数 int类型和 ......
浮点 布尔 类型 数据

看看别人后端API接口性能优化的11个方法,那叫一个优雅!

前言 接口性能优化对于从事后端开发的同学来说,肯定再熟悉不过了,因为它是一个跟开发语言无关的公共问题。 该问题说简单也简单,说复杂也复杂。 有时候,只需加个索引就能解决问题。 有时候,需要做代码重构。 有时候,需要增加缓存。 有时候,需要引入一些中间件,比如mq。 有时候,需要需要分库分表。 有时候 ......
接口 性能 方法 API

转录组数据分析项目方案的流程

数据准备和质量控制 对原始数据进行质量控制,包括检查质量值、长度、GC含量等。 对原始数据进行去除低质量reads,过滤低复杂度reads,去除adapter序列等预处理。 序列比对和基因计数 使用HISAT2等工具将去除低质量和过滤后的reads比对到人类基因组上。 使用featureCounts ......
数据分析 流程 方案 项目 数据