银行业 架构 银行 数据

python 闭包、偏函数、数据锁定

闭包(Closure)是指在一个函数内部定义另外一个函数,并且这个内部函数可以访问外部函数中的变量。通常情况下,当外部函数执行完毕后,局部变量会被销毁,但是闭包可以使得外部函数执行完毕后,其内部函数仍然可以访问外部函数的局部变量。比如下面这个例子: def outer(x): def inner(y ......
闭包 函数 数据 python

DAMA数据管理知识体系指南(3):数据治理(转载)

一、数据治理语境关系图 1、数据管理和数据治理 在正式讲数据治理之前,先区分下数据管理和数据治理的区别。数据管理的整体驱动力是确保组织可以从其数据中获得价值,更多是总体战略的层面;数据治理聚焦于如何制定有关数据的决策,以及人员和流程在数据方面的行为方式,更多是细节执行层面。 2、数据治理整体介绍 数 ......
数据 管理知识 体系 指南 知识

SDN Python编程创建多数据中心网络

首先开启 Open Daylight cd /home/ubuntu/karaf-0.7.1/bin/ ./karaf 新开一个终端执行以下操作 在 /home/ubuntu/mininet/examples 目录下新建一个 sdn4.py 文件 输入以下代码 from mininet.topo i ......
数据中心 数据 Python 网络 SDN

DAMA数据管理知识体系指南(1):数据管理(转载)

数据管理是DMBOK的第一章,该章高度概括了整本书的内容,梳理了数据管理的领域、环境因素、基本原则、实现路径等知识内容。有关DABOK的综述和学习方法可以参考:DAMA数据管理知识体系指南(0):综述 & 学习指南。 一、数据管理的原则 1、整体原则解读 上图已经基本表达了在数据管理过程中,所需要遵 ......

Vue3数据无法显示/数据无法修改

问题描述: 昨天朋友问了我一个关于Vue3的问题,给他解答后,想起貌似自己当初也曾被这个问题困惑过,只不过被善用搜索引擎后找到了问题所在。 现在考虑到可能有些朋友搜不到解决方法,所以现在用它的表现形式作为标题,可能更便于搜索到。 现在重现一下这个问题: <div v-for="(item,idx) ......
数据 Vue3 Vue

Django如何更换默认的数据库?

问题: Django默认的sqlite3不好用。如何更换呢? 解决: 第一步:配置文件 在setting中--更改database DATABASES = { # 'default': { # 'ENGINE': 'django.db.backends.sqlite3', # 'NAME': BAS ......
数据库 数据 Django

使用Kepserver 自带 DataLogger 功能 实现工控数据转储关系型数据库

本文以 Mysql数据库为例,介绍使用 kepserver 的datalogger 功能转储数据到 mysql 第一步:下载安装 Mysql ODBC 数据库驱动前往 官网下载ODBC驱动https://downloads.MySQL.com/archives/c-ODBC/ 建议下载 msi 格式 ......
数据 DataLogger Kepserver 功能 数据库

第十二章.电商产品评论数据情感分析

1、评论去重的代码 import pandas as pd import re import jieba.posseg as psg import numpy as np # 去重,去除完全重复的数据 reviews = pd.read_csv("./reviews.csv") reviews = ......
情感 数据 产品

学习使用benchmarksql压测数据库

介绍 benchmarksql是一款符合TPC-C基准压力测试工具,TPC-C是衡量在线事务处理的基准。 TPC-C模型是模拟一个商品批发公司的销售模型,这个模型涵盖了一个批发公司面向客户对一系列商品进行销售的过程,这包括管理订单,管理库存,管理账号收支等操作。这些操作涉及到仓库、商品、客户、订单等 ......
benchmarksql 数据库 数据

STATA 数据导出

数据导出.变量名保存到EXCEL文件中第一行,导出含值标签的变量的数值而不是值标签 export excel using "D:\statashu\cgss\0504.xls", firstrow(variables) nolabel file D:\statashu\cgss\0504.xls s ......
数据 STATA

电商产品评论数据情感分析

1.评论去重的代码,数据清洗、分词、词性标注、去除停用词代码。 import pandas as pd import re import jieba.posseg as psg import numpy as np # 去重,去除完全重复的数据 reviews = pd.read_csv("./re ......
情感 数据 产品

数据管理框架:什么、为什么以及如何?

我们,数据管理专业人员,经常使用术语“数据管理框架”。但是我们对它的含义和实现它的各种方法是否都具有相同的理解? 在本文中,我们将 讨论现有的数据管理框架 呈现各种框架的使用统计数据 定义术语“数据管理框架”。 说明建立数据管理框架的通用方法 现有的数据管理框架 DAMA 数据管理知识体系指南和 D ......
数据管理 框架 数据

25 17|通用技能(下):架构师如何保障交付与沉淀知识?

你好,我是郭东白。架构师在架构活动中主要有四个作用,分别是建设共识、控制风险、保障交付和沉淀知识。上节课我们讲了前两个,这节课就来讲保障交付和沉淀知识这两个。 保障交付 保障交付意味着架构师能够降低大型架构活动的不确定性和复杂度,最小化架构方案,最终保障高质量的交付。其中关键动作有三个:降低不确定性 ......
架构 技能 知识 25

23 15|模块导读:互联网时代架构师都面临哪些新挑战?

你好,我是郭东白。上个模块我们讲了架构师的六条生存法则,提到了架构师的重要工作就是组织架构活动和制定架构方案。 那么具体来说,架构活动的完整过程是什么呢?架构师一般会面临什么样的挑战呢?又需要着重关注哪些节点呢?在这个模块里,我们就来回答一下这些问题。 这节课是整个模块的导读,我就先来介绍模块的整体 ......
架构 模块 互联网 时代 23

10 10|法则四:架构设计中怎么判断和利用技术趋势?

你好,我是郭东白。 上节课我们讲了为什么要顺应技术的生命周期。但是“往者不可谏,来者犹可追”,我们就不能抓住一个技术萌芽和发展的机会吗?今天我们就来探讨一下这个问题。 技术未来的趋势,谁主沉浮? 你有没有想过,到底是谁决定技术的未来呢?其实大多数人都不决定技术的未来,哪怕是雷军,他也在思考该怎么顺势 ......
架构 法则 趋势 技术 10

12 12|法则五:如何提升一个架构设计的外部适应性?

你好,我是郭东白。 上节课我们讲了外部适应性这个概念,也强调了架构师的职责是通过架构活动为企业不断注入外部适应性,从而帮助企业更好地实现它的战略意图。 那么该怎么注入呢? 上节课在讲影响技术体系外部适应性的因素这部分,我们提到了挑战主要来自三个方面:企业的内部压力、企业的外部环境和企业的组织结构。这 ......
适应性 架构 法则 12

4 03|法则一:如何找到唯一且正确的架构目标?

你好,我是郭东白。上节课我们讲了目标在架构规划中的重要性,也明确了目标缺失的两大根因。那么这节课,我们就来聊聊该如何寻找正确的架构目标,以及如果目标制定错误,该如何挽回。 如何寻找正确的架构目标? 主要分为三种情况,我们来分别讨论。 确认一个正确目标,且要试图逼近它 一般来说,我们相信达尔文的进化论 ......
架构 法则 目标

20 对话于冰(下)|架构师如何为企业创造商业价值?

你好,我是辰洋,是《郭东白的架构课》的负责人。 在软件行业,每隔几年就会出现一些新概念新名词,从而掀起讨论热潮。那么对于从业者来说,这些新概念究竟意味着什么?到底该不该追求这些浪潮呢?怎么追呢?接下来,就让我们看看东白老师和于冰老师又聊了些什么吧。 主持人:郭东白 车好多集团CTO嘉 宾:于冰 快手 ......
架构 价值 商业 企业 20

Spring17_配置数据源6

一、数据源(连接池)的作用 数据源(连接池)是为提高程序性能而出现的 事先实例化数据源,初始化部分连接资源 使用连接资源时从数据源中获取 使用完毕后将连接资源归还给数据源 常见的数据源(连接池):DBCP、C3P0、BoneCP、Druid等 二、数据源开发步骤 1. 导入数据源的坐标和数据库驱动坐 ......
数据源 数据 Spring 17

7 07|法则三:架构师如何找到自己的商业模式?

你好,我是郭东白,今天我们来聊聊架构活动中对商业价值的考量。 今天我们要讲的是架构师的第三个生存法则:作为一个架构师,必须要在有限的资源下最大化架构活动所带来的商业价值。对于任何一个架构活动而言,架构师的可用资源,包括商业成本、研发成本、时间成本、迁移成本等等,都是非常有限的。但架构活动就是要在这些 ......
架构 法则 模式 商业

15 编辑加餐|六张图,带你回顾架构师的六条生存法则

你好,我是辰洋,是《郭东白的架构课》的负责人。这是我们在这个专栏的第一次正式会面,你可能会觉得与我有些陌生。不过从我的眼光来看,对于专栏里的每一行字、每一个案例,对于在认真学习、留言打卡的你,我都太熟悉了。 好了,感性流露到此结束,言归正传。我看到留言区有几位小伙伴反馈: 文章看得很过瘾,不过也有些 ......
架构 法则 15

5 04|法则二:架构师为什么要学习马斯洛的需求理论?

你好,我是郭东白,今天我们来聊聊架构师的第二个生存法则:架构活动需要尊重和顺应人性。 自从学习计算机专业的那一天起,我们似乎就走入了一个简单直接的机器世界,一个完全靠逻辑和数字主宰的世界。于是我们总不自觉地认为凭借计算机就可以解决所有的问题。也许正是计算机的作用被过分夸大,使得我们在软件研发过程中走 ......
架构 法则 需求 理论

13 13|法则六:如何鉴别文化环境是否有利于架构师的生存?

你好,我是郭东白。 架构师通常并不管理团队,而是管理架构活动。更准确地说,是定义和引导架构活动。因为每个参与架构活动的个体,都有各自工作的优先级和汇报关系。因此在没有管理、考核和激励等手段的保障下,唯一能够帮助到架构师开展工作的,就是良好的文化环境了。 这就是我们第六条生存法则要覆盖的内容:架构师要 ......
架构 法则 有利 环境 文化

8 08|法则三:架构师如何在一定时间内最大化自己的增量价值?

你好,我是郭东白。上节课我们讲了架构活动中需要重视对商业价值的考量。作为一个架构师,必须要创造足够的商业价值,才能保障自己职业的长期。 那么你作为架构师,该如何为你的公司、部门或团队提供可量化的增量价值呢?主要有扩大收入与减少成本两种路径。今天这节课,我们就结合几个真实的案例来具体分析一下。 如何寻 ......
增量 架构 法则 价值 时间

11 11|法则五:架构师为什么要关注技术体系的外部适应性?

你好, 我是郭东白。 前四条法则分别讲了目标、资源、人性和技术周期,这些都与架构活动的外部环境有关。那么今天我们来讲讲在架构活动内部,也就是在架构师可控的范围内,应该遵守哪些法则。今天这节课,我们就先从技术体系的外部适应性讲起。 达尔文说过:“既不是最强壮的也不是最聪明的物种,而是最适应变化的物种最 ......
适应性 架构 法则 体系 技术

郭东白的架构课-大纲

1 开篇词|没有战略意图,就成不了一个顶尖的架构师 2 01|模块导学:是什么在影响架构活动的成败? 3 02|法则一:为什么有些架构活动会没有正确的目标? 4 03|法则一:如何找到唯一且正确的架构目标? 5 04|法则二:架构师为什么要学习马斯洛的需求理论? 6 06|法则二:拼多多是如何通过洞 ......
大纲 架构

2 01|模块导学:是什么在影响架构活动的成败?

你好,我是郭东白。这节课是我们模块一的导入部分,我会先来介绍模块的主要内容,以及为什么我要讲生存法则这个话题。 一名软件架构师要为相对复杂的业务制定,并且引导实施一个结构化的软件方案。这个发现最终方案和推动实施的过程,就是架构活动。架构活动是你作为架构师必须要认识清楚的,但同样也是很多架构师所忽略的 ......
成败 架构 模块

1 开篇词|没有战略意图,就成不了一个顶尖的架构师

你好,我是郭东白,是一个做了15年架构师和6年CTO的人。 我先简单介绍一下自己。我从布朗大学(Brown University)获得博士学位后,在美国甲骨文、微软和亚马逊陆续工作了15年,做过研发、研发经理、 产品经理、数据架构师等等。2014年,我回国加入阿里巴巴。 在阿里,我刚开始是AliEx ......
开篇 意图 顶尖 架构 战略

3 02|法则一:为什么有些架构活动会没有正确的目标?

你好,我是郭东白。今天这节课,我们就正式开始架构师生存法则的学习。 你肯定看到过这样的观点:架构设计就是一个迭代的过程,我们要不断发现并且补偿现阶段软件设计的不完美,然后通过各种手段打补丁升级。因此,架构设计永远都是螺旋上升的,没有也不需要目标的指引。 也有人认为定义目标并不是架构师的职责。毕竟目标 ......
架构 法则 目标

数据挖掘-电商产品评论数据情感分析

import pandas as pd import re import jieba.posseg as psg import numpy as np # 去重,去除完全重复的数据 reviews = pd.read_csv("./reviews.csv") reviews = reviews[[' ......
数据 数据挖掘 情感 产品