小结 经验 问题linux
搭建CDH后，hdfs的权限问题设置
## 搭建CDH后，hdfs的权限问题 #### 问题描述：搭建cdh集群后，在hdfs中创建文件报错：Permission denied: user=root, access=WRITE, inode=“/“:hdfs:supergroup:drwxr-xr-x  后，遍历返回的是 1.txt, 10.txt, 100.txt, 2.txt。是按照第一个字符大小排序的。 file_list.sort(key= lambda x:int(x[:-4])) ......
Linux 上 ArcGIS Server 的 Python 3 运行时自动配置
操作系统环境Redhat Enterprise Linxu 9.2，conda环境选择的miniconda3，已经提前安装好了ArcGIS Server for Linux 10.7.1，并且正常运行。 下面是arcgis-server-arcpy3.sh的内容： #！/bin/bash # 切换到 ......
linux
# linux简介  ## 不同应用领域的操作系统  ```C# using System.Collections; using Syste ......
若依前端，菜单栏切换时刷新问题[页面菜单切换时，页面总是重新刷新，导致页面输入的查询参数重载清空]
### 前端页面菜单切换时，页面总是重新刷新，导致页面输入的查询参数重载清空  ### 这样切换时，页面就 ......
Qt使用过程中的一些问题
1.qt.gui.imageio: libpng warning: iCCP: known incorrect sRGB profile 在Qt开发过程中使用了一些png图片导致报了这个信息，是因为这些png图片中嵌入了icc颜色管理模块导致。 解决方法： 下载JQTools工具，然后点击“Qt相关 ......
碎碎念-教育问题思考-1
讲道理，郭嘉是不允许思考的，但是这些道理顶层都明白，只是没有办法突破。 jy问题本质就是社会资源分配问题。我个人大概分成3个阶段，分别是78-98，99-16，17-当今，划分依据是教育体系和社会体系的关联程度。 第一个阶段：78-98，这个阶段的教育资源是匮乏的，同时也是极度嫉妒不均的，但是由于信 ......
http 和 https区别,自动携带cookie的session对象，响应response，下载图片视频到本地，编码问题，解析json，ssl认证，使用代理，超时设置，异常处理，上传文件，代理池搭建，爬取某视频网站
# 1.1 自动携带cookie 的session对象 ```python # session对象 》已经模拟登录上了一些网站 》单独把cookie 取出来 -res.cookies -转成字典 res.cookies.get_dict() #请求头和数据 import requests heade ......
Git代码管理、提交、问题、仓库创建与管理
第一章、在Github上创建仓库 第1节、创建仓库 进入https://github.com 进入项目仓库：your repositories 右侧点击：new按钮 owner填写仓库名称 Description填写项目描述 public选择项目公开 private选择项目不公开 第2节、下载和安装 ......
道德与社会问题简报 #4: 文生图模型中的偏见
**简而言之: 我们需要更好的方法来评估文生图模型中的偏见** ## 介绍 [文本到图像 (TTI) 生成](https://huggingface.co/models?pipeline_tag=text-to-image&sort=downloads) 现在非常流行，成千上万的 TTI 模型被上传 ......
Linux中Postfix邮件WebMail配置（七）
摘自：http://www.ywnds.com/?p=1800 Extmail Extmail 是一个以perl语言编写，面向大容量/ISP级应用，免费的高性能Webmail软件，主要包括ExtMail、Extman两个部分的程序套件。ExtMail套件用于提供从浏览器中登录、使用邮件系统的Web操 ......
Linux中Postfix邮件安装Maildrop（八）
摘自：http://www.ywnds.com/?p=1811 Postfix使用maildrop投递邮件 Maildrop是本地邮件投递代理（MDA）, 支持过滤(/etc/maildroprc)、投递和磁盘限额(Quota)功能。 Maildrop是一个使用C++编写的用来代替本地MDA的带有过 ......
Linux中Postfix基于SSL收发邮件（九）
摘自：http://www.ywnds.com/?p=1813 其中在整个一套邮件服务器中，默认信息传输都是明文传输的，所以这个在安全性上面就不是那么好。但是如果说一封邮件从发生到对方接受想要全程做到加密处理这个也是很难的。因为一封邮件从一个域转到另外一个域服务器时很难做到加密，这属于不同的域，有不 ......
Linux中Postfix反病毒和垃圾邮件（十）
摘自：http://www.ywnds.com/?p=1817 amavisd-new amavisd-new呼叫器是一个连接MTA和内容检测工具（诸如病毒扫描工具和SpamAssassin)的高性能接口程序，使用perl语言写成。它一般通过SMTP、ESMTP或者LMTP和MTA进行通讯，可以将位 ......
CygWin：windows上运行类linux命令
CygWin是一个在Windows平台上运行的类UNIX模拟环境，是Cygnus Solutions公司开发的自由软件。它提供了类似于Linux系统的终端环境和工具，使用户可以在Windows平台上运行Unix-like的程序，如Bash、awk、sed和grep等 。 下载setup.exe 安装 ......
Linux中Postfix邮件发送配置（三）
摘自：http://www.ywnds.com/?p=1770 一、部署DNS服务器（可查找DNS章节） postfix根据域名和地址做一个MX记录，A记录，PTR记录(一般在互联网上邮件服务器都要反解，没有PTR记录会认为是垃圾邮件) 1 2 3 4 5 6 $ service iptables ......
Linux中Postfix邮件接收配置（四）
摘自：http://www.ywnds.com/?p=1780 Dovecot介绍 MRA邮件取回代理也有很多如courier-imap，cyrus-imap和dovecot这三个个工具，下面重点介绍Dovecot: 1.高安全性。据 Dovecot 的作者声称，从 Dovecot 的设计和实现，安 ......
Linux中Postfix邮件认证配置（五）
摘自：http://www.ywnds.com/?p=1784 Postfix+Dovecot+Sasl工作原理 1.A用户使用MUA客户端借助smtp协议登陆smtpd服务器，需要先进行用户和密码认证，而SMTPD服务器端支持sasl认证，例如有一个sasl客户端，就会去连接SASL。当SASL接 ......
Linux中Postfix虚拟用户及虚拟域（六）
摘自：http://www.ywnds.com/?p=1797 Postfix基于虚拟用户虚拟域的邮件架构 上图是一个几乎完整的邮件系统架构图，这里基于Mysql数据库进行用户认证，不管是Postfix、Dovecot、webmail都需要去Mysql数据库中进行用户认证。 1、用户可以基于outl ......
Linux中Postfix邮件原理介绍（一）
摘自：http://www.ywnds.com/?p=1723 邮件相关协议 SMTP（Simple Mail Transfer Protocol）即简单邮件传输协议， 工作在TCP的25端口。它是一组用于由源地址到目的地址传送邮件的规则，由它来控制信件的中转方式。跟名字一样smtp非常简单，无法做 ......
Linux中Postfix邮件安装配置（二）
摘自：http://www.ywnds.com/?p=1764 Postfix安装配置 本套邮件系统的搭建，从如何发邮件到收邮件到认证到虚拟用户虚拟域以及反病毒和反垃圾邮件等都有详细的介绍。在搭建过程中必须的参数解释以及原理都有告诉，这样才能更好地理解邮件系统。 一、卸载自带postfix 1 2 ......
Linux 系统资源管理 | systemd
就系统中通常执行 **/etc/init.d/** 目录下的文件来管理服务。 新系统中可统一使用 **systemctl** 组命令来管理服务。 ## systemctl 用法 **最常用来启动、停止服务** - ```systemctl status nginx``` 查看 nginx 服务状态 ......
实习中遇到的问题（4）
1 #[[1,2,3,4,6], 2 #[[7,8,9,10,11,12], 3 #[13,14,15,16,17,18], 4 #[19,20,21,22,23,24], 5 #[25,26,27,28,29,30], 6 #[31,32,33,34,35,36]] 7 # ] 8 # resha ......