天色渐晚_个人页

ceph iscsi (SCST)

我的博客即将同步至“云栖社区”，诚邀技术同仁一起入驻。

支持向量机（svm）

一、概述 　　

MachineLearning之Logistic回归

一、概述 　假设现在有一些数据点，我们用一条直线对这些点进行拟合（该线称为最佳拟合直线），这个拟合过程就称为回归； 　利用Logistic回归进行分类的主要思想是：　根据现有数据对分类边界线建立回归公式， 以此进行分类。

ML之回归

一、概述 　　一元形式： 　　　　 　　多元形式： 　　　　 　　最小二乘的目标函数 　　　　 　　       　　　　   　　

ML之监督学习算法之分类算法一 ——— 决策树算法

一、概述 　　决策树（decision tree）的一个重要任务是为了数据中所蕴含的知识信息，因此决策树可以使用不熟悉的数据集合，并从中提取出一系列规则，在这些机器根据数据创建规则时，就是机器学习的过程。

ML之监督学习算法之分类算法一 ———— k-近邻算法（最邻近算法）

一、概述 　　最近邻规则分类（K-Nearest Neighbor）KNN算法 　　由Cover 和Hart在1968年提出了最初的邻近算法， 　　这是一个分类（classification）算法 　　输入基于实例的学习（instance-based learning）， 懒惰学习（lazy learning） 二、原理 　　在一个样本数据集合， 也称作训练样本集， 并且样本集中每个数据都存在标签， 即我们知道样本集中每一数据与所属分类的对应关系。

卷积神经网络

一、概述 　两种神经网络： 全连接神经网络 卷积神经网络（局部连接，相对于全连接而言）　　　　　 　全连接神经网络 　　　　weight太多了，导致计算量太大 　　pooling（池化）： 特征聚集、降维（降低维度）、光滑 　　　　目的： 　　　　　　降低输出规模 　　　...

TensorFlow Google大会总结

一、概述 　　介绍TPU，需要使用XLA编译，否则没有做内部优化，无法达到加速的效果； 　　TPU相关的性能分析器： 二、新版本的输入库 　　之前TensorFlow的输入方式： feed_dict： 太过于低效 Queue：     python多线程，全局锁的问题；同样低效，而且对应其中错...

凸函数优化

一、概率问题回顾： 　　无偏性： 　　　　 　　样本均值和方差是总体的无偏估计： 　　　　 　　　均值的无偏性： 　　　　 　　方差的无偏性： 　　　　 　　 　　　　 　　凸优化： 　　　　 　　凸优化的引入： 　　　　 　　

机器学习 之 线性代数

一、概述 　　范德蒙行列式：（vandermonde） 　　　 　　矩阵乘法： 　　　　 　　矩阵乘法引入的问题： 　　　　   　　矩阵的秩： 　　　　  　　秩与线性方程组的解的关系： 　　　　   　　向量组等价： 　　　　  　　C=AB： 　　　　 　　正交矩阵： 　　　　 　　特征值 特...

io分析神器blktrace

一、概述 　　【许久之前就用过blktrace，现整理如下】 　　 从linux 一个完整的IO入手分析： 　　 　　　　 　　一个I/O请求进入block layer之后，可能会经历下面的过程： Remap: 可能被DM(Device Mapper)或MD(Multiple Device, ...

AI 高等数学、概率论基础

一、概论 　　基础引入： 　　　　 　　原理一：【两边夹定理】 　　　　 　　原理二：【极限】 　　　　　　　　 　　　　X为角度x对应的圆弧的点长； 　　原理三【单调性】： 　　　　 　　引入： 　　 　　　 二、导数 　　　　　 　　常见函数的导数： 　　　　 四、应用： 　　　　 　　求解： ...

项目自动化构建设计

一、概述

Tensorflow CNN入门

一、概论 　　以图像识别来举例，比如我们让计算机如何识别一张猫的图片识别出猫呢？ 　　老式的计算机视觉是如何做的呢？ 　　　　比如OpenCV： 首先理解很多算法，比如如何检测线条（Edge Detection) 如何做形态学变化等 根据我们的知识， 经验， 脑洞来设计很多特征； 用这些特征去比对一张图像是不是猫。

go interface 的坑

一、概述 1 [root@node175 demo]# tree 2 . 3 ├── lib 4 │   └── world.go 5 ├── README 6 └── server.go 7 8 1 directory, 3 files 9 10 #server.

golang项目结构

一、概述 　　golang更新了环境变量，导致整个goproject的结构改变： 1 [root@node175 goproject]# tree -L 2 2 . 3 ├── bin 4 │   └── demo 5 ├── pkg 6 │   └── linux_amd64 7 ...

kubelet源码分析（version： git tag 1.7.6）

一、概述  　　kubelet源码入口：cmd/kubelet/kubelet.go main() 　　cmd/kubelet/app 包中的Run函数： 　查看先参数，kubelet.KubeletDeps 1 type KubeletDeps struct { 2 Builde...

Tensorflow 相关概念

一、概述 　　人工智能：artificial intelligence 　　权重: weights 　　偏差：biases  　　图中包含输入（ input）、塑形（ reshape）、 Relu 层（ Relulayer）、 Logit 层（ Logit layer）、 Softmax、交叉熵（ cross entropy）、梯度（ gradient）、 SGD 训练（ SGD Trainer）等部分，是一个简单的回归模型。

TensorFlow 基本概念

一、概述 使用图（graph）来表示计算任务 在会话（Session）的上下文（context）中执行图（graph) 使用tensor表示数据 通过 变量（Variable）维护状态 使用 feed 和fetch可为任意的操作（arbitrary opertaion）赋值或者从其中获取数据；　　　　 　　TensorFlow使用图来表示计算任务，图中的节点被称之为op（operation的缩写），一个op获得N个Tensor，执行计算，产生N个Tensor。

kubernetes删除pod失败

一、概述 　　k8s中删除pod失败，可能是该pod有rc，rs上层控制，而且很有可能，所以删除上层对应的rc，rs，deployment即可； 　　删除的方法： 　　　　1、直接删除rc，rs，deployment等； 　　　　2、官方做法：先put rc副本数为0，再删除rc；使用api 1...

k8s源码分析之kubelet

一、概述   二、Kubelet对象创建过程：（pkg/kubelet/kubelet.go ） 　　NewMainKubelet 正如名字所示，主要的工作就是创建 Kubelet 这个对象，它包含了 kubelet 运行需要的所有对象，上面的代码就是各种对象的初始化和赋值的过程，这里只介绍几个非常...

k8s之服务发现

一、概述 　　k8s中支持两种服务发现方法： 环境变量和DNS 二、环境变量 　　当Pod被创建的时候，k8s将为Pod设置每一个Service的相关环境变量，这些环境变量包括两种类型： k8s Service环境变量： 　　　　k8s为Service设置的环境变量形式, 包括： {SVCNAME}_SERVICE_HOST {SVCNAME}_SERVICE_PORT {SVCNAME}_SERVICE_PORT_{PORTNAME} 　　　　其中的服务名和端口名转为大写，连字符转换为下划线。

k8s之Service

一、概述 　　在k8s中暴露Service访问（无论内部还是外部），都要经过kube-proxy； 如下图：

Linux IO系统分析（scsi篇）

一、概述 　　Linux内核中SCSI子系统由SCSI上层，中间层，底层驱动模块三部分组成，负责管理SCSI资源和处理其他子系统，如文件系统，提交到SCSI子系统中的IO请求。 因此，理解SCSI子系统的IO处理机制对理解整个SCSI子系统至关重要，同时也有助于理解整个Linux内核的IO处理机制。

golang下划线(underscore) 总结

一、概述 　　"_" 可以简单理解为赋值但以后不再使用，在golang中使用的比较多，使用的场合也很多，稍作总结； 二、场景 　　1、import 1 import _ "net/http/pprof" 　　引入包，会调用包中的初始化函数，这种使用方式仅让导入的包做初始化，而不适用包中其他功能； 　　2、用在返回值 1 for _, v := range Slice {} 2 _, err := func() 　　表示忽略某个值。

paxos算法

一、概述： 确定一个不可变变量的取值： 　　基于互斥访问权的Acceptor的实现： 　　　　1、Acceptor保存变量var和一个互斥锁 　　　　2、Acceptor::prepare() 　　　　　　互斥加锁，给予var的互斥访问权，并返...

openstack neutron 深入

一、概述 　　环境说明：

openstack nova 深入

一、概述： 　　由nova --debug list查看到： #nova --debug list DEBUG (session:195) REQ: curl -g -i -X GET http://192.

opestack keystone 深入

一、概述 　　keystone 有两个endpoint端口，一个35357，用于管理，只有admin_role可以使用。一个是5000, 用于业务； 二、keystone中的路由 　　解析url，然后获取后端调用的具体方法； 具体解析可参见: python route 详解   　　

openstack XXX-api分析

一、概述 RESTful API: 表征状态迁移，也就是说client端使用http的基本操作（主要四种：get, post, put, delete 对应增删改查）使服务端的资源状态转化； WSGI: web server gateway interface  web服务网关接口，可以看作一个桥...

设计模式

一、概述 　　设计模式描述了对象如何进行通信才能不牵涉相互的数据模型和方法。 　　保持这种独立性（低耦合）一直是面向对象程序设计的目标； 　　"Design Patterns: Elements of Resualbel Software"一书将设计模式归纳为三大类型，共23种： 　　　　创建型模式：通常和对象的创建有关，设计到对象实例化的方式。

linux下磁盘相关工具（待整理）

一、概述： fsck　　 tune2fs mke2fs badblocks mkfs* fdisk mount umount mknod e2label blkid hdparm mkswap swapon smartctl  #yum install smartmontools 二、 　　 (1): fsck:检查文件系统并尝试修复错误。

ceph 之cgroup

一、概述 　　

openstack neutron 二/三层网络实现

引用声明:https://zhangchenchen.github.io/2017/02/12/neutron-layer2-3-realization-discovry/ 一、概述 　　Neutron是openstack中提供网络虚拟化的组件，根据二层网络的实现方式不同（即agent的不同），Linux bridge方式，Openvwitch的方式。

mysql基本语句集合

一、概述 　　1、删除字段 1 alter table {table_name} drop column {column_name}; 　　2、添加字段 alter table {table_name} Add column {column_name} {data type} DEFAUL...

k8s实战之数据卷（volume）

一、概述 　数据卷用于实现容器持久化数据，k8s对于数据卷重新定义，提供了丰富强大的功能；数据卷分为三类: 本地数据卷，网络数据卷和信息数据卷 二、　

k8s网络

一、概述 　　k8s从Docker网络模型(NAT方式的网络模型)中独立出来形成一套新的网络模型。该网络模型的目标是：        每一个Pod都拥有一个扁平化共享网络命名空间的IP，称为PodIP，通过PodIP， Pod能够跨网络与其他物理机和Pod进行通信。

k8s实战之Service

一、概述 　　为了适应快速的业务需求，微服务架构已经逐渐成为主流，微服务架构的应用需要有非常好的服务编排支持，k8s中的核心要素Service便提供了一套简化的服务代理和发现机制，天然适应微服务架构，任何应用都可以非常轻易地运行在k8s中而无须对架构进行改动； k8s分配给Service一个固定IP，这是一个虚拟IP(也称为ClusterIP)，并不是一个真实存在的IP，而是由k8s虚拟出来的。

k8s实战读书笔记

一、概述 　　kubernetes中Service是真实应用的抽象，将用来代理Pod，对外提供固定IP作为访问入口，这样通过访问Service便能访问到相应的Pod，而对访问者来说只需知道Service的访问地址，而不需要感知Pod的变化； 　　Service是通过Label来关联Pod的，在Service的定义中，设置 .

小程序之他山之石

各种示例： http://blog.csdn.net/column/details/13721.html

openstack neutron中涉及的网络设备

一、openstack neutron网络设备介绍 　　Bridge（网桥） 　　　　用于将两个LAN连接起来，主要靠的MAC地址学习机制。当网桥的Port收到包时会将包的源mac和port ID关联起来记入mac学习表，通过这个学习过程来完善mac表。

openstack网络基础

一、概述 　　网络虚拟化是云计算的最重要部分，本文详细讲述 Linux 抽象出来的各种网络设备的原理、用法、数据流向。您通过此文，能够知道如何使用 Linux 的基础网络设备进行配置以达到特定的目的，分析出 Linux 可能的网络故障原因。

wxml解析

一、数据绑定 　　wxml中的动态数据均来自于对应js文件中的Page的data，在js中访问Page的data用this.data， 改变data中某个属性的值用setData()方法。 　　Page({ 　　　　data: { 　　　　　　id: 0, 　　　　　　message: "hello...

wxml

1 2 3 {{for}} 4 {{bar}} 5 6 7 8 9 10 {{a}} 11 {{b}} 12 {{c}} 13 ...

openstack rpc机制

一、概述： 　　在openstack项目中，api的调用规则： 　　　　跨项目：如nova调用keystone， glance，cinder等，使用rest api（通过相应的python-XXXclient 库） 　　　　项目内跨服务调用，使用RPC调用，通过服务提供的rpcapi.

wxss解析

一、概述 　　wxss是样式语言，用于描述wxml组件样式； 　　在css基础上扩展而来： 　　　　1、尺寸单位： rpx， rem 　　　　2、支持样式导入 @import语句导入外联样式表 　　note：  微信小程序一般使用iphone6 来视觉稿的标准； 二、选择器 　　rpx: 规定屏幕...

CentOS 7 systemd的坑

一、概述 　在从 CentOS 6 迁移到 CentOS 7 的过程中，可能有一些地方需要调整，最显著的地方莫过于 systemd 带来的改变，不同的管理服务的方式，不同的日志方式，设置时区，时间等等。

kubernetes架构之二

一、概述 　　IaaS:即基础设施即服务，通过虚拟化和分布式存储等技术，实现对包括服务器、存储设备、网络设备等各种物理资源的抽象；从而形成了一个可扩展、可按需分配的虚拟资源池。最具代表性的IaaS产品有Amazon AWS，提供虚拟机EC2和云存储S3等服务； 　　PaaS：平台即服务，为开发者提供了应用的开发环境和运行环境，将开发者从繁琐的IT环境管理中解放出来；PaaS主要面向的是软件专业人员； 　　SaaS：软件即服务，面向使用软件的终端用户。

golang之interface

一、interface 1 package main 2 3 import "fmt" 4 5 type USB interface { 6 Name() string 7 Connect() 8 } 9 10 type PhoneConnecter str...