七、权限管理实现原理#
重点关注的地方:
# server.go:381 // todo 用户白名单校验,只有指定的user、ip才能使用Proxy if allowConnect := conn.IsAllowConnect(); allowConnect == false { err := mysql.NewError(mysql.ER_ACCESS_DENIED_ERROR, "ip address access denied by kingshard.") conn.writeError(err) conn.Close() return }
视频地址:https://www.bilibili.com/video/BV19g411N7NR?p=7
八、MySQL协议-Handshake!和中间件握手机制原理#
原理图:
重点关注的地方:
server.go:388
// todo 基于MySQL协议和客户端建立握手机制 if err := conn.Handshake(); err != nil { golog.Error("server", "onConn", err.Error(), 0) conn.writeError(err) conn.Close() return }
backend_conn.go:101
// todo 这里其实Proxy和MySQL Server之间建立连接的逻辑 // todo 大家看到这里不明白也没关系,因为想看懂这里需要了解MySQL协议,后面的视频中我会跟大家讲明白这件事 // todo 大家只需要知道,执行过这里的代码之后呢,proxy和MySQL-Service之间就会建立一个Conn, // todo 并且Proxy会维护这个Conn,后续用户的SQL打过来之后,Proxy会将用户的SQL转发给这里获取到的Conn,进尔让MySQL的引擎去真正的执行这里的SQL // todo 读MySQL发过来的握手报文 if err := c.readInitialHandshake(); err != nil { c.conn.Close() return err } // todo 写自己的信息(port、username、password、host) if err := c.writeAuthHandshake(); err != nil { c.conn.Close() return err } // todo 读取MySQL-Server发过来的ok报文 if _, err := c.readOK(); err != nil { c.conn.Close() return err }
视频地址:https://www.bilibili.com/video/BV19g411N7NR?p=8
九、中间件不断接受处理客户端SQL原理#
重点关注的地方:
conn.go:279
// todo 下面的代码在一个无限循环中, 不断的接受客户端发送过来的sql语句 for { // todo 根据MySQL协议解析数据包,获取出数据包中sql语句 data, err := c.readPacket() if err != nil { return } if c.configVer != c.proxy.configVer { err := c.reloadConfig() if nil != err { golog.Error("ClientConn", "Run", err.Error(), c.connectionId, ) c.writeError(err) return } c.configVer = c.proxy.configVer golog.Debug("ClientConn", "Run", fmt.Sprintf("config reload ok, ver:%d", c.configVer), c.connectionId, ) } // 使用dispatch方法,继续处理数据包 if err := c.dispatch(data); err != nil { c.proxy.counter.IncrErrLogTotal() golog.Error("ClientConn", "Run", err.Error(), c.connectionId, ) c.writeError(err) if err == mysql.ErrBadConn { c.Close() } } if c.closed { return } c.pkg.Sequence = 0 } }
视频地址:https://www.bilibili.com/video/BV19g411N7NR?p=9
十、中间件是如何执行你的select语句的?#
重点关注的地方:
conn.go:279
// 使用dispatch方法,继续处理数据包 if err := c.dispatch(data); err != nil { c.proxy.counter.IncrErrLogTotal() golog.Error("ClientConn", "Run", err.Error(), c.connectionId, ) c.writeError(err) if err == mysql.ErrBadConn { c.Close() } }
conn.go:340
func (c *ClientConn) dispatch(data []byte) error { c.proxy.counter.IncrClientQPS() // todo MYSQL协议规定了,客户端发送过来的数据格式是:cmd+data // todo 其中的cmd就是sql的类型,类型都枚举在下面了,打眼一看都能懂 cmd := data[0] // todo data部分就是sql详细内容 data = data[1:] switch cmd { case mysql.COM_QUIT: c.handleRollback() c.Close() return nil case mysql.COM_QUERY: // todo select 语句 return c.handleQuery(hack.String(data)) case mysql.COM_PING: // todo ping 语句 return c.writeOK(nil) case mysql.COM_INIT_DB: return c.handleUseDB(hack.String(data)) case mysql.COM_FIELD_LIST: return c.handleFieldList(data) case mysql.COM_STMT_PREPARE: return c.handleStmtPrepare(hack.String(data)) case mysql.COM_STMT_EXECUTE:// todo insert、update 语句 return c.handleStmtExecute(data) case mysql.COM_STMT_CLOSE: return c.handleStmtClose(data) case mysql.COM_STMT_SEND_LONG_DATA: return c.handleStmtSendLongData(data) case mysql.COM_STMT_RESET: return c.handleStmtReset(data) case mysql.COM_SET_OPTION: return c.writeEOF(0) default: msg := fmt.Sprintf("command %d not supported now", cmd) golog.Error("ClientConn", "dispatch", msg, 0) return mysql.NewError(mysql.ER_UNKNOWN_ERROR, msg) } return nil }
视频地址:https://www.bilibili.com/video/BV19g411N7NR?p=10
十一、读写分离实现原理#
重点关注的地方:
conn_pershard.go:97
// todo 从选出DB中获取一条可用的连接,如果是没有开事物且是读请求的话,executeDB.IsSlave一般为true conn, err := c.getBackendConn(executeDB.ExecNode, executeDB.IsSlave) defer c.closeConn(conn, false) if err != nil { return false, err }