golang pgx自定义PostgreSQL类型

本文涉及的产品
云原生数据库 PolarDB MySQL 版,通用型 2核4GB 50GB
云原生数据库 PolarDB PostgreSQL 版,标准版 2核4GB 50GB
简介: golang的pgx驱动提供了大约70种PostgreSQL类型支持,但还是有一些类型没有涵盖,本文介绍如何自己编写代码支持特殊的类型。

golang的pgx驱动提供了大约70种PostgreSQL类型支持,但还是有一些类型没有涵盖,本文介绍如何自己编写代码支持特殊的类型。本文以PostGIS的Geometry类型为例。

需要实现:SetGetAssignToDecodeTextDecodeBinaryEncodeTextEncodeBinaryScanValueMarshalJSONUnmarshalJSON方法。

//PostGIS Geometry实现,目前仅支持Point2Dimport (
"bytes""database/sql/driver""encoding/binary""encoding/hex""errors""fmt""github.com/jackc/pgtype""math""strconv""strings")
const (
TypeGeoPoint=iota+1TypeGeoPointMTypeGeoPointZ)
typeGeometrystruct {
Xfloat64Yfloat64Statuspgtype.Status}
funcAppendByte(buf []byte, nbyte) []byte {
buf=append(buf, n)
returnbuf}
funcAppendUint16(buf []byte, nuint16) []byte {
wp :=len(buf)
buf=append(buf, 0, 0)
binary.LittleEndian.PutUint16(buf[wp:], n)
returnbuf}
funcAppendUint32(buf []byte, nuint32) []byte {
wp :=len(buf)
buf=append(buf, 0, 0, 0, 0)
binary.LittleEndian.PutUint32(buf[wp:], n)
returnbuf}
funcAppendUint64(buf []byte, nuint64) []byte {
wp :=len(buf)
buf=append(buf, 0, 0, 0, 0, 0, 0, 0, 0)
binary.LittleEndian.PutUint64(buf[wp:], n)
returnbuf}
funcAppendInt16(buf []byte, nint16) []byte {
returnAppendUint16(buf, uint16(n))
}
funcAppendInt32(buf []byte, nint32) []byte {
returnAppendUint32(buf, uint32(n))
}
funcAppendInt64(buf []byte, nint64) []byte {
returnAppendUint64(buf, uint64(n))
}
funcSetInt32(buf []byte, nint32) {
binary.LittleEndian.PutUint32(buf, uint32(n))
}
func (dst*Geometry) Set(srcinterface{}) error {
ifsrc==nil {
dst.Status=pgtype.Nullreturnnil    }
err :=fmt.Errorf("cannot convert %v to Geometry", src)
varp*Geometryswitchvalue :=src.(type) {
casestring:
p, err=parseGeometry([]byte(value))
case []byte:
p, err=parseGeometry(value)
default:
returnerr    }
iferr!=nil {
returnerr    }
*dst=*preturnnil}
funcparseGeometry(src []byte) (*Geometry, error) {
ifsrc==nil||bytes.Compare(src, []byte("null")) ==0 {
return&Geometry{Status: pgtype.Null}, nil    }
iflen(src) <5 {
returnnil, fmt.Errorf("invalid length for point: %v", len(src))
    }
ifsrc[0] =='"'&&src[len(src)-1] =='"' {
src=src[1 : len(src)-1]
    }
parts :=strings.SplitN(string(src[0:len(src)-1]), ",", 2)
iflen(parts) <2 {
returnnil, fmt.Errorf("invalid format for point")
    }
x, err :=strconv.ParseFloat(parts[0], 64)
iferr!=nil {
returnnil, err    }
y, err :=strconv.ParseFloat(parts[1], 64)
iferr!=nil {
returnnil, err    }
return&Geometry{X: x, Y: y, Status: pgtype.Present}, nil}
func (dstGeometry) Get() interface{} {
switchdst.Status {
casepgtype.Present:
returndstcasepgtype.Null:
returnnildefault:
returndst.Status    }
}
func (src*Geometry) AssignTo(dstinterface{}) error {
returnfmt.Errorf("cannot assign %v to %T", src, dst)
}
func (dst*Geometry) DecodeText(ci*pgtype.ConnInfo, src []byte) error {
ifsrc==nil {
*dst=Geometry{Status: pgtype.Null}
returnnil    }
s, _ :=hex.DecodeString(string(src))
l :=len(s)
begin :=l-2*8//只取坐标值parts :=s[begin:]
iflen(parts) !=16 {
returnfmt.Errorf("invalid format for geometry")
    }
x :=binary.LittleEndian.Uint64(parts)
y :=binary.LittleEndian.Uint64(parts[8:])
*dst=Geometry{X: math.Float64frombits(x), Y: math.Float64frombits(y), Status: pgtype.Present}
//*dst = Geometry{X: x, Y: y, Status: pgtype.Present}returnnil}
func (dst*Geometry) DecodeBinary(ci*pgtype.ConnInfo, src []byte) error {
ifsrc==nil {
*dst=Geometry{Status: pgtype.Null}
returnnil    }
l :=len(src)
begin :=l-2*8parts :=src[begin:]
iflen(parts) !=16 {
returnfmt.Errorf("invalid length for geometry: %v", len(src))
    }
x :=binary.LittleEndian.Uint64(parts)
y :=binary.LittleEndian.Uint64(parts[8:])
*dst=Geometry{
X:      math.Float64frombits(x),
Y:      math.Float64frombits(y),
Status: pgtype.Present,
    }
returnnil}
func (srcGeometry) EncodeText(ci*pgtype.ConnInfo, buf []byte) ([]byte, error) {
switchsrc.Status {
casepgtype.Null:
returnnil, nilcasepgtype.Undefined:
returnnil, errors.New("cannot encode status undefined")
    }
buf=AppendByte(buf, 0x01)
//1-不带SRID, 0x20000000 - 带SRID//坐标类型 point(1)buf=AppendInt32(buf, 0x20000000|1)
//WGS 84 SRID=4326buf=AppendInt32(buf, 0x10E6)
buf=AppendUint64(buf, math.Float64bits(src.X))
buf=AppendUint64(buf, math.Float64bits(src.Y))
s :=hex.EncodeToString(buf)
return []byte(s), nil}
func (srcGeometry) EncodeBinary(ci*pgtype.ConnInfo, buf []byte) ([]byte, error) {
switchsrc.Status {
casepgtype.Null:
returnnil, nilcasepgtype.Undefined:
returnnil, errors.New("cannot encode status undefined")
    }
buf=AppendByte(buf, 0x01)
//1-不带SRID, 0x20000000 - 带SRID//坐标类型 point(1)buf=AppendInt32(buf, 0x20000000|1)
//WGS 84 SRID=4326buf=AppendInt32(buf, 0x10E6)
buf=AppendUint64(buf, math.Float64bits(src.X))
buf=AppendUint64(buf, math.Float64bits(src.Y))
returnbuf, nil}
// Scan implements the database/sql Scanner interface.func (dst*Geometry) Scan(srcinterface{}) error {
ifsrc==nil {
*dst=Geometry{Status: pgtype.Null}
returnnil    }
switchsrc :=src.(type) {
casestring:
returndst.DecodeText(nil, []byte(src))
case []byte:
srcCopy :=make([]byte, len(src))
copy(srcCopy, src)
returndst.DecodeText(nil, srcCopy)
    }
returnfmt.Errorf("cannot scan %T", src)
}
// Value implements the database/sql/driver Valuer interface.func (srcGeometry) Value() (driver.Value, error) {
returnpgtype.EncodeValueText(src)
}
func (srcGeometry) MarshalJSON() ([]byte, error) {
switchsrc.Status {
casepgtype.Present:
varbuffbytes.Bufferbuff.WriteByte('"')
buff.WriteString(fmt.Sprintf("(%g,%g)", src.X, src.Y))
buff.WriteByte('"')
returnbuff.Bytes(), nilcasepgtype.Null:
return []byte("null"), nilcasepgtype.Undefined:
returnnil, errors.New("cannot encode status undefined")
    }
returnnil, errors.New("invalid status")
}
func (dst*Geometry) UnmarshalJSON(geometry []byte) error {
p, err :=parseGeometry(geometry)
iferr!=nil {
returnerr    }
*dst=*preturnnil}

使用前,需要注册自定义的类型,在程序的初始化部分加上以下代码:

urlExample :="postgres://username:password@localhost:5432/database_name"vargeometryOiduint32config, err :=pgxpool.ParseConfig(urlExample)
iferr!=nil {
log.Panic("parse database config failed", zap.Error(err))
}
config.AfterConnect=func(ctxcontext.Context, conn*pgx.Conn) error {
//注册PostGIS geometry类型ifgeometryOid==0 {
//取得geometry类型的OIDerr=conn.QueryRow(ctx, "select 'geometry'::regtype::oid").Scan(&geometryOid)
iferr!=nil {
log.Panic("get geometry oid failed", zap.Error(err))
        }
    }
ci :=conn.ConnInfo()
ci.RegisterDataType(pgtype.DataType{Value: &mypgtype.Geometry{}, Name: "geometry", OID: geometryOid})
returnnil}
相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
相关文章
|
6月前
|
存储 Go
Golang底层原理剖析之slice类型与扩容机制
Golang底层原理剖析之slice类型与扩容机制
73 0
|
SQL JSON 关系型数据库
golang存取PostgreSQL
golang如何存取PostgreSQL中的数据?
|
安全 Go
Golang 语言的编程技巧之类型
Golang 语言的编程技巧之类型
60 0
|
6月前
|
SQL 关系型数据库 数据库
实时计算 Flink版操作报错之使用SQL 将 PostgreSQL 的 date 类型字段转换为 TIMESTAMP 类型时遇到报错,该如何处理
在使用实时计算Flink版过程中,可能会遇到各种错误,了解这些错误的原因及解决方法对于高效排错至关重要。针对具体问题,查看Flink的日志是关键,它们通常会提供更详细的错误信息和堆栈跟踪,有助于定位问题。此外,Flink社区文档和官方论坛也是寻求帮助的好去处。以下是一些常见的操作报错及其可能的原因与解决策略。
|
2月前
|
Go
Golang语言基础之接口(interface)及类型断言
这篇文章是关于Go语言中接口(interface)及类型断言的详细教程,涵盖了接口的概念、定义、实现、使用注意事项以及类型断言的多种场景和方法。
37 4
|
2月前
|
Go
Golang语言基础数据类型之字符类型
这篇文章介绍了Go语言中的字符类型,包括字符概述、byte和rune类型的定义、转义字符的使用以及如何遍历字符串获取字符的示例。
15 0
|
Go
Golang 语言怎么打印结构体指针类型字段的值?
Golang 语言怎么打印结构体指针类型字段的值?
258 0
|
存储 安全 Go
Golang 语言 method 接收者使用值类型和指针类型的区别
Golang 语言 method 接收者使用值类型和指针类型的区别
52 0
|
6月前
|
分布式计算 DataWorks 关系型数据库
DataWorks产品使用合集之在使用 DataWorks 数据集成同步 PostgreSQL 数据库中的 Geometry 类型数据如何解决
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
86 0
|
6月前
|
分布式计算 关系型数据库 大数据
MaxCompute产品使用合集之怎么才可以将 PostgreSQL 中的 geometry 空间类型字段同步到 MaxCompute 或另一个 PostgreSQL 数据库
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。