【YashanDB知识库】php查询超过256长度字符串,数据被截断的问题

简介: 本文分析了YashanDB中PHP通过ODBC查询数据时出现的数据截断问题,表现为超过256字节的数据被截断,以及isql工具无法显示超过300字节长度的数据。问题根源在于YashanDB的ODBC驱动仅支持单次查询,且PHP扩展库默认缓冲区限制。解决方案包括改用PHP ODBC扩展库而非PDO_ODBC,以及调整isql代码逻辑以支持循环取数或一次性读取完整数据。文章还提供了具体代码示例和规避方法,适用于23.2.4.14及更早版本。

本文内容来自YashanDB官网,原文内容请见 https://www.yashandb.com/newsinfo/7488290.html?templateId=1718516

问题现象

如下图,php使用odbc数据源,查询表数据,mysql可以显示出来,yashan显示数据被截断。
image.png

oracle也显示正常,如下图:

image.png

isql查询,超过300字节长度的c1字段,未显示,mysql和yashandb表现一致。

image.png

问题的风险及影响

1、php用pdo_odbc 查询超过256长度的数据,数据被截断。

2、isql查询超过300长度的数据,显示不出来。

问题影响的版本

23.2.4.14及之前版本

问题发生原因

php查询超过256字节数据,显示被截断:yashandb的odbc驱动接口SQLGetData现在只支持单次查询,不支持多次取数据的操作。

isql显示不出来,isql工具最大只查询300长度的数据,超过了该长度未正常显示。

image.png

解决方法及规避方式

php查询显示不出来,不用pdo_odbc扩展库,改用php odbc扩展库。

isql规避方法,更改isql中SQLGetData取数据代码(可以改成循环取数或一次取全部数据),重新编译后,再投入使用。

规避后,php能正常查询出来:

image.png

问题分析和处理过程

1、查看odbc.log,发现php取数据的buffer长度是256,isql的buffer长度是300。

image.png

2、分析php取数据应用代码

发现php_pdo取数据代码逻辑,默认最大长度为256。超过256长度的数据,则循环多次取数据,取完为止。

php pdo_odbc扩展库取数据逻辑:

image.png

php odbc扩展库取数据逻辑:一次取整列大小的数据,由此得出相应的规避方法,改用php odbc方式取数据,则能正常取出数据。

image.png

代码如下:

odbc_php_exe是规避接口

//test.php

function odbc_php_exe( ){



    print("star odbc php test\n");

    //$user="zabbix";

    //$password="123456";

    #$conn=odbc_connect("Driver={MySQL8.0};Server=192.168.7.134;Database= zabbix;", $user, $password);

    //$dsn="Driver={YashanDB};Server=192.168.24.49;Database=yashandb;port=4688;";

    $dsn="Yashandb";

    $user="sys";

    $password="yasdb_123";

    $conn=odbc_connect($dsn, $user, $password);



    //$conn=odbc_connect($dsn,,'123456');

    if (!$conn){

        exit("连接失败: " . $conn);

    }



    $sql = "select c1 ,c2 from test062";

    $rs=odbc_exec($conn,$sql);



    if (!$rs){

        exit("SQL 语句错误");

    }



    print("result:\n");



    while (odbc_fetch_row($rs)){

        $compname=odbc_result($rs,"c1");

        $conname=odbc_result($rs,"c2");

        echo "c1:$compname \n";

        echo "c2:$conname\n";

    }

    odbc_close($conn);

    echo "end\n";

}





function pdo_exe( ){



    try{

      $dsn="odbc:yashandb";

      //$dsn="odbc:MySQLCN";

      $pdo=new PDO($dsn);



      print("conn success\n");



      // 使用pdo->query() 预处理并执行sql语句,以 PDOStatement 对象形式返回结果集,

      // 如果数据不存在则返回false



      $sql = "select c1 ,c2 from test062";



      $rs = $pdo->query($sql);



      // 以关联数组的方式将结果集返回

      $all= $rs->fetchAll(PDO::FETCH_ASSOC);

      print_r($all);



    }catch(PDOException $e){

        die("fail:".$e->getMessage()."\n");

    }

}



//pdo_exe();

odbc_php_exe();

?>

3、isql取数据逻辑

可以看到代码最大长度默认是300

image.png

image.png

相关问题单

PHP使用ODBC取长度超过255的字符串出现截断或乱码的异常

相关文章
|
1月前
|
SQL
【YashanDB知识库】手工迁移Doris数据到崖山分布式
【YashanDB知识库】手工迁移Doris数据到崖山分布式
|
1月前
|
Linux 数据库
【YashanDB知识库】YashanDB查询时间与实际时间默认少8小时
【YashanDB知识库】YashanDB查询时间与实际时间默认少8小时
|
1月前
|
Oracle 关系型数据库 Java
【YashanDB知识库】Flink CDC实时同步Oracle数据到崖山
本文介绍通过Flink CDC实现Oracle数据实时同步至崖山数据库(YashanDB)的方法,支持全量与增量同步,并涵盖新增、修改和删除的DML操作。内容包括环境准备(如JDK、Flink版本等)、Oracle日志归档启用、用户权限配置、增量日志记录设置、元数据迁移、Flink安装与配置、生成Flink SQL文件、Streampark部署,以及创建和启动实时同步任务的具体步骤。适合需要跨数据库实时同步方案的技术人员参考。
【YashanDB知识库】Flink CDC实时同步Oracle数据到崖山
|
1月前
|
SQL druid Java
【YashanDB知识库】共享超过32000字节字符串插入CLOB类型方案
本文来自YashanDB官网,介绍了解决向崖山数据库CLOB类型字段插入超过32000字节字符串时出现的YAS-04107错误的方法。通过JDBC动态变量绑定技术,实现对不同表的超长字符串插入支持。方案基于YashanDB JDBC和Druid组件,动态解析SQL语句并绑定变量,提供通用性。文章包含关键代码示例及程序使用说明,需JDK 1.8环境运行,并提供附件下载以辅助实施。
|
1月前
|
SQL 关系型数据库 MySQL
【YashanDB知识库】字符集latin1的MySQL中文数据如何迁移到YashanDB
本文探讨了在使用YMP 23.2.1.3迁移MySQL Server字符集为latin1的中文数据至YashanDB时出现乱码的问题。问题根源在于MySQL latin1字符集存放的是实际utf8编码的数据,而YMP尚未支持此类场景。文章提供了两种解决方法:一是通过DBeaver直接迁移表数据;二是将MySQL表数据转换为Insert语句后手动插入YashanDB。同时指出,这两种方法适合单张表迁移,多表迁移可能存在兼容性问题,建议对问题表单独处理。
【YashanDB知识库】字符集latin1的MySQL中文数据如何迁移到YashanDB
|
29天前
|
SQL 关系型数据库 PostgreSQL
【YashanDB 知识库】从 PostgreSQL 迁移到 YashanDB 如何进行数据行数比对
【YashanDB 知识库】从 PostgreSQL 迁移到 YashanDB 如何进行数据行数比对
|
1月前
|
JSON 分布式计算 DataX
【YashanDB知识库】使用DataX工具迁移yashan数据到maxcompute
本文介绍使用崖山适配的DataX工具进行数据库迁移的方法,包括单表迁移和批量表迁移。单表迁移需配置json文件并执行同步命令;批量迁移则通过脚本自动化生成json配置文件并完成数据迁移,最后提供数据比对功能验证迁移结果。具体步骤涵盖连接信息配置、表清单获取、json文件生成、数据迁移执行及日志记录,确保数据一致性。相关工具和脚本简化了复杂迁移过程,提升效率。
|
1月前
|
SQL Oracle 关系型数据库
【YashanDB知识库】从PostgreSQL迁移到YashanDB如何进行数据行数比对
本文介绍了通过Oracle视图`v$sql`和`v$sql_plan`分析SQL性能的方法。首先,可通过`plan_hash_value`从`v$sql_plan`获取SQL执行计划,结合示例展示了具体查询方式。文章还创建了一个UDF函数`REPEAT`用于格式化输出,便于阅读复杂执行计划。最后,通过实例展示了如何根据`plan_hash_value`获取SQL文本及其内存中的执行计划,帮助优化性能问题。
【YashanDB知识库】load data一次导入多个文件的数据时报错
【YashanDB知识库】load data一次导入多个文件的数据时报错
|
1月前
|
存储 Oracle 关系型数据库
【YashanDB知识库】YMP校验从yashandb同步到oracle的数据时,字段timestamp(0)出现不一致
【YashanDB知识库】YMP校验从yashandb同步到oracle的数据时,字段timestamp(0)出现不一致
下一篇
oss创建bucket