• 关于

    数据入库

    的搜索结果

回答

额外安排一台服务器做gpfdist服务器,进行数据入库。表结构如下:数据基本是这个样子数据文件1小时一个,文件大小从100MB至2GB不等,单个文件行数在100万条至2000万条不等。数据表按天分区,入库前子表不创建索引,...
postgres_up 2019-12-01 19:38:59 2264 浏览量 回答数 1

回答

我们发布信息时都会有一系列的提示,如数据格式错误、数据入库失败,若使用队列后,像“数据入库失败”这样的提示就不存在了,因为入库操作交给了队列,所以在前台只要提交就只能提示“发布成功”这样的信息,...
a123456678 2019-12-01 20:07:03 768 浏览量 回答数 1

回答

数据入库基本维持在10MB/s,10w行/s。感觉不应该这么慢,但是无法定位问题出在哪里。服务器配置如下:主板:DELL C1600 CPU:X5650*2(主频:2.66Ghz,十二核二十四线程)内存:服务器专用RRD3 REG ECC 32G 硬盘:希捷 ...
postgres_up 2019-12-01 19:39:00 4972 浏览量 回答数 1

云数据库新人专场

MySQL年付低至19.9,其它热门产品1元起购!

回答

现在的问题是这样的:由于缓存中存放的是用户的行为数据,所以入库的时候每个用户各自的数据需要严格按照时间来入库,但多线程下是无法保证这种顺序性的。思考了一下,想用这种方式来做:队列中不同用户的数据不需要...
蛮大人123 2019-12-01 20:04:15 1881 浏览量 回答数 1

回答

入库表:编号,耗材型号,入库日期,入库数量,备注出库表:编号,耗材型号,出库日期,出库数量,出库单位,出库科室,备注库存表:编号,耗材型号,入库数量,出库数量,库存数量,备注有以上两个表,怎么写SQL...
小旋风柴进 2019-12-01 20:15:23 1053 浏览量 回答数 1

回答

那在这里如果数据入库,一般都是在入库之前由php再验证一次,如果不用入库而是像登录这种跟数据库交互的时候也交给后端来实现,然后在后台会执行一些列的逻辑判断,就像你说的根据等级判断来跳转到不同的页面,以下...
蛮大人123 2019-12-02 01:45:39 0 浏览量 回答数 0

回答

老师您好:我这边项目中遇到一个问题,读取大概一个1G的文件,然后取出数据,进行校验入库数据大概在百万条左右,数据库是oracle,想的是使用多线程 处理增加效率,但是如果有的数据失败该怎么处理比较好呢。...
你们的瑞哥 2019-12-01 20:27:57 512 浏览量 回答数 1

回答

消息中间件,这些数据是从哪个地方入库的,在入库的同时给mq发送一条消息,你启动一个消费者服务去接收就行,但是这种方案可能侵入性强一些2.日志收集组件,在入库的时候,将相关信息打印到日志之中,之后通过 flume/scribe...
蛮大人123 2019-12-02 01:49:59 0 浏览量 回答数 0

回答

数据没用通过验证,还可以把错误提示信息返回到注册页面现在比较纠结的是,在网上看到说ajax效率不高啊,那位大神能解救小阿哥,:)P.S还附带一个问题,需要提交到后台的字段有1).Email(string类型入库)2).nickname...
落地花开啦 2019-12-01 19:56:14 885 浏览量 回答数 1

回答

现在多实例采集入库mysql,但是采集是有content重复这种情况,所以我必须入库做判断重复就skip。但是问题是判断这一步耗时长,导致判断滞后。所以 skip其实上存在问题(有重复数据入库),亲们想想怎么解决方案好
落地花开啦 2019-12-01 19:55:05 1136 浏览量 回答数 1

回答

我现在用geomesa入库矢量数据&xff0c;提示只支持4326&xff0c;如果要入其他球面坐标系和平面坐标系&xff0c;比如4490&xff0c;2000的平面坐标数据&xff0c;请问你们是怎么入库的&xff1f;谢谢 本问题来自阿里云开发者社区的【11...
茶什i 2019-12-01 19:56:20 9 浏览量 回答数 0

回答

目前计划搭建一个能处理6000+TPS的数据采集和分析系统,平均秒入库数据量大概3000条据(单条数据4k),数据保留一周,主要业务是入库和集可数据报表查询,请问大牛我应该怎么搭建此业务系统。1、需要采用什么技术、...
晓生寒 2019-12-01 19:26:27 539 浏览量 回答数 1

回答

如何查询hbase一张表里,昨天一天入库了多少条数据
hbase小助手 2019-12-01 20:27:47 1841 浏览量 回答数 1

回答

下单的时候从缓存中获取用户数据和商品数据,然后生成订单号,通过消息队列异步完成订单入库。不明白的地方,如何异步下单如何确保订单入库成功?订单成功之后,用户看到的订单数据是从数据库查询还是在缓存中获取?
wolf、heart 2019-12-01 19:37:26 1588 浏览量 回答数 3

回答

数据库无关,应该是你获取数据的时候就乱码了,都还没入库。是Ø对应的实体对象,你不写入库,直接输出内容,浏览器查看源代码是不是Ø,如果是那么就是你的程序或者语言配置对特殊字符进行了编码操作,和数据库...
吴孟桥 2019-12-02 02:42:05 0 浏览量 回答数 0

回答

目前宜搭的报表页面只能是算每一条数据入库和出库&xff0c;如果想看这个库存展示&xff0c;可以新建一张底表作为库存表&xff0c;每次入库和出库都使用业务关联规则去更新这张底表&xff0c;然后报表页面使用这张底表的数据...
游客4fgbkhg67ygts 2021-02-03 18:05:08 0 浏览量 回答数 0

回答

如果需要原样输出用户输入的内容&xff0c;在数据入库前&xff0c;要用哪个函数处理&xff1f;
珍宝珠 2019-12-01 21:59:02 24 浏览量 回答数 1

回答

现在我们每天有600G左右的数据,通过gpload入库,现在有三类比较头疼的问题: 数据值分区没有定义、数值长度大于表定义的字段长度、单行数据过长, 这三类都会造成同样的后果,一起加载的几百个文件都会报错入不了库...
imxinlai 2019-12-01 19:38:57 2761 浏览量 回答数 2

回答

我是做游戏服务器的,目前我的游戏服饰部署在阿里云上面的,现在我们要将玩家操作日志和一些重要的日志分析入库。日志服务器获取的日志服务器是json格式,将这些json格式的日志分析入库,以便运营分析。现在面临的...
落地花开啦 2019-12-01 20:01:05 5670 浏览量 回答数 2

回答

我个人而言,我使用最多就是读取文件的中的数据,进行批量入库(oracle数据库),其中有个问题就是当我们更新或删除不存在的数据时,数据库并不会报错,但是为了保证数据能够尽可能的入库,我就必须要知道当前批量...
小旋风柴进 2019-12-01 19:50:02 1287 浏览量 回答数 0

回答

程序没有报错&xff0c;都是用 bean&43;servlet&43;service&43;dao这样来写的 入库单号那块基本就是复制注册那块的程序 程序没有报错&xff0c;但注册的信息可以存进数据库 而 入库单号 那块就存不进去 在线等
爱吃鱼的程序员 2020-08-21 14:12:24 0 浏览量 回答数 1

回答

在一个事务中,我传入1 万条数据用于批处理,设置 batchSize 为 100条,在最后一百条出错了,结果事务回滚,但是回滚的只是最后的一百条数据,前面的9900条已经入库,我也不知道是哪些数据出了错。假设我通过某种...
小旋风柴进 2019-12-01 19:50:08 1223 浏览量 回答数 1

回答

这种复杂的数据筛选、清洗、提取,入库能实现吗?我所了解到的资料都是上传结构化的表数据啊,而且我看到“脚本开发”,只支持sql和shell语言。如果能实现,还需要用到什么服务啊?支持在maxcompute服务上直接写脚本...
123ya 2019-12-01 20:11:52 1534 浏览量 回答数 1

回答

现在是单机环境,要变成分布式集群,然后在请求、任务的处理上,可能会面临幂等性的问题1、请求的唯一性,有些请求意外的被多个client处理2、定时任务,避免被多次执行(定时扫文件入库、定制执行处理数据的任务)3...
痞子姜 2019-12-01 20:26:30 967 浏览量 回答数 1

回答

有一个出库表单和一个入库表单&xff0c;现在搭建了一个报表界面&xff0c;如下 想要实现新增加一列&xff0c;物品的出库数量-物品的入库数量&xff0c;实现一个物品库存的展示 我直接使用相减公式&xff0c;一次错误&xff0c;如下 ...
古尔丹之手 2021-01-24 18:50:33 311 浏览量 回答数 2

回答

您好&xff0c;我们这里也有一个不需要中间表的方案&xff0c;不过该方案库存数据仅能做报表展示&xff0c;在报表页面内设置多表关联&xff0c;...总入库-出库就是当前库存数据&xff0c;最后感谢您的支持和谅解&xff01;
宜搭技术支持小镜 2021-05-18 11:48:53 0 浏览量 回答数 0

回答

一般来说数据是先入库再放到缓存中,缓存只是用作快速获取数据,在数据更新完后更新缓存数据
落地花开啦 2019-12-02 01:49:58 0 浏览量 回答数 0

回答

数据库字段中有些字段内容含有多个符号?gt;测试多个单字符都是无法正常入库,想使用几个组合又报错了,有没有一些特殊的字符 问题答疑来自阿里云云栖社区-PostgreSQL技术进阶[钉钉群],喜爱 PGSQL 的同学扫码进群
我叫石头 2019-12-01 20:26:20 564 浏览量 回答数 1

回答

去内存中根据请求的话题词去内存取得最新的几条新闻ID,根据ID去数据库取新闻返回,抗并发在数据库上加一层缓存如果是搜索引擎的话就是内存中维护着一张倒排索引表,每个新闻在入库之前都会清洗数据、切词存入该表中...
蛮大人123 2019-12-02 01:46:05 0 浏览量 回答数 0

回答

redis数据库一般作为数据缓存的地方比较好,redis存入的数据,尽量少用长久保存的,这样会降低查询效率。如果数据较少当然没问题,如果是大型数据入库保存最好的选择是MySQL,或者MongoDB比较好。
李博 bluemind 2019-12-02 02:01:10 0 浏览量 回答数 0

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化