• 关于

    采集程序问题怎么解决

    的搜索结果

问题

关于日志服务采集配置的问题

假设我有一台名为A的服务器,在目录:/data/service/log/yy.log 有这么个yy.log日志,日志文件里的日志内容格式有很多,但我只想要采集以下两种: ...
apple201808 2019-12-01 20:59:09 2029 浏览量 回答数 2

回答

用框架页应该会好点在子框架中请求采集url 每次id不同###### 顺便再加段JS var _waitTime = 2; //秒 setTimeout(function(){ self.location.href="http://index.php/?id=$nextId"; },_waitTime*1000);######谢谢,这个可以算补充,请问不知道是否还有其他方法能有效解决的!###### 引用来自“西门飞”的答案 用框架页应该会好点在子框架中请求采集url 每次id不同 请问用框架的区别是什么? ######这样子页面就不会卡住了?######主页面无刷新###### 其实很多时候不一定是技术问题,可能是网络问题,不要用PHP采集,你可以用C#做个客户端工具去采集,会好很多,灵活性也大很多 ######恩,对方的网络等都有可能产生问题!可惜偶不会C#,不然也用其他的来写了!###### 有多种可能会让你卡住。 建议使用定时执行,而不是一次疯狂执行到底。 ######恩,就是想少花点时间,就一直在执行 = =!###### 卡住的原因很多,主要可能有以下几个原因 : 1、浏览器内存容量占用问题,当一个页面不停不停的增加内容时,浏览器有可能因渲染引擎的问题而卡住 。比如你打开一个大型的JS程序,里面不停的加截图片等资源 。 2、采集远程文件时候,对方进行了限制。有些服务器为了防止 非正常用户访问,会对访问者进行拦截,比如有些页面,用户停留时间才十几MS,或一个用户有几十个HTTP请求,那么服务器会暂停返回数据 。 3、所写的采集程序挂了。 具体 是哪一个原因 ,可以写log跟一下 ######感谢,之前没有具体用log来记录,用log来记录的话能否给个思路,是怎么记录程序执行到哪步出问题的。
kun坤 2020-06-08 19:22:08 0 浏览量 回答数 0

回答

Re泪!自从迁移到阿里云,网站运行Warningcurlsetopt错误,一直没有解决 Warning: curl_setopt() [function.curl-setopt]: CURLOPT_FOLLOWLOCATION cannot be activated when safe_mode is enabled or an open_basedir is set in ------------------------- Re泪!自从迁移到阿里云,网站运行Warningcurlsetopt错误,一直没有解决 以上为迁移到阿里云后网站显示的错误代码 ------------------------- Re泪!自从迁移到阿里云,网站运行Warningcurlsetopt错误,一直没有解决 阿里云服务很烂,就跟阿里巴巴服务一样烂,只知道收钱不知道帮解决问题! ------------------------- Re泪!阿里云服务很烂,自从迁移到阿里云,网站运行错误,一直没有解 safe_mode 和open_basedir 早都已经关闭,还是出现这个问题,所以才找阿里云和阿里云的系统服务商求助的,如果这么简单能解决,我还会找阿里云吗 ------------------------- Re泪!阿里云服务很烂,自从迁移到阿里云,网站运行错误,一直没有解 因为办法都试过了,问了几个技术人员,他们说是服务器环境配置问题,我的服务器环境配置用的是阿里云的指定系统服务商! 怎么会跟阿里云没关系呢! ------------------------- Re泪!阿里云服务很烂,自从迁移到阿里云,网站运行错误,一直没有解 只能重新搭建环境了,本来想图省事选择阿里云的配套主机宝系统,但没想到会出现这个错误, 找阿里云的配套主机宝系统服务商半天不理,找阿里云说跟他们没关系,没关系那你们找配套服务商也找些技术过硬服务好些的呀! 网站是找技术团队制作的,他们也解决不了,说是服务器环境配置问题,我也只是个网站美工,真是头大,现在只能重新搭建环境试试看了! 谢谢各位了! ------------------------- Re泪!阿里云服务很烂,自从迁移到阿里云,网站运行错误,一直没有解 在各种办法试过又求助无门情况下,楼主情绪是比较失落! 不像跟上市阿里一样的各位各种高大上! 毕竟楼主小白一枚,现在问题还没解决,只能自力更生重新搭建环境看看是否能解决这个问题! 楼主的程序是带有采集功能的,不知道这个阿里云会不会有什么限制,服务器重新搭建需要针对采集功能加载什么配置吗,是否有愿意分享的高手指点一下? 谢谢 ------------------------- 回16楼huweishen的帖子 之前一直不知道在哪里找,现在知道了,坛子里这么多高手! ------------------------- 回15楼icedream的帖子 之前都试过了,没用 ------------------------- 回14楼梦丫头的帖子 有道理,明天决定怎么搞! ------------------------- Re泪!阿里云服务很烂,自从迁移到阿里云,网站运行错误,一直没有解 今天在请第三方服务商协助查找原因,到目前问题暂时还没解决! 不管怎么样,今晚如果问题解决不了,明天果断安装Centos系统! 谢谢各位热心网友! ------------------------- Re泪!阿里云服务很烂,自从迁移到阿里云,网站运行错误,一直没有解 就没有高手愿意帮忙解决吗?都沉寂了吗? 看样子阿里云真的不适合我用了!
影子爱国 2019-12-02 01:07:59 0 浏览量 回答数 0

阿里云试用中心,为您提供0门槛上云实践机会!

100+款试用云产品,最长免费试用12个月!拨打95187-1,咨询专业上云建议!

问题

爬虫数据管理【问答合集】

目前互联网中网络爬虫的自然语言处理方向前景怎样?https://yq.aliyun.com/ask/195258artTemplate:arttemplate生成的页面可以爬虫可以爬到数据吗https://yq.aliyun.com/ask...
马铭芳 2019-12-01 20:19:58 63181 浏览量 回答数 22

回答

Re阿里云监控/云盾Agent服务造成内存泄露的临时解决方案 引用第4楼服务器之家于2014-05-10 23:08发表的  : 我本人一直很反感阿里云对系统里做的手脚,即便是有各种堂而皇之的理由,各个发行版自身,不管是CENTOS还是DEBIAN还是UBUNTU,每一个系统内官方安置的程序都是经过全球海量用户千锤百炼的,坑都踩完了,反观阿里云你强加到系统里的东西你怎么保证它没有问题? 那倒是好办,直接把相应的 service/daemon 禁用就行了。为难的就是既想用云监控等功能,又不希望它出这种纰漏的…… ------------------------- Re阿里云监控/云盾Agent服务造成内存泄露的临时解决方案 而且我发现 aegis 有个 quartz daemon,它会周期性地启动一些 Python 脚本来收集采样数据。这其实也很……,所有云监控中的常规性能采集工作其实都可以完全集成在 daemon 进程内部实现,这样周期性地 Launch 其它进程和脚本,既不高效也不紧凑。 毕竟作为侵入式的 agent 服务,保持尽可能的高效和紧凑,力求对用户环境影响最小是非常重要的设计目标。 我想也只有第三方用户自定义的监控项采集需要以如此的方式来实现。 ------------------------- Re阿里云监控/云盾Agent服务造成内存泄露的临时解决方案 最近有发现每次 aegis_client 服务更新,都会重新覆盖掉之前的配置。麻烦 ali 的开发人员可以尊重用户的配置选择,在升级是保留用户修改的部分,谢谢。 ------------------------- Re阿里云监控/云盾Agent服务造成内存泄露的临时解决方案 引用第15楼虎笑于2014-07-31 10:14发表的  : 那个不是BUG,是cache了一些安全事件导致内存占用升高。 这就太牵强了,你见过为了清缓存还要 kill 整个进程重启的么?
asbai 2019-12-02 03:18:11 0 浏览量 回答数 0

问题

MaxCompute百问集锦

大数据计算服务(MaxCompute,原名 ODPS)是一种快速、完全托管的 GB/TB/PB 级数据仓库解决方案。MaxCompute 向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题,有效...
yq传送门 2019-12-01 20:16:47 2404 浏览量 回答数 1

问题

MaxCompute百问集锦(持续更新20171011)

大数据计算服务(MaxCompute,原名 ODPS)是一种快速、完全托管的 GB/TB/PB 级数据仓库解决方案。MaxCompute 向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题,有效...
隐林 2019-12-01 20:19:23 38430 浏览量 回答数 18

问题

网站打开速度慢的深层次分析一

网站打开慢——你想知道原因吗?! 有一句话说得好:“再好的网站,慢的像狗一样,用户也不鸟你。”网站页面的响应时间往往很少受到SEOer们的关注,但这...
doudou1 2019-12-01 21:25:29 10461 浏览量 回答数 4

问题

网站打开慢——你想知道原因吗?!

——“再好的网站,慢的像狗一样,用户也不鸟你。” 网站页面的响应时间往往很少受到 SEOer 们的关注,但这却是网站用户流失的直接原因之一。 在相当一部分的用户眼中,如果你的网...
doudou1 2019-12-01 21:48:22 10333 浏览量 回答数 2

问题

【archsummit 回顾】阿里云章文嵩:构建大型云计算平台分布式技术的实践

演讲人:章文嵩博士,阿里集团的高级研究员与副总裁,主要负责基础核心软件研发和云计算产品研发、推进网络软硬件方面的性能优化、搭建下一代高可扩展低碳低成本电子商务基础设施。他也是开放源码及 Linux内...
云课堂 2019-12-01 21:03:36 14448 浏览量 回答数 9

问题

【阿里云产品公测】消息队列服务MQS java SDK 机器人应用 初体验

先去投票,回来再看内容吧 http://bbs.aliyun.com/read/178799.html 文章编号18 初体验 之 测评环境                   ...
啊里新人 2019-12-01 21:08:47 25480 浏览量 回答数 18

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化