[开发笔记]-获取天气数据接口

简介:

 之前做的一个小程序需要获取天气预报接口,使用的是中国天气网的免费接口:

http://m.weather.com.cn/data/101010100.html ,但最近发现这个接口的天气数据不更新了,最新的天气是2014年2月19日的。推测可能是加了什么限制,目前网上搜到的大部分天气接口都是这个。

      下面的两个天气接口倒是仍然可以使用,不过一个是获取实时天气情况的,一个是获取当天整体天气情况的。对于需要获取7天内的天气情况,还需要找寻其他接口来实现。

http://www.weather.com.cn/data/sk/101010100.html

http://www.weather.com.cn/data/cityinfo/101010100.html

       通过这几天的测试,终于找到了一个可用的,特提供给大家。

接口获取的就是中天气网的手机版页面中的数据,网址为: 首页-中国天气网 http://mobile.weather.com.cn/index.html。

       数据是通过webclient,get方式来抓取的。这里需要指出一个需要注意的地方。

就是在webClient添加的请求头信息中加入Referer信息,否则获取的天气数据不是当天的。

 

获取的的数据为:

 

 

如果不加Referer头信息,获取到的数据为:

无论你什么时候获取,获取到的都是20131012这天的天气数据。奇怪的是time是最新的,一直在更新的。由此也可以看出来,他们是加了某种过滤机制无法获取真实的当天天气,这也间接解释了为什么上面提到的那个天气接口不能使用了。

说到这里那就再加一句,开头提到的天气接口 http://m.weather.com.cn/data/101010100.html 即使我加了Referer信息也不能获取当天的。

数据抓取代码:

复制代码
class Program
    {
        //参考文章:中国天气网的数据接口研究 - Create Chen - 博客园 http://www.cnblogs.com/technology/p/3488176.html


        static void Main(string[] args)
        {
            //实时天气
           // string url = "http://mobile.weather.com.cn/data/sk/101010100.html?_=1393644135884";
          //穿衣指数
            string url = "http://mobile.weather.com.cn/data/zsM/101010100.html?_=1393645156001";


            string html = webGetHtml(url);
            Console.WriteLine(html);
            Console.ReadKey();
        }


        //get请求

        public static string webGetHtml(string url)
        {
           // string url = "http://www.cnblogs.com/";
            // http://www.cnblogs.com/babycool 
            WebClient client = new WebClient();
            //设置发出请求 的URI
            client.BaseAddress = url;

            //添加到请求头部的信息
            //GET / HTTP/1.1
            //Accept: text/html, application/xhtml+xml, */*
            //Accept-Language: zh-CN
            //User-Agent: Mozilla/5.0 (compatible; MSIE 9.0; qdesk 2.4.1263.203; Windows NT 6.1; Trident/5.0)
            //Accept-Encoding: gzip, deflate
            //Host: 
            //Connection: Keep-Alive

            client.Headers.Add("Accept", "application/json, text/javascript, */*; q=0.01");
            client.Headers.Add("Accept-Language", "zh-CN,zh;q=0.8");
            //注意:Referer 一定要加,否则获取的不是当天的。
            client.Headers.Add("Referer", "http://mobile.weather.com.cn/");
            client.Headers.Add("User-Agent", "Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1;Chrome/27.0.1453.110; Trident/5.0)");

            //client.Headers.Add("Connection", "Keep-Alive");
            //client.Headers.Add("Accept-Encoding", "gzip, deflate");

            //如果是获取网站的首页的内容 则为 client.OpenRead("/");
            //如果是获取网站域名下的非首页的内容 则为client.OpenRead(url);

            //获取流数据
            Stream webStream = client.OpenRead(url);

            StreamReader reader = new StreamReader(webStream, Encoding.UTF8);
            //获取html代码
            // string html = reader.ReadToEnd();

            return reader.ReadToEnd();
        }
    }
复制代码
相关文章
|
安全 网络协议 网络安全
代理IP、Socks5代理与网络安全:保护隐私与防御威胁的技术探索
代理IP、Socks5代理与网络安全:保护隐私与防御威胁的技术探索
323 0
|
2月前
|
Java
Java 中 `toList()` 与 `collect(Collectors.toList())` 的微妙差异:别再乱用了!
Java 中 `toList()` 与 `collect(Collectors.toList())` 的微妙差异:别再乱用了!
193 0
|
3月前
|
敏捷开发 自然语言处理 IDE
通义灵码+云效 DevOps MCP:通过云效工作项自动生成代码并提交请求
本文将详细介绍如何利用云效MCP服务,根据工作项内容生成对应代码、创建分支、提交代码,并发起合并请求。
|
6月前
|
开发者
鸿蒙开发:刷新库V2装饰器适配
如果你是新写的项目,建议直接上手V2装饰器,即便是已经存在的项目,对于新的模块,也是尽量以V2为主。
141 2
鸿蒙开发:刷新库V2装饰器适配
|
11月前
|
JavaScript 前端开发 安全
探索Deno:现代JavaScript/TypeScript运行时的崛起
【10月更文挑战第17天】Deno是由Node.js创始人Ryan Dahl发起的现代JavaScript/TypeScript运行时,强调安全性、TypeScript原生支持、统一的运行时环境和现代HTTP客户端。本文深入探讨了Deno的特性、优势及其在业界的应用,展示了它如何提升开发效率和代码安全性。
|
小程序
Galacean Effects 2.0 带来了哪些新功能?
各位特效魔法师、创意小能手们,我们近期解锁了一系列超能力,或许会让你的创作如虎添翼,酷炫到飞起!✨🎉🎉
988 1
|
Shell Docker 容器
在Docker中,如何停止所有正在运行的容器?
在Docker中,如何停止所有正在运行的容器?
|
Web App开发 数据格式 索引
tp5时间戳字段报错Invalid datetime format: 1292 Incorrect datetime value
tp5时间戳字段报错Invalid datetime format: 1292 Incorrect datetime value
603 0
|
存储 编解码 前端开发
Star 15.4k!「Movie-web」一个非常简洁独特的电影网站开源项目
Star 15.4k!「Movie-web」一个非常简洁独特的电影网站开源项目
467 1