中间件

[双11活动] 11月10-11日，新购5折，续费8折优惠；11月2日周四晚20点，中间件一线产品和运营为您视频直播解析互联网中间件产品家族，揭秘最新最全双11采购攻略。

本文讲的是阿里云中间件技术 促进互联网高速发展【IT168 资讯】从电商巨头向科技巨头华丽转身的阿里巴巴，正在凭借技术创新受到越来越多的海外关注。春节期间，《麻省理工科技评论》(MIT Technology Review)刊登专题文章报道阿里在中间件技术领域的雄厚实力，并介绍了通过阿里云提供服务的互联网中间件平台，如何为传统企业提供大规模高可用的互联网技术能力，从容应对瞬息万变的市场和业务需求。

总架构理解Middleware 通过scrapy官网最新的架构图来理解： 这个图较之前的图顺序更加清晰，从图中我们可以看出，在spiders和ENGINE提及ENGINE和DOWNLOADER之间都可以设置中间件，两者是双向的，并且是可以设置多层. 关于Downloader Middleware我在http://www.cnblogs.com/zhaof/p/7198407.html   这篇博客中已经写了详细的使用介绍。

在首届阿里巴巴中间件峰会上，来自阿里巴巴DRDS团队的梦实分享了《分布式数据库——从线性扩展谈分布式JOIN》。他主要从OLTP数据库的线性扩展、水平扩容、IN查询、分布式JOIN四个方面进行了分享。在分享中，他主要通过买家与订单场景、家庭与孩子场景介绍了IN查询，通过同维度的JOIN、广播表的JOIN、Nested Loop Join详细介绍了分布式JOIN的坑与填坑。

本节书摘来华章计算机《分布式系统：概念与设计》一书中的第2章 ，第2.3节，（英）　George Coulouris　Jean DollimoreTim Kindberg　Gordon Blair　著 金蓓弘　马应龙　等译 更多章节内容可以访问云栖社区“华章计算机”公众号查看。

感谢大家观看由云栖社区、阿里中间件联合举办的《首届阿里巴巴中间件技术峰会》，下面是本次活动相关资料回顾，以供参考（目前仍在更新中，敬请保持关注）。

在云环境中，应用发布与管理会变得十分复杂。本地开发完成的应用需要登录到每一台服务器进行发布和部署；后续还会有应用的重启，扩容等。服务器的不断增加对于运维人员将是一个极大的挑战。同时，当应用开发完毕部署到生产环境之后，通常需要对应用运行状态进行一些监控，比如 CPU 使用率、机器负载、内存使用率和网路流量等。

## 简介 前面写了关于文件系统的三篇文章，[深入浅出文件系统][文件系统之读写基础篇]，[文件系统之读写高级篇]，此篇算是对文件系统相关文章的一个总结。 `MetaQ`是一款高性能的消息中间件，经过几年的发展，已经非常成熟稳定，历经多年双11的零点峰值压测，表现堪称完美。 `MetaQ`当前最新最稳定的稳本是`3.x`系统，`MetaQ 3.x`重新设计和实现，比之前的版本更优秀。

本次挑战赛的主题为“挑战双十一万亿级消息引擎”，比赛场景当然离不开大家最熟悉的阿里双11，海量业务场景下的技术需求模拟，赛题本身具有非常强的实战意义。本次内部赛题目主要解决的是NewSQL领域中使用最频繁的一个场景--分页排序，其对应的SQL执行为order by id limit k,n。

本章将要和大家分享的是一个单点登录中间件，中间件听起来高深其实这里只是吧单点登录要用到的逻辑和处理流程封装成了几个方法而已，默认支持采用redis服务保存session的方式，也可以使用参数Func方法来做自定义session存储操作的方式，就不用我默认提供的redis存储的方法了；要说本章内容的来源，其实是我在以前的ShenNiu.

阿里巴巴叕开源了!

由阿里巴巴集团主办，阿里云天池大数据平台承办的第二届“阿里中间件性能挑战赛”吸引了1946支队伍报名参加，不但有来自413所知名高校的学生和科研人员，还有来自40余家企业的社会选手，这表明，“阿里中间件性能挑战赛”已经成为影响力巨大的重要技术赛事。

本篇文章主要描述了如何配置Spring-JMS，至于为何这样配置及Spring-JMS相关介绍，请阅读这篇文章：Spring整合JMS(消息中间件)。我们这里的消息broker用的是ActiveMQ。 一、相关配置 本篇主要讲解如何在Spring中配置JMS，关于Spring本身的配置本文就不多做介绍了。 1.1 配置maven依赖 在使用Spring-JMS之前，先

最早lucene2.4以及以前，追溯到2008年前后，lucene刚刚引起大家的关注，到后来Nutch、solr的出现，lucene变得更加热。Nutch、Solr的发展，极大推动了lucene的升级。对于一些接触过搜索，使用过lucene、solr的人来说，一般都会感觉lucene、solr很牛.

受害人口述悲惨的遭遇—— 1、最近一段时间（更换了预发机器后）我负责的一个应用的预发环境(线上稳定得像个婴儿~)特别不稳定，最先是应用频频的过几天就发现提供的接口不工作了，但容器Jetty还在跑得欢，于是jstack/jmap看，发现没有一个线程在跑我的war包中的程序，但是容器里个中间件的sar

本文翻译自官方博客，略有添加：https://github.com/mesos/spark/wiki/Spark-Programming-Guide，谢谢师允tx的校正。希望能够给希望尝试Spark的朋友，带来一些帮助。目前的版本是0.5.0 Spark开发指南 从高的层面来看，其实每一个S

SolrQueryLog DataMineSolrQueryLog DataMine 这一块工作非常具有市场和技术价值。尽管现在还没有开源的，有一个付费系统soleami 读作 so ray me。 我个人正在初步积累相关知识，依赖NLP和结构化信息提取虚拟团队，正着手搭建一个通用、可开源的So

BufferedInputStream是一个带有内存缓冲的InputStream. BufferedInputStream是继承自FilterInputStream。 FilterInputStream继承自InputStream属于输入流中的链接流，同时引用了InputStream，将In

简介： Apache MINA（Multipurpose Infrastructure for Network Applications） 是一个网络应用框架，有助于用户非常方便地开发高性能、高伸缩性的网络应用。它通过Java NIO提供了一个抽象的、事件驱动的、异步的位于各种传输协议（如TCP/

在分布式环境开发中经常会使用socket，或者使用rmi来对外提供服务，常用的办法是将写一个java代码，然后部署到服务器上，但是问题来了。如何将这个服务成为一个可靠的系统服务，不会应为风吹草动就挂了，那就不好了。 所以想到使用apache commons 下面的daemon框架来充当守护进程。首

本文主要记录配置安全的Impala集群集成Sentry的过程。Impala集群上配置了Kerberos认证，并且需要提前配置好Hive与Kerberos和Sentry的集成： 使用yum安装CDH Hadoop集群 Hive配置kerberos认证 Impala配置kerberos认证 配置

尽管lucene、solr如此的频繁、如此的普遍被使用。仍然有许多人、需要开发者所见即所得的方式，将查询用起来。一方面为了迎合传统sql用户的习惯，另一方面提升通用搜索产品的可用性，也丰富solr的功能接口。有必要实现 类sql的 solr查询实现。   社区总是无比的强大，总是只要你能想到的

下面的内容包括概念都是个人想到的，不专业或者不规范请知晓。理解意义就行。   1.为什么是facet 搜索与推荐本来是不分家的，搜索没有推荐就是存储了，有推荐的搜索才是真正的搜索，才体现搜索的“情感”(query解析、排序、页面展示)、搜索引擎的“难点”（用户意图理解、最有价值信息、最友好交互

学玩*nux时候，碰到的一些问题，弄明白了后也就过去了。今天看到旁边的同学对目录权限有些模糊，给解释了一下。想想不如把这些问题都记下来。 设计其实包含的是一套约定。能运行、解决问题的约定都是可用的约定。但解决的多种约定方式或说是设计中，作一些比较可以感觉到哪个会更统一更简单。下文提到的两例Linu

上一篇博客Apache MINA (2) Hello World! 以一个例子实现了mina客户端和服务端的通讯，现在通过源码来了解建立连接和通讯的过程（基于tcp/ip的实现）。 服务端通过创建一个NioSocketAcceptor来接受请求，客户端通过创建NioSocketConnector来

多关键词搜索排序质量一直一个疼痛的问题，已经频繁遇到，目前还没来得及系统解决。 针对之前的解决经验，做一个小节，后面可能随着对排序质量的提高，会越来越突出。 请大家拍砖和丰富这方面的经验，提升解决需求的效率。 分析 当前默认都是phrasequery执行，对指定域先分词，然后

DSS中间件采用HTTP协议，终端可以是任何的支持Http协议的设备，开发工具和语言均不受限制     DSS消息服务， 采用WebSocket协议   DSS-API介绍(持续更新) http://www.diocp.org/dss/doc/DSS-API.pdf

源码： https://github.com/jinhang/my-RPC-Framwork.git 赛题要求： 一个简单的RPC框架 RPC（Remote Procedure Call ）——远程过程调用，它是一种通过网络从远程计算机程序上请求服务，而不需要了解底层网络技术的协议。

1.执行命令：artisan make:middleware SessionMiddleware，执行命令之后你会看到这个文件， 若是希望中间件被所有的 HTTP 请求给执行，只要将中间件的类加入到 app/Http/Kernel.php 的 $middleware 属性清单列表中。