• 关于

    并行设计问题怎么解决

    的搜索结果
  • 多核时代:并行程序设计探讨(9)——数据分解模式Data Decomposition

                                                       Data Decomposition 1.1        问题 如何将待解决的问题的数据分解为能够并行运行的数据单元(units)? 1.2        上下文 并行算法的设计者必须首先详细了...

    文章 华仔爱技术 2009-09-20 1362浏览量

  • 数据库必知词汇:MapReduce

    MapReduce是一种编程模型,其基于“映射”与“归约”的思想,把一堆杂乱无章的数据按照某种特征归纳起来,然后处理并得到最后的结果。MapReduce编程思想是将用于解决一些大问题可以被分解为许多子问题的场景,且这些子问题相对独立,将这些子问题并行处理完后,大问题也就被解决。 MapReduce...

    文章 萌萌怪兽 2020-02-23 128浏览量

  • 多核时代:并行程序设计探讨(8)——任务分解模式Task Decomposition

                                                                  Task Decomposition 从本章开始我们就正式来介绍每个模式了,参考设计模式的做法,每个模式我们都按照如下的内容进行介绍:问题(Problem)、上下文(con...

    文章 华仔爱技术 2009-09-14 1236浏览量

  • 《深入理解大数据:大数据处理与编程实践》一一1.3 MapReduce并行计算技术简介

    本节书摘来自华章计算机《深入理解大数据:大数据处理与编程实践》一书中的第1章,第1.3节,作者 主 编:黄宜华(南京大学)副主编:苗凯翔(英特尔公司),更多章节内容可以访问云栖社区“华章计算机”公众号查看。 1.3 MapReduce并行计算技术简介 1.3.1 MapReduce的基本概念和由来...

    文章 华章计算机 2017-07-04 1736浏览量

  • mysql并行复制降低主从同步延时的思路与启示

    一、缘起 mysql主从复制,读写分离是互联网用的非常多的mysql架构,主从复制最令人诟病的地方就是,在数据量较大并发量较大的场景下,主从延时会比较严重。 为什么mysql主从延时这么大? 回答:从库使用【单线程】重放relaylog。 优化思路是什么? 回答:使用单线程重放relaylog使得...

    文章 初商 2019-08-11 455浏览量

  • 工程架构能力对于做好机器学习重要吗?

    工程架构能力对于做好机器学习到底重要吗?可能很多技术人员对于这个问题都有一些自己的看法。中国科学院计算技术研究所严林在知乎上分享了他对于中国问题的看法,本文转发已被授权。在面试中,多多少少会问一些机器学习方向候选人工程架构方面的问题。不少做机器学习的候选人表示,我是做算法的,不需要了解这些工程架构...

    文章 【方向】 2018-07-15 2733浏览量

  • 技术方案设计没有深度?试试这套方法论

    作者 | 高福来(不拔)来源 | 阿里技术公众号平时听到一些同学说技术方案没什么深度,好难讲出来,怎么去体现技术方案设计的深度是大家普遍关心的一个问题,这个问题不是个例问题,因此分享下自己的一些观点和看法。主要从三个部分来讲:第一部分主要分析为什么技术方案没有体现出深度,找到问题后就好解决,并提出...

    文章 开发者小助手_LS 2021-02-19 4885浏览量

  • 技术方案设计的方法论及案例分享

    作者 | 高福来(不拔) 来源|阿里巴巴云原生公众号 怎么去体现技术方案设计的深度是大家普遍关心的一个问题,这个问题不是个例问题,因此本文主要分享下作者个人的一些观点和看法。 文章主要分为三个部分: 第一部分主要分析为什么技术方案没有体现出深度,找到问题后就好解决,并提出技术方案的广度和深度...

    文章 阿里巴巴云原生小助手 2021-02-01 4454浏览量

  • 多核时代:并行程序设计探讨(1)——并行系统

      并行程序设计探讨(1)——并行系统 大家可能会有疑问:你一会儿并行,一会儿多核,到底是谁跟谁啊? 我开始也有这个疑问,甚至以为并行就是多核,其实两个并不能对等,一句话就是:多核是并行的一种。 并行本身是一个广泛的概念,其实早在多核之前并行处理就已经存在N久了,大家想想看:IBM、SUN、HP的...

    文章 华仔爱技术 2009-06-24 1445浏览量

  • C++11 并发编程指南——前言

    开场白:前一段时间(大概在8月初)开始写 《C++11 并发编程指南》(最早更新于:http://www.cnblogs.com/haippy),但是由于个人能力有限,加上 9 月初到现在一直在忙着找工作(革命尚未成功),精力有限,难免出现错误,希望读者不吝指正。 另外,这是我在并发编程网上写的第...

    文章 ali清英 2016-04-08 1082浏览量

  • 大数据应用之双色球算奖平台总体设计历史数据存储篇

    作者:张子良 版权所有,转载请注明出处 1.1 引子:文件OR数据库   历史期次的双色球选注数据的存储,采用什么样的格式比较好呢?这需要重点从三个方面考虑,一、文件访问方便吗?二、文件服务器空间够用吗?三、软硬件故障环境下,如何保障数据的可用性。基于这几个方面的考虑,到底是采用文件存储还是采用数...

    文章 胖子哥 2016-04-19 1194浏览量

  • 第1期实时在线培训:@淘宝丁奇,如何解决影响MySQL使用的9大问题?

    大江南北,一路飞雪。 云栖大会: 1月20日的云栖大会上海峰会成功落幕。但在无数的重磅发布中,我们对DT世界的思考才刚刚开始。 1. 王坚:数据创业要学习小岗村 2. 详解阿里云一站式大数据平台“数加”的首批20款产品 3. 视频回放:与九州云、英伟达、润和软件、优客工场的战略合作 4...

    文章 云篆 2016-01-24 10355浏览量

  • Java8并行流:执行速度快的飞起!

    在 Java 7 之前,如果想要并行处理一个集合,我们需要以下几步 1. 手动分成几部分 2. 为每部分创建线程 3. 在适当的时候合并 并且还需要关注多个线程之间共享变量的修改问题。而 Java8 为我们提供了并行流,可以一键开启并行模式。是不是很酷呢?让我们来看看。 并行流 认识和开启并行流 ...

    文章 程序员白楠楠 2020-12-17 240浏览量

  • 为什么 GPU 会成为通用计算的宠儿?

    英伟达在 2016 年的强势崛起,GPGPU (GPU 通用计算)功不可没。 有许多原因使 2016 称得上是 GPU 之年。但事实上,除了在核心领域(深度学习、VR、自动驾驶),为什么把 GPU 用于通用计算仍然很模糊。 搞清楚 GPU 的作用,要先从 CPU 开始。大多数人对计算机 CPU...

    文章 玄学酱 2017-08-02 2718浏览量

  • BTA | 朱佩江:Pallet项目,“细腰”链通互联网价值体系

    现有的区块链从应用、智能合约、共同账本、共识网络绑死,每个链形成了独立垂直的封闭体系,当一个应用绑死在一个链上的时候,难以采用新技术,难以带着原有数据和资产迁移到新的链上。如何在不同平台的不同区块链上执行不同语言编写的智能合约?在2018年区块链技术与应用峰会BTA中国的 核心技术 分论坛,Pal...

    文章 云栖号 2018-04-18 1771浏览量

  • 数据蒋堂 | Hadoop中理论与工程的错位

    Hadoop是当前重要的大数据计算平台,它试图摒弃传统数据库的理念,重新构建一套新的大数据体系。但是,这并不是件很容易的事,在Hadoop的设计和实现中能看到一些先天不足的地方,其中一点就是把理论问题和工程问题给搞拧了。 所谓理论方法,是指试图解决问题的一般情况,设计通用的算法能适应尽量多的情况,...

    文章 技术小能手 2018-04-02 1014浏览量

  • 漫谈分布式计算框架

    如果问 mapreduce 和 spark 什么关系,或者说有什么共同属性,你可能会回答他们都是大数据处理引擎。如果问 spark 与 tensorflow 呢,就可能有点迷糊,这俩关注的领域不太一样啊。但是再问 spark 与 MPI 呢?这个就更远了。虽然这样问多少有些不严谨,但是它们都有共同...

    文章 初商 2019-08-04 475浏览量

  • Serverless 在大规模数据处理的实践

    前言 当您第一次接触 Serverless 的时候,有一个不那么明显的新使用方式:与传统的基于服务器的方法相比,Serverless 服务平台可以使您的应用快速水平扩展,并行处理的工作更加有效。这主要是因为 Serverless 可以不必为闲置的资源付费,不用担心预留的资源不够。而在传统的使用范式...

    文章 创业头条-吴松 2020-07-16 77浏览量

  • 开发人员面试题目分享(来看看不一样的面试题吧)【第二弹】

    第一弹的地址在这里: 开发人员面试题目分享(来看看不一样的面试题吧)【第一弹】   直接说第二弹的题目, 这些题目都是环环相扣,由浅入深的(您看到很浅的题目,千万别笑,继续往下看)   第一排: 第一题:设计一个多对多关系的表结构,比方说一个老师有多个学生、一个学生有多个老师,一般需要几张表? 第...

    文章 xland 2015-05-14 865浏览量

  • 【分布式计算】MapReduce的替代者-Parameter Server

    首先还是要声明一下,这个文章是我在入职阿里云1个月以来,对于分布式计算的一点肤浅的认识,可能有些地方不够妥善,还请看官可以指出不足的地方,共同进步。 一.背景 随着互联网的发展,数据量的增大,很多对于数据的处理工作(例如一些推荐系统、广告推送等)都迁移到了云端,也就是分布式计算系统上。衍生...

    文章 傲海 2015-07-13 788浏览量

  • MapReduce原理与设计思想

    简单解释 MapReduce 算法 一个有趣的例子 你想数出一摞牌中有多少张黑桃。直观方式是一张一张检查并且数出有多少张是黑桃 MapReduce方法则是 给在座的所有玩家中分配这摞牌 让每个玩家数自己手中的牌有几张是黑桃然后把这个数目汇报给你 你把所有玩家告诉你的数字加起来...

    文章 wuyudong 2016-04-21 2865浏览量

  • Serverless 在大规模数据处理的实践

    作者 | 西流  阿里云技术专家 <关注阿里巴巴云原生公众号,后台回复 606 即可下载相关 PPT> 前言 当您第一次接触 Serverless 的时候,有一个不那么明显的新使用方式:与传统的基于服务器的方法相比,Serverless 服务平台可以使您的应用快速水平扩展,并行处理的工...

    文章 阿里巴巴云原生小助手 2020-06-08 336浏览量

  • [转载]聊聊Greenplum的那些事

    原文   http://dbaplus.cn/news-21-341-1.html 聊聊Greenplum的那些事 李巍 2016-04-01 14:15:00 1024   开卷有益——作者的话    有时候真的感叹人生岁月匆匆,特别是当一个IT人沉浸于某个技术领域十来年后,蓦然回首,...

    文章 德哥 2016-07-11 6921浏览量

  • Serverless 在大规模数据处理的实践

    云栖号资讯:【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来! 前言 当您第一次接触 Serverless 的时候,有一个不那么明显的新使用方式:与传统的基于服务器的方法相比,Serverless 服务平台可以使您的应用快速水平扩展,并行处理的工作更加有效。这...

    文章 云栖号资讯小哥 2020-06-10 440浏览量

  • DeepMind重磅论文:通过奖励模型,让AI按照人类意图行事

    如何让AI符合人类的意图? 这个问题是将AI系统部署到真实世界、帮助人类解决复杂问题的最大障碍之一。 DeepMind将这个问题定义为“智能体对齐问题”(agent alignment problem),并提出依赖于奖励建模,正面解决agent alignment问题的研究方向。 这篇文章基于D...

    文章 技术小能手 2018-11-23 1080浏览量

  • 为打造无人仓,菜鸟自研了一套柔性自动化技术

    马老师说,“菜鸟要全力以赴建设国家智能物流骨干网,把中国物流成本占GDP的比重降到5%以下。”在这个背景下,菜鸟研发了柔性自动化仓储系统,利用AI技术,让大量机器人在仓内协同作业,组合成易部署、易扩展、高效的全链路仓储自动化解决方案。 本次从智能拣选→智能拆垛/码垛→智能分拨全链路展示,一个智能...

    文章 技术小能手 2018-06-04 1947浏览量

  • 大数据应用之双色球算奖平台总体设计大纲篇一

    作者:张子良 版权所有,转载请注明出处 引子:双色球延期开奖,你Hold住了吗   福利彩票走进百姓生活,每期的500w大奖吸引了千万彩民的眼球和关注,备受争议的双色球延期开奖也成了争议的焦点,成为继12306之后,又一个站在风口浪尖的悲催儿。黑幕说,红会说,各种说甚嚣尘上。IT人只做技术事,至于...

    文章 胖子哥 2016-04-19 1746浏览量

  • 【独家】段路明“量子计算与人工智能”讲座精华报告(附论文、课件下载)

    量子革命的浪潮扑面而来, 不想被淘汰就看过来! ▼ 美国密歇根大学费米讲席教授 段路明特邀报告 温馨提示:本文将报告涉及的量子计算与人工智能相关概念及事件进行了梳理,可以先下载阅读以下文章(后台回复关键词“清华大数据”,限时七天下载): 1.段路明教授论文 2.《基本概念及重要人物介绍参考资料》...

    文章 云栖号 2018-05-04 1205浏览量

  • 阿里云控制台发展思路

    在2016年12月23日由云栖社区举办的云栖计算之旅第3期——前端专场沙龙中,阿里云技术专家一位给听众讲解了阿里云控制台的发展思路。分享中,他重点介绍了Fusion、One Console、Next三种解决方案,并对控制台的未来发展进行了展望。 以下内容根据现场分享和幻灯片整理而成。 ...

    文章 场景研读 2017-02-10 4177浏览量

  • 一站式超大规模计算系统GraphScope | 直播回顾

    查看精彩回放:https://developer.aliyun.com/live/245851内容简要:一、图计算的背景二、大规模图计算挑战三、一站式超大规模图计算系统GraphScope四、一站式、开发便捷、极致性能五、从一个demo看端到端的解决实际问题六、持续发力...

    文章 开发者小助手 2021-01-12 377浏览量

1 2 3 4 ... 23 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT