网易首页 > 数码频道 > 正文

开发漫谈:S4不是F4 分布式流计算应用广

0
分享至

S4是什么鬼?不是F4才风靡全国吗?

殊不知,这S4在IT圈早已经是炙手可热的存在,受欢迎程度绝不亚于当年的F4。好吧,其实不能这么比。

S4的出现还要归功于互联网的快速发展,从最初的web1.0时代,到后来的web2.0时代,再到ego net,可以说数据量在呈指数级不断上升。因为数据量不断提升,导致服务器引擎压力不断增大,如何解决服务请求峰值过高,负载过重问题呢?

首先我们需要了解一下什么是S4。

S4(简单可扩展流系统的首字母简称:Simple Scalable Streaming System)是一个受Map-Reduce模式启发的分布式流处理引擎。


开发漫谈:S4不是F4 分布式流计算应用广
S4

从S4目前的应用情况来看,谷歌、必应、雅虎都有应用,他们典型的做法是在用户查询响应中提供结构化的Web结果的同时插入基于流量的点击付费模式的文本广告。

从技术的角度讲,S4与Storm等流计算框架一样,都是分布式流数据实时与持续计算的基础。而分布式流数据实时与持续计算除了S4之外,还需要MapReduce、Dryad等全量/增量计算平台、CEP以及EDA模型、还有Pregel等图计算模型。

在大数据环境下,企业生产环境的主要需求是图最小的代价通过增加更多的机器来提高推土量的能力和在存在系统故障情况下,能够实现自动灾备同时不影响持续提供服务的能力。通过负载分流,我们可以实现系统处理速度赶上事件流量,或者通过降级,实现关键业务顺利运转。这种降级的方式也在微信红包高峰期曾被采用。

实际上,S4的存在就是为大数据而服务。而无论是分布式流计算平台,还是分布式架构都随着大数据的快速成长,随着数据请求和数据量的增长,得到了越来越多的应用。

相关推荐
热点推荐

刚入圈,她就拼命模仿杨颖,不尴尬吗?

美美娱乐
2021-04-11 21:13:26

警惕华尔街:国际大宗商品市场充满“套路”

中国经济周刊
2021-04-11 10:10:16

我31岁,老婆28岁,她为了六旬大叔把我绿了

我是木子李
2021-04-09 00:47:32

农妇路遇弃婴,襁褓里包着一封信和一沓钱,她拿走了钱后肠子悔青

百晓失东南
2021-04-11 10:25:34

人世间张丽君去世一年,老公再娶,孩子过继:家里的喜字还没擦掉

明星八卦club
2021-04-10 14:59:01

刚刚!国家卫健委公布,新冠疫苗接种新指示

五彩斑斓的世界
2021-04-12 03:24:55

“中国疫苗保护率低?” 中国疾控中心主任高福独家回应媒体误读

环球时报新闻
2021-04-11 19:24:24

辽宁舰锐不可当!美舰在南海遭耻辱一幕,日澳感慨:20年来第一次

大俞说
2021-04-12 01:17:43

户籍政策有变:由城镇户口迁回农村,只要满足“这个”条件

事故之我见
2021-04-11 22:06:12

我国唯一高考750分的女状元,从清华毕业后,却让母校和祖国失望

学霸有话说
2021-04-11 19:21:06

美国断供EDA,破解EDA需要100年?

楠茵爱娱乐
2021-04-11 08:21:48

杨鸣不会轻易放人!25岁天才预定辽篮顶薪合同,与女友好事将近

杂文君
2021-04-11 14:01:02

一个女人可以憋多久没男朋友,看完你就懂了

夏天雨雪
2021-04-10 09:50:09

丈夫假扮男闺蜜半夜给妻子发信息,妻子回复:不方便,明天去你家

晚情的休闲时光
2021-04-10 15:53:19

医生相告:高血脂的“加速器”是这4种食物,生活中要注意

生活大火锅
2021-04-11 23:08:28

大衣哥或受牢狱之灾?蒋大为撂下一番鄙夷,于文华不再沉默揭老底

娱人为乐
2021-04-09 04:20:23

“有性病,傍富婆”当红小鲜肉被曝:私生活混乱不堪!

不二表姐
2021-04-10 20:38:13

台军罹难飞行员罗尚桦告别式追思影片用大陆歌曲,绿媒炒作

mx八卦城
2021-04-11 22:09:23

菲利普亲王逝世后,上热搜的不是哈里的回归,而是孙女的感人一幕

推她
2021-04-11 09:05:43

轮到美国被“卡脖子”,中国打响反击战 按下终止键 美企损失惨重

日月军武V
2021-04-11 17:13:06
2021-04-12 05:17:08

头条要闻

青岛教师招聘 一次堂而皇之的泄题

头条要闻

青岛教师招聘 一次堂而皇之的泄题

体育要闻

提气!曼联连轰3球逆转热刺 卡瓦尼鱼跃

娱乐要闻

刘诗诗穿薄荷绿裙秀香肩 温柔清新

财经要闻

科技要闻

小米决定造车始末:特朗普推了雷军一把?

汽车要闻

工况续航达419km 奔腾NAT推5款网约车

态度原创

亲子
本地
时尚
教育
公开课

亲子要闻

5岁孩子看完就去马桶舀水喝!《小猪佩奇》等21部动画片被查出问题

本地新闻

致敬理想燃烧与命运突围的日子

专访王菊:人要性感,穿要大胆

教育要闻

上交硕士张迪,29岁生命戛然而止,最后一个决定叫人哽咽

公开课

冯唐:混得再差别碰这2件事,会越来越没前途

×