记录黑客技术中优秀的内容,传播黑客文化,分享黑客技术精华

内存计算系统系列成果之八:Gengar:基于RDMA的分布式异构内存池

非易失性内存具有存储密度高、低功耗、字节可寻址、接近DRAM的读写性能等优良特性,为数据中心应用构建大型分布式共享内存系统提供了可能。尽管有许多关于在单节点中使用NVM的研究,但在分布式数据中心环境中如何有效利用NVM仍然存在挑战。我们提出了支持RDMA的分布式异构内存池Gengar,使应用程序可通过简单的API对全局内存空间中的远端NVM和DRAM进行高效利用。Gengar在应用端监控单边RDMA原语来识别异构内存池中经常访问的热点数据,并将其缓存在分布式DRAM缓冲区中。我们重新设计了RDMA通信协议和原语,通过代理机制在可靠连接情况下实现了异步RDMA写操作,从而减少写延迟。
发布时间:2022-01-20 12:22 | 阅读:1884 | 评论:0 | 标签:内存 分布式

社区分享|沐瞳游戏通过JumpServer管控多项目分布式资产

编者注:本文作者为沐瞳科技Stian。上海沐瞳科技有限公司(MOONTON)成立于2014年,公司总部位于上海,在印尼、新加坡等海外多地设有分支机构。上海沐瞳科技有限公司(以下简称为沐瞳科技)立足于全球化游戏研发与发行,已成功推出多款在海外拥有高知名度的移动游戏产品,是拥有最多海外玩家的中国游戏公司之一。目前,沐瞳科技已经与全球30多个国家的政府机构、电竞协会、职业战队建立了长期合作伙伴关系。公司旗下的Mobile Legends更是成为海外最大MOBA(Multiplayer Online Battle Arena,多人在线战术竞技游戏)。
发布时间:2022-01-11 16:48 | 阅读:8959 | 评论:0 | 标签:堡垒机 游戏行业 飞致云 分布式

混沌挑战,腾云而起——中国信通院发布首批分布式系统稳定性评估成果

2021年12月7日,由中国信息通信研究院(以下简称“中国信通院”)和混沌工程实验室联合举办的混沌工程技术沙龙——金融行业精品专场在北京召开。会上发布了分布式系统稳定性评估标准体系,并公布了首批消息队列稳定性评估结果,来自阿里云、华为云、腾讯云的三款消息队列云服务在单项故障注入测试(服务器宕机、服务发现故障、服务暂停、网络故障、CPU负载高、内存负载高)和综合故障注入测试中,消息服务并未受到明显影响,服务SLA达到可信云消息队列服务稳定性先进级能力要求。中国信通院云计算与大数据研究所所长何宝宏为获奖企业颁发可信云证书。
发布时间:2021-12-14 09:34 | 阅读:16512 | 评论:0 | 标签: 分布式 中国

迈进分布式云时代,天翼云4.0如何护卫边缘安全?

12月10日,由中国通信企业协会、中国信息通信研究院主办的2021年(第十一届)电信和互联网行业网络安全年会在武汉举办。会上,天翼云科技有限公司研发三部安全专家林顺东在本次年会上对天翼云分布式边缘安全作了精彩分享。分布式云正在成为企业上云的新范式。Gartner预测,到2025年超过50%的组织将在其选择的地点使用分布式云,超过75%的数据将在边缘侧处理。尤其是进入2021年,各大云服务厂商纷纷宣布升级为分布式云,而天翼云4.0也成为第一朵宣布全面升级的运营商云。
发布时间:2021-12-13 14:08 | 阅读:13549 | 评论:0 | 标签:分布式猜解 分布式计算 安全 分布式

工业物联网蓝牙安全及基于标识算法的分布式鉴权技术研究

#网安智库 284个内容 摘 要蓝牙是当下流行的短距离通信技术,蓝牙标准中的配对机制可以在主从设备之间快速建立连接,连接建立以后可以避免第三方的窃听和篡改。为了解决蓝牙技术在工业物联网中的安全应用问题,首先分析了蓝牙协议的安全机制,其次分析工业物联网应用场景对蓝牙通信的安全需求,并研究现有蓝牙安全机制与工业物联网蓝牙需求的差异。最后提出了适用于工业物联网终端的蓝牙安全方案,可以实现基于合法身份的、分布式的鉴权及接入控制功能。
发布时间:2021-11-29 17:42 | 阅读:17852 | 评论:0 | 标签:物联网 安全 工业 分布式

分布式拒绝服务(DDoS)攻击原理介绍和防范措施

什么是DDoS攻击DDoS攻击,指借助于C/S技术,将多个计算机联合起来作为攻击平台,对一个或多个目标发动DoS攻击,从而成倍地提高拒绝服务攻击的威力。通常,攻击者将DDoS主控程序安装在其所拥有的计算机,或使用通过非法手段获取到的帐号,将DDoS主控程序安装在其他已沦陷的计算机上,并将DDoS代理程序安装在网络上的许多已沦陷的计算机上。当攻击者意图对被害业务系统发起DDoS攻击时,会通过DDoS主控程序与大量DDoS代理程序通讯。DDoS代理程序在收到DDoS主控程序的指令后就会立即发动DDoS攻击,从而造成被害业务系统网络几近瘫痪,甚至于出现宕机。
发布时间:2021-11-19 13:05 | 阅读:19884 | 评论:0 | 标签:ddos 攻击 分布式

根据警报,勒索软件团伙正在发起分布式拒绝服务(DDoS)攻击,作为其勒索活动的一部分。

美国联邦调查局(FBI)发出了一个闪光警报,警告私营企业HelloKitty勒索软件团伙(又名FiveHands)的一个新特征。根据警报,勒索软件团伙正在发起分布式拒绝服务(DDoS)攻击,作为其勒索活动的一部分。“Hello Kitty/FiveHands参与者通常使用双重勒索技术对受害者施压。在某些情况下,如果受害者反应不快或不支付赎金,威胁参与者将在受害者公司面向公众的网站上发起分布式拒绝服务(DDoS)攻击。”闪光警报指出。如果受害者拒绝支付赎金,勒索软件团伙就会用DDoS攻击攻击他们的网站。
发布时间:2021-11-02 12:26 | 阅读:23180 | 评论:0 | 标签:ddos 攻击 勒索 分布式

2021年毕业生成果展示系列 之二 分布式系统研究室

回首过去,我们思绪纷飞,感慨万千;立足今日,我们胸有成竹,信心百倍;展望未来,我们引吭高歌,一路欢笑。今天的毕业生成果展示系列将向大家介绍“分布式系统研究室”的17名毕业生。01 戴小海论文标题:可扩展的区块链存储机制研究论文发表在ICDCS 2018、ICDCS 2019、ICDCS 2020国际会议上。论文被IEEE Internet of Things Journal杂志录用。
发布时间:2021-09-30 14:58 | 阅读:42704 | 评论:0 | 标签:分布式

分布式缓存的选择及问题

现如今,缓存系统的应用非常广泛,能够用来提高并发数、数据吞吐量,提高快速响应能力。那么当数据量达到一定程度,单机环境可能就显得有些力不从心了,就需要一个分布式缓存系统。分布式缓存能够处理大量的动态数据,因此比较适合应用在Web 2.0时代中的社交网站等需要由用户生成内容的场景。缓存系统的选择缓存分类如上图所示,首先缓存大致可以分为四大类:CDN 缓存:CDN 即内容分发网络,CDN 边缘节点将数据缓存起来。反向代理缓存:如 Nginx 的缓存。本地缓存:代表的有 EhCache 和 Guava Cache。分布式缓存:各缓存系统。
发布时间:2021-09-05 11:03 | 阅读:37142 | 评论:0 | 标签:分布式

OrbitalDump:功能强大的多线程分布式SSH爆破工具

关于OrbitalDumpOrbitalDump是一款功能强大的多线程分布式SSH爆破工具,该工具基于纯Python开发,可以帮助广大研究人员分析SSH相关的安全问题。工作机制当该脚本在没有使用“—proxies”参数执行的时候,它将直接执行多线程SSH爆破攻击脚本。如果添加了“—proxies”参数的话,该脚本将会从ProxyScrape获取大量SOCKS4代理(数千个),并通过SOCKS4代理来执行所有的暴力破解攻击,因此整个暴力破解攻击尝试并不会受到目标主机在速率方面的限制。工具安装在使用该工具前,请先确保本地主机已经安装并配置好了Python环境。
发布时间:2021-09-04 21:43 | 阅读:39346 | 评论:0 | 标签:SSH 分布式

ISC 2021云峰会热议国家级分布式安全大脑

“网络安全不是卖货的行业,最重要的使命是保护国家网络和基础设施不被攻击。我们的对手不是同行和友商,而是一群高智商的黑客以及国家级的网络战部队。因此,我们需要构建起国家级范围的分布式安全大脑,为国家的网络安全生态打造一套预警系统、反导体系。”在ISC 2021云峰会上,三六零(股票代码:601360.SH,简称360)创始人、董事长周鸿祎向全球观众表示。8月9日-8月12日,由中国互联网协会、中国网络空间安全协会、全国工商联大数据运维(网络安全)委员会、中国计算机学会、360互联网安全中心等机构大力支持的ISC 2021云峰会正式启幕。
发布时间:2021-08-11 19:57 | 阅读:39177 | 评论:0 | 标签: 安全 分布式

分布式存储的七方面问题

动机为什么是7方面的问题?虽说7面只比6面多了一面,又比8面少了1面;然而并非刻意为之。存储领域内的很多知识,可以归结于7个方面: 复制、存储引擎、事务、分析、多核、计算和编译。分布式存储什么是分布式存储呢?如果一个存储系统,不管是对象、块、文件、kv、log、olap、oltp,只要对所管理的数据做了Partitioning&Replication,不管姿势对不对,其实都可以归纳于分布式存储。分布式存储就是:Partitioning以多机scale,Replication以灾备容错。1. 复制复制是解决可用性,可扩展性和高性能的关键。
发布时间:2021-08-06 09:52 | 阅读:27980 | 评论:0 | 标签:分布式

周鸿祎ISC谈360:构建国家级分布式安全大脑

“360想完成一个梦想,也是我自己的一个初心,就是打通各地、各行业的安全大脑体系,形成威胁情报和数据的互相查询,构建起一个国家级范围的分布式安全大脑,真正提升整个国家的安全能力。”ISC大会主席、360创始人、董事长周鸿祎在第九届互联网安全大会(以下简称ISC 2021)上直言不带货,只表初心。ISC大会主席、360创始人、董事长周鸿祎在第九届互联网安全大会上发表演讲据悉,7月27日,ISC大会以“网络安全需要新战法,网络安全需要新框架”为主题在北京隆重开幕。
发布时间:2021-07-30 11:09 | 阅读:47046 | 评论:0 | 标签:安全 分布式 360

分布式事务最经典的七种解决方案

#架构 4 #分布式 1 #分布式事务 1 点击下方“IT牧场”,选择“设为星标”随着业务的快速发展、业务复杂度越来越高,几乎每个公司的系统都会从单体走向分布式,特别是转向微服务架构。随之而来就必然遇到分布式事务这个难题,这篇文章总结了分布式事务最经典的解决方案,分享给大家。◆  基础理论在讲解具体方案之前,我们先了解一下分布式事务所涉及到的基础理论知识。我们拿转账作为例子,A需要转100元给B,那么需要给A的余额-100元,给B的余额+100元,整个转账要保证,A-100和B+100同时成功,或者同时失败。看看在各种场景下,是如何解决这个问题的。
发布时间:2021-07-30 00:46 | 阅读:38944 | 评论:0 | 标签:分布式

分布式系统中的一致性模型

最近看到的一篇超棒的关于分布式系统中强一致性模型的blog,实在没有不分享的道理。最近比较闲,所以干脆把它翻译了,一是为了精读,二是为了更友好地分享。其中会插入一些乱七八糟的个人补充,评论区的精彩讨论也会有选择性的翻译。原文在这:https://aphyr.com/posts/313-strong-consistency-models网络分区是大概率会发生的。交换机,网络接口控制器(NIC,Network Interface Controller),主机硬件,操作系统,硬盘,虚拟机,语言运行时,更不用说程序语义本身,所有的这些将导致我们的消息可能会延迟,被丢弃,重复或被重新排序。
发布时间:2021-07-28 09:09 | 阅读:40682 | 评论:0 | 标签:分布式

ISC 2021 | 周鸿祎ISC发布360战略目标:构建国家级的分布式安全大脑

扫码订阅《中国信息安全》杂志权威刊物 重要平台 关键渠道邮发代号 2-786“360想完成一个梦想,也是我自己的一个初心,就是打通各地、各行业的安全大脑体系,形成威胁情报和数据的互相查询,构建起一个国家级范围的分布式安全大脑,真正提升整个国家的安全能力。”ISC大会主席、360创始人、董事长周鸿祎在第九届互联网安全大会(以下简称ISC 2021)上直言不带货,只表初心。ISC大会主席、360创始人、董事长周鸿祎在第九届互联网安全大会上发表演讲7月27日,ISC大会以“网络安全需要新战法,网络安全需要新框架”为主题在北京隆重开幕。
发布时间:2021-07-27 22:33 | 阅读:34420 | 评论:0 | 标签:安全 分布式 360

共治全球分布式拒绝服务 (DDoS) 攻击需要良策

作者 | 阿图斯·拉夫列诺夫(Arturs Lavrenovs)北约 CCDCOE,爱沙尼亚塔林(Arturs.Lavrenovs@ccdcoe.org)翻译 | 国家互联网应急中心 张冰按语:译介了位于爱沙尼亚塔林的北约协同网络防御卓越中心(NATO CCDCOE)专家阿图斯·拉夫列诺夫的文章。文章认为,全球分布式拒绝服务攻击(DDoS)日益普遍,攻击规模和带宽屡创新高,对全球互联网安全运行带来巨大威胁。传统的应对DDoS攻击的思路越来越难以奏效,必须引入更多参与方,齐抓共管共同促进对全球DDoS攻击的治理。
发布时间:2021-07-27 19:49 | 阅读:47376 | 评论:0 | 标签:ddos 攻击 分布式

原创 | 【译文】共治全球分布式拒绝服务攻击需要良策

作者 | 阿图斯·拉夫列诺夫          (Arturs Lavrenovs)         北约 CCDCOE,爱?
发布时间:2021-07-27 17:17 | 阅读:41774 | 评论:0 | 标签:攻击 分布式

周鸿祎ISC发布360战略目标:构建国家级的分布式安全大脑

#ISC 1 #安全大脑 1 周鸿祎ISC震撼发声:以“作战、对抗、攻防思维”应对网络新威胁★★★不带货的周鸿祎  ISC大会呼吁网络安全新战法★★★如何捕获高级黑客组织   周鸿祎ISC揭秘360云端安全大脑“360想完成一个梦想,也是我自己的一个初心,就是打通各地、各行业的安全大脑体系,形成威胁情报和数据的互相查询,构建起一个国家级范围的分布式安全大脑,真正提升整个国家的安全能力。”ISC大会主席、360创始人、董事长周鸿祎在第九届互联网安全大会(以下简称ISC 2021)上直言不带货,只表初心。
发布时间:2021-07-27 17:17 | 阅读:42285 | 评论:0 | 标签:安全 分布式 360

送8本《构建可靠的大型分布式系统》

查看文章尾部参与赠书活动周志明老师的《深入理解Java虚拟机》想必大家都不陌生,这本书凭借着生动易懂的文风、系统实用的知识点、成为原创计算机图书经典中的经典。周老师凭借一己之力拉高了 Java 开发者内功水平,把 JVM 带到了初级面试题环节。如今周志明老师的开源项目《凤凰架构》纸质书已正式出版,这是一本从架构视角讲解如何构建大型分布式系统的著作,是作者多年架构和研发经验的总结,相信本书必将成为原创计算机图书领域的又一座丰碑。小编在这里斗胆预测:以后的面试题中关于架构方向的问题答案估计都会在这本书中找到。。。
发布时间:2021-07-23 13:38 | 阅读:40018 | 评论:0 | 标签:分布式

用 Go 轻松完成一个 TCC 分布式事务,保姆级教程

什么是 TCC,TCC 是 Try、Confirm、Cancel 三个词语的缩写,最早是由 Pat Helland 于 2007 年发表的一篇名为《Life beyond Distributed Transactions:an Apostate’s Opinion》的论文提出。TCC 组成TCC 分为 3 个阶段Try 阶段:尝试执行,完成所有业务检查(一致性), 预留必须业务资源(准隔离性)Confirm 阶段:如果所有分支的 Try 都成功了,则走到 Confirm 阶段。
发布时间:2021-07-21 20:28 | 阅读:38608 | 评论:0 | 标签:分布式

深度剖析:Redis分布式锁到底安全吗?看完这篇文章彻底懂了!

水滴与银弹 Author Magic Kaito 水滴与银弹 给你呈现不一样的技术视角。 来自公众号:水滴与银弹阅读本文大约需要 20 分钟。大家好,我是 Kaito。这篇文章我想和你聊一聊,关于 Redis 分布式锁的「安全性」问题。Redis 分布式锁的话题,很多文章已经写烂了,我为什么还要写这篇文章呢?因为我发现网上 99% 的文章,并没有把这个问题真正讲清楚。导致很多读者看了很多文章,依旧云里雾里。
发布时间:2021-07-09 15:10 | 阅读:23889 | 评论:0 | 标签:安全 分布式

网安信:从“滴滴出行”APP被勒令下架联想到IPFS分布式存储技术的数据安全

7月2日,国家网信办发布的一则公告引起社会各界广泛关注与讨论,公告的大致内容是为防范国家数据安全风险,维护国家安全,保障公共利益,依据《中华人民共和国国家安全法》《中华人民共和国网络安全法》,网络安全审查办公室按照《网络安全审查办法》,对“滴滴出行”实施网络安全审查。为配合网络安全审查工作,防范风险扩大,审查期间“滴滴出行”停止新用户注册。7月4日,国家网信办再次发布通告:根据举报,经检测核实,“滴滴出行”APP存在严重违法违规收集使用个人信息问题。很显然,这一通告进一步说明了“滴滴出行"被勒令下架接受审查的真实原因。
发布时间:2021-07-07 13:16 | 阅读:68362 | 评论:0 | 标签:app 数据安全 安全 分布式 网安

【技术角度科普】鸿蒙的“分布式”究竟是个啥情况?

"NightTeam",一个值得加星标的公众号。随着鸿蒙的发布,华为又在各个交流平台上引起了一波扯皮,但看起来直到现在仍然有挺多人对鸿蒙的“分布式”了解得并不多啊,扯皮都扯不到点上...所以...我来分享一下我了解到的东西以及我的理解吧,希望能让大家对鸿蒙的了解更清晰一些,做到既不要因为营销而看不到鸿蒙好的那一面,也不要因为鸿蒙好的那一面而无脑吹鸿蒙或觉得非华为不可、其他厂商和个人都是垃圾,用理性、客观的态度去看待这个(或者说是“这些”?)新生的事物。如果内容中有啥错漏,欢迎友善交流,杠精勿扰。
发布时间:2021-06-06 17:46 | 阅读:59515 | 评论:0 | 标签:分布式

主流分布式文件系统对比

#工具 10 #对比 1 点击下方“IT牧场”,选择“设为星标”一、概述分布式文件系统是分布式领域的一个基础应用,其中最著名的毫无疑问是 HDFS/GFS。如今该领域已经趋向于成熟,但了解它的设计要点和思想,对我们将来面临类似场景/问题时,具有借鉴意义。并且,分布式文件系统并非只有 HDFS/GFS 这一种形态,在它之外,还有其他形态各异、各有千秋的产品形态,对它们的了解,也对扩展我们的视野有所俾益。本文试图分析和思考,在分布式文件系统领域,我们要解决哪些问题、有些什么样的方案、以及各自的选择依据。
发布时间:2021-06-02 23:53 | 阅读:48124 | 评论:0 | 标签:分布式

EISS-2021北京站PPT | 李伟东/是德科技应用工程师(如何度量分布式混合网络的应用和安全能力?)

点击蓝字关注我们关注安世加 (asjeiss)公众号稍后获取授权PPT下载链接2021年5月14日,由安世加主办的“EISS-2021企业信息安全峰会之北京站”在北京诺金酒店成功举办。峰会以”直面信息安全挑战,创造最佳实践案例“为主题,总共吸引了近500位来自各行业的企业安全负责人,安全专家出席。本届峰会是安世加在北京连续举办的第四次峰会,大会由原先下午两个分会场增加至四个,分会场主题分别调整为安全运营专场、数据安全专场、零信任专场、开发安全专场,每个分会场诚邀资深安全负责人担任出品人,议程紧扣行业热点话题,选题方向更加明确,为与会者带来更多具有实践与借鉴意义的干货分享。
发布时间:2021-05-23 18:29 | 阅读:53514 | 评论:0 | 标签:安全 网络 分布式

详解分布式技术、AI开发平台 全球架构师峰会百度飞桨核心技术专题分享

作为近十几年人工智能最热门的研究领域之一,深度学习取得的突破进展有目共睹,甚至影响到人工智能行业整体的发展基础。4月26日,2021年ArchSummit全球架构师峰会在上海召开,百度举办“深度学习技术解读与实践”专场,多位飞桨技术专家分享了核心框架2.0、开源模型库、分布式训练技术、以及AI开发平台的技术实践经验。据了解,ArchSummit全球架构师峰会是重点面向高端技术管理者、架构师的技术会议,54%参会者拥有8年以上工作经验。会议聚焦业界强大的技术成果,展示先进技术在行业中的典型实践,以及技术在企业转型、发展中的推动作用。深度学习技术的广泛应用得益于深度学习框架的建设。
发布时间:2021-05-06 21:44 | 阅读:57970 | 评论:0 | 标签:AI 分布式

Global in在Clickhouse非分布式表查询中的使用

Clickhouse在OLAP查询场景下有显著的性能优势,但Clickhouse在大表join查询的场景下,性能表现并不是很好,因此在实际业务场景需要多表计算时,往往是通过in+子查询的方式代替join查询,以提升查询性能。 笔者在最近的业务开发中,尝试用这种方式,性能却没有想象中那么好。分析Clickhouse的查询计划,发现子查询中的语句会多次执行,且性能开销主要来自于子查询的执行,因此总体上查询耗时很长。通过网上资料查询以及本地实验,最终在查询语句中用Global in代替in解决了子查询执行多次的问题。
发布时间:2021-04-28 15:07 | 阅读:66713 | 评论:0 | 标签:分布式

分布式缓存灵魂十连,你能坚持几个?

无聊学Java Author 无聊 无聊学Java 迷失的人迷失了,相逢的人在这里相逢
发布时间:2021-04-09 13:11 | 阅读:41892 | 评论:0 | 标签:分布式

【GoCN酷Go推荐】分布式任务 + 消息队列框架 go-queue

##酷Go推荐 1个 目录1.为什么写这个库2.应用场景有哪些3.如何使用4.总结 为什么要写这个库?在开始自研 go-queue 之前,针对以下我们调研目前的开源队列方案:beanstalkdbeanstalkd 有一些特殊好用功能:支持任务 priority、延时 (delay)、超时重发 (time-to-run) 和预留 (buried),能够很好的支持分布式的后台任务和定时任务处理。如下是 beanstalkd 基本部分:job:任务单元;tube:任务队列,存储统一类型 job。
发布时间:2021-03-22 12:33 | 阅读:80939 | 评论:0 | 标签:分布式

公告

永久免费持续更新精选优质黑客技术文章Hackdig,帮你成为掌握黑客技术的英雄

求打赏·赞助·支持💖

标签云