记录黑客技术中优秀的内容, 传播黑客文化,分享黑客技术精华

大数据技术如何改变备份和恢复的玩法

如今的分布式数据库中,为这些PT级数据弄个可靠的快照可不是件容易的事IT界都知道:动了软件栈的一部分,有很大的可能性另外一部分也不得不动。不用舍近求远,看看大数据,秒懂。首先,大数据冲击了数据库领域,开拓了“向外扩展”技术新门类。那是被诸如Hadoop、MongoDB和Cassandra的产品例证的模型,数据不再被打包进一个单独的巨大的服务器,而是分散存放在多个商品服务器上。其中的美学,当然在于灵活性:要容纳更多PT数据,只需要增加一两台廉价的机器,而不需要数出大量的钞票来将原来大象级的服务器升级成猛犸级。一切看起来如此美好,但现在,问题来了:备份和恢复咋办?Gartner副总裁戴夫·拉塞尔说:“传统备份产品无法应对超大数据量备份问题。该架构向外扩展的特性也让传统备份应用难以处理。”今天的横向扩展数据库确实包含
发布时间:2016-07-05 03:10 | 阅读:98694 | 评论:0 | 标签:牛闻牛评 大数据 数据备份

中安比特戴林博士参加中国网络安全年会后免费公开两项重要专利

2016年5月24日至26日,由CNCERT主办的“2016中国网络安全年会”在四川省成都市世纪城国际会议中心隆重举办。此次年会以“聚网络英才·筑安全生态”为主题,来自政府部门、重要信息系统、企业、行业协会、科研院所等单位以及CNCERT国际合作伙伴的代表等九百余人参加。吴建平院士、杨义先等国内信息安全顶级专家分别做了精彩演讲,为“互联网+”安全健康发展建言献策。北京中安比特科技有限公司创始人兼CEO戴林博士也受邀出席,并在会上做了题为“云计算和大数据环境下的数据安全管理”演讲,与业界精英和安全行业大伽齐聚一堂,共襄盛会。戴博士从科学研究和产业化结合的角度,对当前云计算和大数据形势下的数据安全管理问题进行了深刻分析和高度概括,并在演讲中介绍了针对新形势下数据安全问题的解决方案。戴博士指出,云计算和大数据已成为时
发布时间:2016-06-01 20:55 | 阅读:103975 | 评论:0 | 标签:厂商供稿 中安比特 云计算 大数据

迷你大数据

阅读: 17如今大数据平台,大数据分析、大数据应用已经发展得如火如荼。我们的生活,几乎被各种图片,声音,视频,文字等数据包围。你是否有过这样的困惑:什么是大数据?大数据如何改变了我们的生活?网络安全中如何使用大数据?等等。让我们慢慢揭开大数据的神秘面纱,看看透视人类心意与行为的大数据,具有哪些特点及商业、社会价值。 【什么是大数据?】最开始接触大数据时,疑惑最多的是:多大,才是大数据?1PB ?1EB?还是多少?我们当然不会从这里得到答案。因为大数据是全面、完整、系统的数据。他让我们从抽样、局部数据中解救出来,通过对大量数据的全面统计,找到数据底层蕴含的深意,为我们服务。它在生命安全、网络安全、网络营销等各方面崭露头角,并逐渐发挥着越来越大的作用。【大数据的特点?】1.不是随机样本,而是全体数据过去,
发布时间:2016-04-19 06:10 | 阅读:122979 | 评论:0 | 标签:技术分享 大数据 大数据分析 大数据平台 大数据应用

访谈:两会安保专家谈大数据与云安全

2016年全国两会于上周结束。会上,李克强总理指出要促进大数据、云计算和物联网的广泛应用,而这三个应用要想繁荣发展,无疑需要安全做为支撑。为此,安全牛联线采访了本次参与网络安全保卫工作的两位专家,一位来自政府机关的信息安全保障部门,另一位来自绿盟科技。两位专家从政府和企业两个角度探讨了大数据、云计算、物联网,以及个人隐私和安全法规等方面的问题。(注:应被采访者要求,本文并未公开安保专家的姓名)一、解决大数据应用的两个重要问题 政府安保专家:大数据技术的确有非常广阔的前景,政府不少部门,包括农业部、环保部、国土资源部等,都在做大数据的规划,但是现在有两个最重要的事情需要解决。一个是从政府的角度,即政府部门如何把手中的大数据公开出来,让企业利用政府的大数据去进行应用,创造一个新的业态,这才是大数据对政府来
发布时间:2016-03-25 00:20 | 阅读:92089 | 评论:0 | 标签:牛闻牛评 个人隐私 云安全 大数据 物联网

大数据安全分析常见问题汇总

阅读: 222大数据是时下最火热的IT行业的词汇,随之数据仓库、数据安全、数据分析、数据挖掘等等围绕大数量的商业价值的利用逐渐成为行业人士争相追捧的利润焦点。本人在与用户沟通大数据问题时经常会遇到一些问题,现将这些常见问题汇总,抛砖引玉,希望可以帮助到大家。 1. 大数据安全分析的核心目标是什么?应答:为了能够找到隐藏在数据背后的安全真相。数据之间存在着关联,传统分析无法将海量数据汇总,但是大数据技术能够应对海量数据的分析需求。通过大数据基础能够挖掘出APT攻击、内网隐秘通道、异常用户行为等安全事件。在此基础上可建设为安全决策支持系统,为安全决策提供数据支撑。2. 大数据安全分析企业级部署方案与成功案例介绍。应答:在国家电网、运营商中已经有成功的案例。通过该分析平台能够进行整体的安全态势感知,
发布时间:2016-03-16 11:30 | 阅读:100890 | 评论:0 | 标签:技术分享 大数据 大数据安全 大数据安全分析 常见问题汇总 数据仓库 数据安全 数据挖掘

数据驱动安全——实际银行案例分析

有统计数据称:银行业在开展业务过程中积累了海量高价值数据,很多银行的数据量级已经超过100TB,其中非结构化正以加速度形式积累。瀚思HanSight下一代大数据安全分析平台业务逻辑图银行业首当其冲 “以数据驱动安全”该商业银行对于信息化的建设一直走在前端,在这几年先后部署了某国外的安全信息与事件管理系统(SIEM),收集每天500G以上的网银日志和分析数十亿计条日志事件;同时也部署了Web应用防火墙(WAF),来共同保障网银系统的安全。但是,从实际的运用效果来看,运维人员发现:现阶段安全信息与事件管理系统基于传统关系型数据库,无法存储和处理每天所产生的海量日志信息,更无法进行有效的检索和分析;基于规则的Web应用防火墙在大数据安全方面也显得力不从心。鉴于此,某商业银行总行的运维人员就急需一套基于海量数据存储和处
发布时间:2016-01-23 03:45 | 阅读:103200 | 评论:0 | 标签:牛闻牛评 大数据 银行

使用Whoosh实现的社工库应用

整理电脑的时候翻出了之前用Python写的一个社工库,使用Whoosh对社工库文件按行分词建立索引,直接利用索引来查密码,返回json格式结果。‍以前收集了很多泄露的数据库,包含txt、sql、csv、html、xlsx、xls等文件类型,文件内容也是多种多样。想把这些数据处理一下做个社工库,方便以后自用。网上大多都是利用PHP+Mysql来搭建社工库,把数据分类处理一下格式,然后将格式化之后的存入数据库再进行搜索。本打算搭建一个试试,后来仔细想想放弃了。首先对这些数据进行整理是一个非常耗时的事情,还需要对不同格式的数据做相应的处理;其次数据整理后存储入数据库,数据多了,查询效率可能也不是很高,所以就放弃了。后来看到关于Whoosh的介绍,一个完全由python实现的全文搜索引擎,基础架构
发布时间:2016-01-05 04:05 | 阅读:159004 | 评论:0 | 标签:数据安全 whoosh 大数据 社工库

必柚大数据-证券客户管理和画像工具biubiz.com

必柚科技是一家新兴的金融大数据技术公司。我们致力于让金融领域的数据资源更加易用,驱动业务增长,将数据资源真正转化为企业资产。 “一客千金”是必柚科技为证券/保险/银行等金融从业人员提供的数据型移动CRM。 通过提供日常展业、自动服务、移动营销、同业社交等功能,实现客户服务的移动化,极大提高单个顾问的生产力。 此外,针对企业级合作伙伴,“一客千金”在企业现有CRM系统基础之上,提供简单的数据对接方案。通过部署这项即插即用的解决方案,金融企业可以用数据“武装”顾问,实现个性化服务,发现更多销售机会。 必柚科技的核心团队来自百度、中信建投等一流互联网和金融公司,曾为中国平安、宝洁等财富500强企业提供大数据技术和商业产品服务,具有领先的市场、技术和企业客户服务能力。 官方网址:http://www.biubiz.c
发布时间:2015-12-24 11:20 | 阅读:101919 | 评论:0 | 标签:百家 CRM 大数据 必柚

云智慧-基于大数据分析为企业用户提供应用性能管理解决方案的公司

云智慧(北京)科技有限公司创立于2009年6月,主要从事互联网基础服务产品的自主研发和销售,旗下的监控宝是国内领先的IT性能监控产品,凭借云计算等先进技术给用户带来全新的IT性能监控体验,它可以帮助用户快速了解网站的性能、可用率、用户体验、服务器性能等。 官方网址:http://www.cloudwise.com
发布时间:2015-12-23 05:20 | 阅读:92605 | 评论:0 | 标签:百家 APM 云智慧 大数据 性能

顶级技术专家讲大数据安全

鉴于线下会议的组织、交通、成本等诸多不利因素,安全牛决定改变以往技术沙龙传统的线下形式,打破地域限制,尝试在线上开办安全技术精品系列讲座的直播。安全牛只推荐有价值的干货。本次讲座的内容为“大数据安全”,主讲人为瀚思(HanSight)首席科学家 万晓川。万晓川万晓川先生主要负责瀚思前沿技术研究与核心技术架构,是核心安全分析、算法、sandbox领域以及异常检测(Anomaly Detection)和用户行为分析(User Behavior Analysis)的世界级专家,拥有该领域多项美国专利,并积极倡导将机器学习应用于信息安全。主要工作经历万晓川先生2004加入趋势科技,专注于基于机器学习的安全产品研发工作。包括病毒样本自动分类、基于指令翻译的超小型沙箱、网络流扫描设备,同时还设计了趋势科技的整个病毒分析后台
发布时间:2015-12-15 04:15 | 阅读:108105 | 评论:0 | 标签:术有专攻 信息安全 大数据 安全牛 瀚思HanSight

《网络安全体系设计》第一弹:《安全大数据平台架构设计参考》

安全牛于11月24日首次公开发布了《网络安全体系设计方法论》,旨在给企业或机构提供一个最佳实践的参考,以帮助企业真正提升对网络安全工作的认识,并在安全建设和运营中不断成长。这个方法论只是一个安全总体建设的框架,需要不断的深入、补充和完善。而安全大数据平台在未来几年是企业安全能力建设的核心,也是第一步。《网络安全体系设计方法论》中也提到,数据是安全能力的核心。企业首先就要掌握内外部的安全数据和威胁情报,再通过企业安全人员的能力提升,才能逐步提升整体的安全能力。因此,安全牛首先选择了“安全大数据”这一技术平台的架构进行了梳理和深入,并于今日发布研究成果。《安全大数据平台架构设计参考》当前网络与信息安全领域,正在面临多种挑战。一方面,企业和组织安全体系架构日趋复杂,各种类型的安全数据越来越多,随着内控与合规的深入,传
发布时间:2015-12-10 18:40 | 阅读:104272 | 评论:0 | 标签:动态 术有专攻 体系架构 大数据 网络安全

被骗好多年:原来这才是大数据

小镇水果店也用“大数据” 此时此刻,阳光明媚,在离上海市区20公里的光明镇,有一家街边的水果店,叫光明水果店。店门口一只狗懒洋洋躺着。此时村头的王老太来了,说要买橘子。张店主说:您老今天咋想到吃橘子了?老太笑着答:孙子带媳妇从城里回来看俺。老张立马说:您看俺家这新疆梨不错,现在姑娘都爱吃。又说,姑娘都爱吃这草莓,还美容哩。 最后,节省的老太,花了五倍于原计划的钱,买了三种水果。 老张没念过大学,没看过任何关于大数据的书,甚至不知道啥是大数据,但是,在他的脑子里,有全小镇所有顾客的地理位置,年龄,购物习惯,性格及其他背景信息。同时,他能提供有效的客服和客户关系管理,从而提高了他的客单价。 当然,这个模式已经存在了上千年。 从近代工业时代开始,以资本,大规模生产新模式生产着大规模标准品,满足着大部分人的需求,但却
发布时间:2015-11-16 17:15 | 阅读:116409 | 评论:0 | 标签:圈内纪实 安全播报 大数据

这家公司专做大数据安全

10月29日,安全牛小编参加了瀚思科技(HanSight)召开的媒体见面会。瀚思科技CEO高瀚昭与联合创始人董昕出席发布会,这家2014年才成立的初创企业,首次通过媒体正式露面。 对于一个科技领域的初创公司而言,好的市场定位,是一切的基础。“瀚思现在的目标用户,是对企业信息化依赖程度大,对安全方面愿意有较大投入,且有自己安全理念的大型企业。”瀚思认为,现在的大数据安全分析平台产品,除了启明星辰主打新一代SOC的“泰和”之外,在国内“再无”明显竞争对手。这是一块较为空白,尚未形成多方竞争更提不上垄断的市场,因此瀚思科技可以说占有很大的先机。既然是大数据,那么海量数据的采集便是第一步。作为一个定位为做软件的公司,瀚思虽然有自己的日志和网络流量数据采集器,但更专注于聚类算法的研发和性能提升。并通过与客户和网
发布时间:2015-10-31 01:40 | 阅读:113270 | 评论:0 | 标签:动态 信息安全 大数据 瀚思科技

腾讯防刷负责人:基于用户画像大数据的电商防刷架构

本文由颜国平在高可用架构群所做的分享整理,转载请注明高可用架构公众号ArchNotes。 颜国平,腾讯云-天御系统研发负责人。 一直负责腾讯自有验证码、业务安全、防刷、账号安全等研发工作。 内部支持的产品(游戏、电商、腾讯投资的O2O企业)非常广泛。 在业务安全领域项目经验丰富,并且具备深度学习、大数据架构搭建等实战经验。 一、背景介绍 最近1~2年电商行业飞速发展,各种创业公司犹如雨后春笋大量涌现,商家通过各种活动形式的补贴来获取用户、培养用户的消费习惯。 但任何一件事情都具有两面性,高额的补贴、优惠同时了也催生了“羊毛党”。 “羊毛党”的行为距离欺诈只有一步之遥,他们的存在严重破环了活动的目的,侵占了活动的资源,使得正常的用户享受不到活动的直接好处。 今天主要分享下腾讯自己是如何通过大数据、用户画像
发布时间:2015-10-30 08:00 | 阅读:133908 | 评论:0 | 标签:安全 大数据

极光推送CTO黄鑫:大数据时代,数据与信息安全如何完美平衡?

随着互联网技术及其应用的发展,以大数据为代表的数据密集型技术将成为新时代技术变革的基础。但与此同时,数据的进一步集中和数据量的增加,使海量数据的安全防护面临巨大挑战,大数据在搜集、存储、使用等环节中仍面临着许多信息安全风险问题。大数据时代下,开发者该如何解决制约其发展的信息安全问题呢? 极光推送CTO兼首席科学家黄鑫分享了自己对信息安全的一些看法,并就数据分析与用户隐私的完美平衡进行了详细阐述。 谈到信息安全时,黄鑫首先表达了自己眼中的信息安全概念,并把信息概念分成三大类:一是信息层面安全,学校中的信息安全专业,主要致力于通信加密,密码加固等传统的安全领域;二是用户层面的信息安全,也就是说用户把信息存储到了你的服务器上,你要怎么样保证用户的隐私不受侵犯;三是架构层面的信息安全,简而言之,就是如何保证信息不丢。
发布时间:2015-10-22 19:40 | 阅读:73611 | 评论:0 | 标签:信息安全 大数据

大数据——下一代安全引擎

互联网的繁荣发展,移动设备的日渐普及,云计算的逐一落地,数据呈现海量增长的趋势,而随之而来对这些数据带来的威胁也不期而至。2014年3月22日乌云平台披露:携程将用于处理用户支付的服务接口开启了调试功能,使所有向银行验证持卡所有者接口传输的数据包均直接保存在本地服务器。同时因为保存支付日志的服务器未做校严格的基线安全配置,存在目录遍历漏洞,导致所有支付过程中的调试信息可被任意骇客读取。索尼影业2014年11月24日被黑客入侵,内部的财务文档、员工信息,甚至未上映的影片和内部往来邮件均被曝光,影片“刺杀金正恩” 被迫下线。2014年12月25日,有超过13万条12306用户信息遭泄露,内容包括用户的明文密码、身份证号码、电子邮箱、手机号码等。摩根大通8月份的黑客入侵事件造成了7600万个个人账户和700万个小企业
发布时间:2015-10-15 21:40 | 阅读:84907 | 评论:0 | 标签:牛观点 大数据 机器学习 瀚思

公告

九层之台,起于累土;黑客之术,始于阅读

推广

工具

标签云

本页关键词