迪普科技参加第六届全国网络安全等级保护技术大会

４．２实验结果　统计所需时间提高９５＇ｇ，．Ｓｐ　ｒｋ统计所需时　提离８８９４，，性能　将统计数据设　为１　Ｘ　１（）×１（１×１（）　条升　进行实验，通　过小时义件　文件、同史件进行复杂炎Ｈ天统计出各省登求　差片为７％　结果’兑明　敬牲　急剧增长的情况下，采ｊ１］ｓｐａｒｋ　ｃＩＬＭａｐｒｅｄｕｃｅ统计效牢延Ｉ　教拂　史矗败　、　，任这种　况Ｆ．Ｓｐａｒｋ处耻人　次数　、住多　实验叶】，逐渐增加统计记录数．直剑统计数捌　量达１×１（）　ｘ　１×１ｆ　１×１×１（１“，以此测试　｝　不Ｍ的数据　卜，　ＭａＤｒｅｄ　ｃｅ雨ＩＳｐａｒｋＳ｝￣ｌＪ统…ｔ　ｌｊ结果所　ｔｔ，Ｊ＇ｎｊ　Ｊ．具体女¨　９昕　团结束语　人数据技术的　奠个问题分十斤订皂够　舀似　什１　的曩　仝数　进仃综合分析．从ｌｆｌＪ　升玄个，＼忻ｌ１０　矾　・．挖川…　隐哦　｜】ｌ　ｔ．制犬忿丧缘　０支令　Ｊ题及泔　爻拿　险　佑　（Ａｔｉｌｔ　数据架构．　．不　叮以　Ｉ『Ｉ，　１于数据－ＩＩ　的增加，Ｍａｐｒｅｄｕｃｅ所需要的统　时间小断ｌ　涨．数据量的急剧增长给整个统计性能带束舣人　的影响，表现为图９中较大斜率曲线的变化趋势．　．Ｓｐａｒｋ对ｌＦ数据最的增长，所需的统￣ｆ时间变化幅度比　较小，性能稳定快速。　不同的统计数据卜，采用Ｍ　ａＰ　ｒｅｄｕ　Ｃ　ｅ所需的统计　时川远远人ｆ采用ＳＰ　ａ　ｒｋ所需的统计叫　。当统计数　为　…兮　ｖ－ｆ，１ｑ　４－ｂｔ］：ｌ吩数据　遭仃数州　久Ｉ　ｒ数　处列！奴率及安个数　处　效能　、　参考文献　…ＺｈＵｉｅ　Ｈ，Ｙｕｊｉｅ　ｚ．Ｓｐａｒｋ：Ａ　Ｂｉｇ　Ｄａｔａ　Ｐｒｏｃｅｓｓｉｎｇ　Ｐｌａｔｆｏｒｍ　Ｂａｓｅｄ　０１３　ｂｌｅｍｏｒｙ　Ｃｏｍｐｕ￣ｉｎｇ［Ｃ］．Ｐｒｏｃｅｅｄｉｎｇｓ　ｏｆ　ｔｈｅ　Ｓｙｍｐｏｓｉｕｍ　ｏｎ　Ｐａｒａｌｌｅｌ　Ａｒｃｈｉｔｅｃｔｕｒｅｓ，Ａｌｇｏｒｉｔｈｍｓ　ａｎｄ　Ｐｒｏｇｒａｍｍｉｎｇ　Ｎａｎｊｉｎｇ，Ｃｈｉｎａ：ＩＥＥＥ　Ｃｏｎｆｅｒｅｎｃｅ　Ｐｕｂｌｉｃａｔｉｏｎｓ，２０Ｉ　５　１（）×１（１　×１（）“时，ＭａＰ　ｒｅｄｕｃ。处理得…统汁结果所需时间为　３ｍｉｎ，使Ｊ】ＪＳｐａｒｋ进行统计　Ｆｌ　　ｉｔ１．７ｒａｉｎ，性能提升４６％；当统　讣数捌　达剑１ｏ　×１０　×１（１　时，Ｍａｐｒｅｄ１．１Ｃｅ处理得出统计结　果所需时ｌ＂ｌｈＪ为２３ｎａｉｎ，使ｊ｝］Ｓｐａｒｋ进行统汁　升６３＂／．　９ｎａｉｎ．　ＩＣｆｉＬ捉　ｆ２］Ｘｉｕｑｉｎ　Ｌ，Ｐｅｎｇ　Ｗ　Ｂｉｎ　Ｗ．Ｌｏｇ　Ａｎａｌｙｓｉｓ　ｉｎ　Ｃｌｏｕｄ　Ｃｏｍｐｕｔｉｎｇ　Ｅｎｖｉｒｏｎｍｅｎｔ　ｗｉｔｈ　Ｈａｄｏｏｐ　ａｎｄ　Ｓｐａｒｋ［Ｃ］Ｐｒｏｃｅｅｄｉｎｇｓ　ｏｆ　ｔｈｅ　５ｔｈ　Ｉｎｔｅｒｎａｔｉｏｎａｌ　Ｃｏｎｆｅｒｅｎｃｅ　ｏｎ　Ｂｒｏａｄｂａｎｄ　Ｎｅｔｗｏｒｋ＆ＭｕＩｔｉ￣ｎｅｄｉａ　Ｔｅｃｈｎｏｌｏｇｙ．Ｇｕｉｌｎｉ　Ｃｈｉｎａ：ＩＥＥＥ　Ｃｏｎｆｅｒｅｎｃｅ　Ｐｕｂｌｉｃａｔｉｏｎｓ　２０　１　３　×Ｓｈｉ，Ｍ　Ｃｈｅｎ　Ｌ　Ｈｅ．ｅｔ　ａｌ　Ｍａｍｍｏｔｈ：Ｇｅａｒｉｎｇ　Ｈａｄｏｏｐ　Ｔｏｗａｒｄｓ　Ｍｅｍｏｒｙ　比较数　量的增长幅度埘统计性能的影响，选择统　数据　为１ｆ１　ｘ　１０　ｘ　１０　、１｛）Ｘ　１０１　ｘ】（）　、１（）　ｘ　１０　×１１）　的测试　数据，Ｍａｐ　ｒｅｍ・ｃｅ和ｓｐａｒｋ　小同数据增长比例的情况下，统　计ｉ：ｔ４的结果　表４。当统计数从１０×１０　ｘ　１（１ｆ１到１０×１（）　×１（１“变　化时，数堋十ｒ｝Ｉ　增长率为９（）％．Ｍａｐｒｅｄｕｃｅ统　所需时ｆ【ｊＪ提高　ｌｎｔｅｅｓＪ　ｖｅ　Ｍａｐｒｅｄｕｃｅ　Ａｐｐｌｉｃａｔｉｏｎｓ［Ｊ］ＩＥＥＥ　ＴＰａｎＳ＆ｃｔｉｏｎｓ　ｏｎ　Ｐａｒａｌｌｅｌ　ａｎｄ　Ｄｉ　ｓｔｒｉｂｕｔｅｄ　Ｓｙｓｔｅｍｓ　２０１　４，２６（８）　［４］Ｋａｌａ　Ｋａｒｕｎ．Ａ，ＣｈＪｔｈａｒａｎｊａｎ　Ｋ　Ａ　Ｐｏｅｖｉｅｗ　ｏｎ　Ｈａｄｏｏ　ＨＤＦＳ　ｉｏｆｒａｓｔｒｕｃｔｏｒｅ　６６ｆ￣，，ＳＰａｒｋ统计所需时　提　４１％，性能莲　为２５％；当统　汁数据　从１（１×１（）×１　到１（１　Ｘ　１ｆ）　×１ｆ）　变化【１、　ｊ．Ｍａｒｒｅｄｔｌｃｃ　Ｅｘｔｅｎｓｉｏｎｓ［Ｊ］．ＩＥＥＥ　ｌｎｆｏｒｍａｔｍ＆ｃｏｍｍ　ｃａｔ｝。ｎ　Ｔｅｃｈｎｏｌｏｇｉｅｓ　２０　１　５Ｉ皿　迪普科技亮相２０１７国家网络安全宣传周　国家网络安全宣传周在金秋九月如约而至，９月　迪普科技还推出了安全威胁态势感知平台、安全攻防实验　室、安全广域网等产品和解决方案，满足用户在安全大数　据运用、广域网安全、安全人才培养等方面的需求。　１６—２０日，２０１７国家网络安全宣传周于上海召开，作为　关系到民众、企业、政府方方面面以及国家未来的一项　重要年度活动。本届网络安全宣传周云集业内众多网络　安全企业，并开设“网络安全技术高峰论坛”及各类分　论坛等平台．各类专家学者在会上分析当下安全形势并　提出治理建议。迪普科技作为业内技术领先的网络安全　企业，继续响应困家“网络安全为人民”的号召，全面　展示安全威胁态势感知平台、云安全、自安全视频监控　专网等一系列产品及解决方案。　迪普科技凭借强劲的创新力量，已经成为国家网络安　全事业中的主力军。在云安全方面，迪普科技云数据中心　迪普科技参加第六届全国网络安全等级保护　技术大会　９月２２日，　“第六届全国网络安全等级保护技术大　会”在南京召开，本次大会旨在构建国家网络安全等级　保护制度体系。作为国家信息安全建设的一员，迪普科　技长期关注国家政策法规，在国家等级保护制度的发展　与落实过程中，始终积极参与等保体系的推进、落地工　作。未来，迪普科技还将继续参与网络安全工作，积极　与各类安全组织合作，提升、创新整体安全综合防御能　安全解决方案基于专业高性能硬件打造安全云，通过硬件　虚拟化技术将安全防护能力提供给云租户。并在政府、金　融、教育等行业私有云市场得到大量应用。在此基础上，　力。为构建“侦攻防管控”一体化的网络安全综合防控　体系不断努力，在保护关键信息基础设施安全、培养网　络安全人才、完善教育训练体系等方面持续发力。　８８　ＴＥＵ　ＣｏＭＭＵＮｌＣＡＴＩｏＮＳＴＥＣＨＮｏ■０ＧＹ／２０１　７・９