加入收藏 | 设为首页 | 会员中心 | 我要投稿 甘孜站长网 (https://www.0836zz.com.cn/)- 运维、物联设备、数据计算、智能推荐、云管理!
当前位置: 首页 > 站长资讯 > 动态 > 正文

3个基于 SpringBoot 的图片识别处理系统送给你!

发布时间:2021-02-17 14:46:14 所属栏目:动态 来源:互联网
导读:腾讯云 Elasticsearch 被广泛应用于日志实时分析、结构化数据分析、全文检索等场景中,本文将以情景植入的方式,向大家介绍与腾讯云客户合作过程中遇到的各种典型问题,以及相应的解决思路与方法,希望与大家一同交流。 背景 因为游戏业务本身的日志数据量非

腾讯云 Elasticsearch 被广泛应用于日志实时分析、结构化数据分析、全文检索等场景中,本文将以情景植入的方式,向大家介绍与腾讯云客户合作过程中遇到的各种典型问题,以及相应的解决思路与方法,希望与大家一同交流。

背景

因为游戏业务本身的日志数据量非常大(写入峰值在 100w qps),在服务客户的几个月中,踩了不少坑,经过数次优化与调整,把客户的 ES 集群调整得比较稳定,避免了在业务高峰时客户集群的读写异常,并且降低了客户的资金成本和使用成本。

场景 1:与客户的初次交锋

解决方案架构师 A: bellen, XX 要上线一款新游戏,日志存储决定用 ELK 架构,他们决定在 XX 云和我们之间二选一,我们首先去他们公司和他们交流一下,争取拿下!

bellen: 好,随时有空!

和架构师一起前往该公司,跟负责底层组件的运维部门的负责人进行沟通。

XX 公司运维老大:不要讲你们的 PPT 了,先告诉我你们能给我们带来什么!

bellen:呃,我们有很多优势,比如可以灵活扩缩容集群,还可以一键平滑升级集群版本,并且提供有跨机房容灾的集群从而实现高可用……

XX 公司运维老大:你说的这些别的厂商也有,我就问一个问题,我们现在要存储一年的游戏日志,不能删除数据,每天就按 10TB 的数据量算,一年也得有个 3PB 多的数据,这么大的数量,都放在 SSD 云盘上,成本太高了。你们有什么方案既能够满足我们存储这么大数据量的需求,同时能够降低我们的成本吗?

bellen: 我们本身提供的有冷热模式的集群,热节点采用 SSD 云硬盘,冷节点采用 SATA 盘,采用 ES 自带的 ILM 索引生命周期管理功能,定期把较老的索引从热节点迁移到冷节点上,这样从整体上可以降低成本。另外,也可以定期把更老的索引通过 snapshot 快照备份到 COS 对象存储中,然后删除索引,这样成本就更低了。

XX 公司运维老大:存储到 COS 就是冷存储呗,我们需要查询 COS 里的数据时,还得再把数据恢复到 ES 里?这样不行,速度太慢了,业务等不了那么长时间,我们的数据不能删除,只能放在 ES 里!你们能不能给我们提供一个 API, 让老的索引数据虽然存储在 COS 里,但是通过这个 API 依然可以查询到数据,而不是先恢复到 ES, 再进行查询?



这些政策工具不仅限于美国。今年早些时候,新加坡公布了自己的Wi-Fi路由器和智能家居产品标签计划[3],这是一个令人鼓舞的迹象,表明这可能是将安全较差的物联网设备从全球市场中去除的可行方法。英国《业务守则》提供了类似的机会[4],让零售商和分销商对其销售的产品负责,为物联网制造商和服务提供商提供了13项安全准则。在2019年进行公众咨询后,英国政府探索了强制性的安全标签计划,并彻底禁止销售不符合前三大准则的产品:无默认密码、实施漏洞披露政策以及定期软件更新,并基于终止使用政策。欧洲电信标准协会(ETSI)去年以英国的工作为研究点,推出了消费者物联网安全标准,而欧盟网络安全机构则发布了其"良好做法"报告,概述了物联网的基准安全建议。澳大利亚物联网联盟提出的一项名为"信任标记"的独立认证计划[5],也是一种成熟的安全标签方案模板。


 

在大多数家庭网络和许多工业网络的核心,是“卑微的”无线路由器。也正因与此,其安全性是一项突出的问题,但是研究人员在过去15年中在路由器安全方面几乎没有取得什么进展[1],重大安全漏洞不断被发现。家庭 Wi-Fi路由器中的严重漏洞可能会为攻击者打开访问本地网络和其他连接系统的大门。

路由器就是物联网安全面临的挑战的一个示例,其问题特点是:依赖性扩大、安全实践不良,以及全球制造商无法覆盖单一司法管辖区。

在一份论文中[2],作者提出利用供应链作为解决方案的一部分。向美国消费者销售产品通常要求IoT制造商通过美国子公司或更常见的是国内分销商(如百思买或亚马逊)进行销售。联邦贸易委员会可以向该分销商施加监管压力,要求只销售符合美国网络安全机构开发的安全框架要求的产品。这将给制造商带来压力,使其产品符合此安全框架中规定的标准,包括向组件供应商和原始设备制造商施加压力,以确保他们提供符合公认安全框架的部件。

公司要求制定可测试的物联网标准,以帮助他们准确、一致地传达他们销售给客户的产品的安全性。分销商Target已经拥有了内部流程,以确保其货架上的所有产品都符合相关的安全和质量标准。像最近的NIST内部报告8259这样的示例是这一框架的很好选择,使联邦贸易委员会无法认可或颁布自己的标准。其他例子,如日本政府的物联网安全框架,表明对这个问题的关注,但目前过于抽象,无法执行制造和设计过程。

此外,国家标签计划将帮助分销商识别合规产品,并为消费者向制造商施压提供途径。最近的一项调查发现,87%的消费者认为制造商有责任保护他们的物联网产品。标签方案将为这种市场提供另一条途径。Cyberspace Solarium委员会建议建立国家网络安全认证和标签管理局,这将有助于集中有关良好安全做法的市场信息,并为用户提供可访问的评级。上个月,卡内基梅隆大学的CyLab展示了一个原型物联网安全标签方案,基于几年的工作,旨在将关键安全措施浓缩成一组简洁的单词和图像。如图1所示。

(编辑:甘孜站长网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    热点阅读