每日动态!大数据,大业务:网络面临的巨大挑战
时间:2023-03-30 09:43:42

网络每时每刻都在处理数据,但如果把“大”这个词放在“数据”前面,网络管理员和首席信息官就必须面对很多全新的挑战。


(资料图片仅供参考)

大数据将给企业使用的网络带来什么样的挑战?

人们想象一下这样一个世界:电视台可以在电视剧第一集播放结束之前就准确预测其表现;公用事业公司可以通过分析家用电器的传感器的数据,帮助居民减少能源支出;或者,运输公司可以通过实时跟踪包裹来优化运输路线和燃料消耗。

这种情形是不是太超前了?事实上,如今差不多可以实现。

移动应用、全IP无线网络、在线商务、销售点系统、社交媒体的兴起,以及从交通监控到库存管理等各方面的传感器的使用,都会产生数据,如果管理得当,这些数据可以为推动商业决策提供关键的信息和情报。这些数据大多是动态收集的,如果能迅速采取行动,就能为企业提供独特的竞争优势,提供更多的业务机会,并解决出现的问题。

但是,由于数据量巨大,速度不断提高,也推动了网络需求的极限。网络每时每刻都在处理数据。但如果把“大”这个词放在“数据”前面,网络管理员和首席信息官就必须面对很多全新的挑战。

改变数据流

如今的数据无疑正在发生变化,数据量也正在呈指数级增长。数据关系已经从简单和已知走向复杂和未知,数据模型已经从固定模式类型转移到无模式类型。数据来源已经从简单的数据输入变成了来自各种来源的实时流,包括手持设备和机器传感器。

大数据的形式尤其多样。例如在网络中,通话记录看起来与信用卡交易不同。与传统应用中的结构化数据不同,大数据包括半结构化或非结构化数据,如文本、音频、视频、点击流、日志文件,以及测量和传输地理和环境信息的传感器的输出。

大数据环境改变了数据在网络中的流动方式。大数据产生的东西方向流量或服务器之间的流量远远大于南北或服务器到客户端的流量,而且对于每一次客户端交互,可能会有成百上千的服务器和数据节点交互。应用程序架构也相应地从集中式模型发展到分布式模型。这与过去20年建立的传统客户机/服务器网络架构背道而驰。

大数据对网络的影响

大数据系统从各种来源提取数据,运行在分布在多个网络节点上的服务器集群上。这些集群以并行的向外扩展方式运行任务。流量模式可以从1对1(电话)、1对多(电视节目)、多对1(音乐会观众)和多对多(CB无线电),这是并行运行的多个节点之间的单播和多播流的组合。网络管理员需要处理这种流量模式的组合,其中一些模式创建一个流,一些模式创建多个流。

此外,当数据被提供给计算节点时,它会产生大量的网络流量。分布式节点之间的数据洗牌和排序操作需要快速和可预测的传输。虽然分析系统使用直接附加的存储进行处理,但中间存储阶段的数据。

在分析过程中,数据需要在网络中移动和有效地操作。随着新的数据集的增长和源的添加,工作负载也会增长。快速增加产能的需求也是如此。因此,在网络架构中优先考虑本地、高性能、水平可扩展性和直接服务器节点到服务器节点的连通性非常重要。

对新的网络模式的需求

一种设计模型包括构建在低端硬件上,并让分析软件对网络问题做出反应,例如重新启动由于拥塞而超时的作业。该模型用于非实时处理,即完成时间不重要,数据主要来自一个来源。

另一个设计模型涉及构建基于硬件的系统,该系统提供确定性性能,以确保连续处理。该模型用于对来自多个来源的数据进行近实时分析。

与此同时,实时大数据系统受益于网络节点以任意对任意模型相互连接的拓扑结构,节点之间只进行单一跳跃,为处理多个大数据流提供了一个专用系统,具有低损耗和确定性性能。交换结构可以提供这种模型。

交换结构提供了整体系统带宽和性能的优势,特别是减少延迟。位置独立性允许集群和数据从架构中的任何位置获得最佳性能。这种架构还可以无缝地将新数据源合并到集群中,而无需重新连接,并极大地简化了系统的扩展。它提供了收敛性,允许服务器集群和存储区域网络跨一个网络进行通信。资源作为一个实体进行管理,策略可以很容易地跨整个交换基础设施应用。

实施大数据解决方案

大数据为企业提供了前所未有的获取和分析数据的巨大机会。当IT组织开始测试和开发他们的解决方案时,网络管理员必须考虑这些技术对他们的服务器、存储、网络和操作基础设施的影响。企业如何才能最好地开发新的基础设施来利用和分析不断增长的大数据流?在开发网络拓扑结构时考虑以下问题:

●数据流的分析是实时进行的吗?

●是否有多个数据源,它们是静态的还是流动的?

●如果试点成功,集群需要有多大?

●增加更多的产能有多容易和快速?

●大数据应用需要与其他应用集成吗?

回答这些问题将有助于构建讨论框架,它们将说明基础设施将如何影响数据中心架构和互连需求。

大数据使企业能够制定新的战略,提供实时业务分析和新的业务洞察,从而推动业务的发展。然而,随着企业看到的快速变化,有必要考虑为未来的业务需求提供规模、性能和空间的关键技术,以满足最高级别的投资保护、业务敏捷性和上市时间。

标签:

最新
  • 9个品牌获得融资,隅田川咖啡再获亿元融资|每日精选

    出品 壹览商业轻卡鹿完成天使轮融资轻卡鹿是一家咖啡及吐司烘焙品牌,涉及业务包括品牌管理、餐饮管理、食品销售等,旗下主打咖啡、吐司等

  • 快手万粉达人破千万,达人又有了营销新工具?|热资讯

    出品 壹览商业(资料图)克劳锐研究发现,2022年万粉以上的内容创作者数量突破1130万,10万粉以上创作者2020-2022年增长率达到327%,达人营销

  • 医保有必要买吗?医疗保险要交多少年?

    医保有必要买吗?有必要买!因为它能报销我们看病买药的费用,而且它具有商业保险无法比拟的三个优势:带病投保:医保的投保门槛很低,即便生

  • 夫妻卖化妆品年入16亿,杭州即将诞生一个美妆IPO

    作者 章航英大多数百货商场的一层都属于高端护肤品专柜,它们流光溢彩,香气氤氲。但其中绝大部分属于国际大牌,譬如迪奥、兰蔻、纪梵希、

  • 全球速讯:扫地机器人的2023年,可能过得不会太轻松

    作者 雷科技说起扫地机器人肯定很多人都不陌生,它在前几年犹如网红产品一般迅速爆红,乘着智能家居的风口快速发展。不仅产品的功能属性在

  • 淘宝为年轻人办了一场秀,见证时尚潮流的变化

    出品 壹览商业3月25日,淘宝联合杭州市政府共同举办的第一届新势力青年时装周正式开启。与传统时装周不同的是,新势力年轻时装周是一场专为

  • 热门看点:小米净利润25亿较去年下降167亿

    出品 壹览商业Canalys数据显示,2022全球智能手机市场全年出货量下降了 11%,低于12亿部,是9年以来的最低值。在整体手机市场颓势下,小米

  • 3个品牌获得融资,龙虾养殖商完成千万元融资

    (资料图)出品 壹览商业编辑 七月千味央厨拟4186万元收购味宝食品80%股权味宝食品是一家冷冻调理包生产商,集研发、生产、销售于一体,包含

  • 每日看点!美团全年营收2200亿元,下个阶段继续四面迎敌

    出品 壹览商业(资料图)作者 成如梦在“抖音外卖上线18城”之后不到一个月的时间,美团迎来了2022年第四季度及全年的财报。财报中,美团2022

  • 海底捞回应孕妇可以插队,书亦烧仙草半月签约门店破400家

    出品 壹览商业(相关资料图)Manner首家全时段餐厅在上海国金中心(IFS)商场开业3月22日,Manner的首家全时段餐厅在上海国金中心(IFS)商场

  • 流量红利终有时,是时候思考即时零售“第二增长曲线”了 全球快报

    出品 壹览商业作者 木鱼最近,三个关于零售的数据引起壹览商业的思考。据壹览商业统计,截至目前10家主要超市类上市公司发布了2022年的业绩

  • 臭宝螺蛳粉火锅热卖,螺蛳粉赛道再出爆款_观热点

    出品 纳食【资料图】凭借独特的“味道魅力”,螺蛳粉征服了越来越多消费者的味蕾,甚至有网友调侃:“世界上只有两种人,喜欢吃螺蛳粉和还

  • 每日速读!谁说大单品已死?其实,老本真得蛮好吃的

    作者 Giselle Yin今天的选题灵感,来自茶颜悦色最近的一篇推文。【资料图】在3月3日的推文里,茶叶悦色提到,“快10年的幽兰和声声,没有

  • 世界播报:中国齿轮行业市场现状分析及行业未来发展趋势预测2022

    齿轮是指什么?齿轮是指轮缘上有齿轮连续啮合传递运动和动力的机械元件。齿轮在传动中的应用很早就出现了。19世纪末,展成切齿法的原理及利

  • 【聚看点】光伏组件行业未来发展趋势预测 市场规模将逐年增长

    光伏组件的概念光伏组件,也叫太阳电池组件,由于单片太阳电池输出电压较低,加之未封装的电池由于环境的影响电极容易脱落,因此必须将一定

  • 环球要闻:2022年中国风电设备制造业未来发展趋势

    风电设备市场前景预测。风电技术装备是风电产业的重要组成部分,也是风电产业发展的基础和保障。2022年中国风电项目政策规划(资料图片仅供

  • 旅游
    • 环球今亮点!创新引领,实现生产全流程数据驱动!新时达eMES系统线上新品发布会成功举办

    • 【报资讯】我国机器人规模预计174亿美元,继智能手机、汽车下一个风口?

    • 全球速递!致我们逝去的青春~S7-300退役

    • 【快播报】ACS的创新和高级功能致力提升运动性能