大数据技术在开放教育招生中的应用

摘 要：大数据技术在开放教育招生中的应用,形成事务处理系统和科学计算系统,为保证大数据技术的合理应用.文章将通过对开放教育招生中应用该技术可靠性分析的基础上,深入研讨该项技术的应用方法.

关 键 词：大数据；开放教育；招生应用

一、大数据技术在开放教育招生中应用的可靠性分析

大数据技术在开放教育招生中的应用,其可靠性与否,表现为系统失效、错误、故障几个方面,此时大数据技术系统运行程序可能出现误差的结果,另外所提供的实时大数据技术怎么写作,会出现与特性行为的偏差,而对于系统失效、错误和故障的防止,前提是分析系统的可靠性.当系统的内部程度变量被判定为无效值,则应该检测系统的错误,并以补偿的方式,避免系统故障的扩大,期间对其系统可靠性的分析,从错误发生之际,直至错误被检测出来,会出现一定的时间延迟,而这个时间是系统内部状态调整的最佳时机,譬如操作员发出错误指令,以致程序出现缺陷,在不同的失效持续时间内,重新执行程序进行修改后,即可避免重复产生相同的错误结果.在此,笔者建议重点安排关键程序的分析时间,用于系统的操作和维护,尤其是应用程序,应以MTBF的标准衡量,确定平均无故障时间,然后与系统的可靠性进行正比分析,最终修复失效的系统.

二、大数据技术在开放教育招生中应用的建议

1.可靠性模型构建

开放教育招生应用大数据技术,可靠性模型的构建是基本前提,而构建可靠性模型,由至少两套子系统构成,每个子系统均包括网络交换、链路和控制台,无论哪个系统的设备网络出现失效,都会通过软件切换模式,自动启动其他的子系统,避免大数据技术系统的全部失效.另外大数据技术系统可靠性模型的计算程序,涵盖了数据通信和存储节点,其计算任务由各个节点独立承担,除非整个大数据技术系统瘫痪,否则单独的节点依然能够保证系统的可靠性.根据以上大数据技术系统可靠性模型的子系统和节点设计理念,基于可靠性理论构建开放教育招生网络拓扑结构,其中主交换机分为多个子交换机,然后利用切换箱将各个子交换器的信息,通过对应的通信怎么写作器传送,同时在每个计算节点当中,完成大数据技术系统可靠性的计算,最后储存在数据库怎么写作器当中.

2.测试基本检测设

借助可靠性模型,在正式测试之前,必须进行实时大数据技术系统的基本检测设,一是故障状态的检测设,由于系统各个节点,都有相对独立的两种状态,因此任何一个节点故障,都不会造成其他节点的失效；二是按照指数分布规律,全部节点组成统一的系统,节点的寿命长短,均需服从分布规律,包括故障节点的修复,都不能违背该规律；三是大数据技术系统的可靠性与否,不受到节点切换和可用度影响.按照以上的三种测试基本检测设,大数据技术系统的单元数量、可靠性和单元间相互关系等,都要利用数字模型进行可靠性的预测,涉及的模型参数为,该函数中,表示第个单元的寿命,而表示第个单元的概率可靠度,根据这个函数,大数据技术子系统的可靠度,即并联后子交换机的可靠度和网络总可靠度,可分别确认为0.99999964和0.99939964,而大数据技术子系统的可靠度,即并联后计算节点可靠度,可视为0.99999999.与此同时,为简化测试基本检测设数字模型的分析过程,可尝试性剔除大数据技术系统节点的冗余功能,但不得影响大数据技术系统其他功能的正常运转.

3.系统分析测试

在构建大数据技术系统可靠性模型和测试基本检测设的前提下,分别进行大数据技术系统功能和性能的测试分析,期间性能测试建立在功能测试分析的基础上,功能测试分析可提炼出各种定量形式的性能指标,具体分析测试方法如下：

（1）功能测试分析.由于大数据技术系统运行,主控设备和备控设备起到关键性的工程支持作用,因此在进行功能测试时,要重点针对主控设备和备控设备控制节点软件,以及设备操纵时设备切换的连续功能状态,在资源视角,大数据技术系统采用单一映像的模式,其主功能集中在上线节点收集方面,另外硬件和网络流量等信息,也要在收集基础上予以及时更新,至于相对应的动态任务分配和负载平衡情况,则应该根据原始数据流的测量结果,进行预处理,以确定负载平衡条件下大数据技术系统怎么写作器格式化数据的处理状态,并借助数据库怎么写作器,更好地实现节点数据信息的接收.

（2）性能测试分析.大数据技术系统的性能,表现在系统工作稳定性、系统吞吐能力、系统实时性几个方面,其中系统工作的稳定性,应详细分析软件系统运行过程中是否存在缺陷,譬如我们常见的变量溢出,就是软件在短时间内执行失误的现象,而正常要求时间在规定界线内,不允许存在预期性的错误,这些错误往往对大数据技术系统的性能影响最为直接,甚至造成致命的破坏,对其测试,笔者建议在大数据技术系统连续运行72h后进行,因为此时系统运行负荷已经达到一定量,系统软硬件都处于疲惫状态,如果系统软硬件正常运转,说明系统工作相对稳定；在系统吞吐能力方面,我们分别建立适时大数据集群负载平衡监测的4个计算节点,主控测试状态下各个计算阶段的负载平衡状态,监测显示大数据技术系统在任务执行周期内,可通过每个计算节点任务时间的计算,与实统周期进行比对分析,而不需要考虑CPU利用率的影响,即可判断出节点的计算裕量.

三、结束语

综上所述,为避免开放教育招生大数据技术系统运行过程中出现失效、错误和故障等问题,在应用大数据技术系统时,有必要对其可靠性进行分析,同时通过“可靠性模型构建”、“测试基本检测设”、“系统分析测试”等方法,以掌握系统运行状态是否正常.文章通过研究,基本明确了开放教育招生大数据技术系统可靠性分析及系统测试方法,但考虑到开放教育招生大数据技术系统运行环境的复杂多变性,要求在系统实际应用时,根据系统运行的具体情况,灵活参考借鉴以上的系统可靠性分析及测试方法.