发电厂中ECSDCS是什么意思？

您好，很高兴为您解答。distributed system 是分布式系统 。分布式系统（distributed system）是建立在网络之上的软件系统。正是因为软件的特性，所以分布式系统具有高度的内聚性和透明性。因此，网络和分布式系统之间的区别更多的在于高层软件（特别是操作系统），而不是硬件。内聚性是指每一个数据库分布节点高度自治，有本地的数据库管理系统。透明性是指每一个数据库分布节点对用户的应用来说都是透明的，看不出是本地还是远程。在分布式数据库系统中，用户感觉不到数据是分布的，即用户不须知道关系是否分割、有无副本、数据存于哪个站点以及事务在哪个站点上执行等。 如若满意，请点击右侧【采纳答案】，如若还有问题，请点击【追问】希望我的回答对您有所帮助，望采纳！ ~ O(∩_∩)O~

分布式在计算机科学中，分布式计算（英语：Distributedcomputing，又译为分散式计算）这个研究领域，主要研究分散系统（Distributed system）如何进行计算。分散系统是一组电子计算机（com，通过计算机网络相互链接与通信后形成的系统。

分类: 电脑/网络 >> 硬件 解析: 综合布线系统（Premises Distributed System，简称PDS）是一种集成化通用传输系统，在楼宇和园区范围内，利用双绞线或光缆来传输信息，可以连接电话、计算机、会议电视和监视电视等设备的结构化信息传输系统。PDS使用标准的双绞线和光纤，支持高速率的数据传输。PDS使用物理分层星型拓扑结构，积木式、模块化设计，遵循统一标准，使系统的集中管理成为可能，也使每个信息点的故障、改动或增删不影响其它的信息点，使安装、维护、升级和扩展都非常方便，并节省了费用。 目前综合布线领域广泛遵循的标准是EIA/TIA-568、ISO/IEC 11801、EIA/TIA TSB-67。综合布线系统分为六个子系统： 一、建筑群连接子系统； 二、设备间子系统； 三、干线（垂直）子系统； 四、管理子系统； 五、水平子系统； 六、工作区子系统。 工作区子系统提供从水平子系统的信息插座到用户终端设备之间的连接。它包括装配软线、连接器和连接所需的扩展软线，并在终端设备和输入/输出（I/O）之间搭接。 水平子系统是由配线间至信息插座的配线电缆和工作区用的信息插座等组成。包括双绞线电缆、信息插座等。 干线（垂直）子系统是由设备间子系统、管理子系统和水平子系统的引入口设备之间的相互连接电缆组成。它是建筑物内的主干电缆、用于楼层之间垂直干线电缆的统称。 设备间子系统是在大楼的适当地方安装进出线设备和主配线架，并进行布线系统管理和维护的场所。设备间子系统应由语音、图像、数据等各种设备及其配线设备和主配线架等组成。 管理子系统由配线间的配线硬件、输入/输出设备等组成，每个配线间及配线间都有管理子系统。 建筑群主干子系统是通过各建筑物之间的缆线连接各建筑物之间的传输介质和各种支持设备组成的一个建筑群综合布线系统。 PDS是一套标准的配线系统，综合了所有的语音、数据、图像与监控等设备，并将多种设备终端插头插入标准的信息插座。即任一插座能够连接不同类型的设备，非常灵活、实用。PDS采用模块化设计，布线系统中固定于建筑物内的水平线缆外，其余所有的接插件都是积木式标准件，易于扩充及重新配置。当因发展而需要增加配线时，不会因此影响整个布线系统，可以保证用户先前在布线方面的投资。PDS为所有的语音、数据和图像设备提供了一套实用、灵活的、可扩展的模块化的介质通道。PDS系统采用的接口和综合业务数字网（ISDN）的接口是相同的八针模块插座和四对内部引线，且PDS支持的数据传输高于ISDN的基群速率。因此，可直接利用PDS和当前的电话网发展成ISDN，而不必另外布线。 PDS较好地解决了传统的布线方法存在的问题，因此，综合布线系统取代单一、昂贵、繁杂的传统布线系统，是“信息时代”的要求和历史发展的必然。 另外，最新推出的综合布线标准，可以在5类双绞线上走千兆，相应的交换设备也逐渐成熟起来，可见从长远的角度来看，综合布线系统可以充分地保护初期投资，满足系统扩展的需求。 综合布线设计标准 一级标准能满足高质量的高 频宽带，综合业务数字通信的要求。 (1)每个工作区（5-10m2）至少有一个双孔或多孔8芯的信息插座。 特殊工作区可采用多插孔的双介质混合型信息插孔。 (2)采用压接式跳线或插接式快速跳线的交叉连接硬件。 (3)配线子系统采用5类非屏蔽双绞线、5类屏蔽双绞线、超5类双绞线、光纤或混合组网。 (4)干线采用铜缆和光缆混合组网或全部采用光缆组网。 (5)每个工作区对应信息插孔均有独立的水平布线电缆引至楼层配线架。 综合布线设计要素 适配地安装在电信出口的外面 配线子系统线缆及相应插孔 1)4对100Ω非屏蔽双绞线(UTP)接入8芯信息插孔； 2)2对150Ω屏蔽双绞线（STP）接入屏蔽信息插孔； 3)62.5/125μm光纤线缆接入光纤标准接口； 4)双介质混合型线缆接入双介质混合型信息插座。 干线子系统线缆及长度 62.5/125μm 0.5线径100Ω UTP 150Ω STP (1)主交叉连接至中间交接 1500m 300m 700m (2)中间交接至管理区 500m500m 500m 500m (3)主交叉连接至管理区 2000m2000m 800m 700m 综合布线系统的计算机管理系统应能随时记录各种硬件设施的工作状态信息。 能显示：楼层平面图、所有硬件、设备间的位置、配线子系统和干线子系统的元件位置。 在出现同频干扰的情况下宜采用屏蔽布线系统。非屏蔽布线与电视电缆靠近会产生同频干扰。 综合布线应用范围要点 数据处理 IBM（3270 TYPE A，SYSTEM 36/38，AS/400）；NCR；HEWLETT PACKARD；HONEYWELL；PRIME；ERICSSON；OLIVETTI；WANG；UNISYS；DEC；GANDAL 数据通信 EIA-232-D，RS-422，RS-423；ETHERNET；STARLAN；TOKEN RING；FDDI；TPDDI 话音应用 AT&T；MATRA COMMUNICATIONS；ROLM；NORTHERNTELECOM；MITEL；DEC；ICL；ISDN 图 像 BASEBAND VIDEO；TRANSMISSION基带图象传输 综合布线的品牌很多,我认为比较好的有:安普,AVAYA,TCL,绿色硅谷，西蒙,3COM,D-LINK等.

关于分布式存储实际上并没有一个明确的定义，甚至名称上也没有一个统一的说法，大多数情况下称作 Distributed Data Store 或者 Distributed Storage System。其中维基百科中给 Distributed data store 的定义是：分布式存储是一种计算机网络，它通常以数据复制的方式将信息存储在多个节点中。在百度百科中给出的定义是：分布式存储系统，是将数据分散存储在多台独立的设备上。分布式网络存储系统采用可扩展的系统结构，利用多台存储服务器分担存储负荷，利用位置服务器定位存储信息，它不但提高了系统的可靠性、可用性和存取效率，还易于扩展。尽管各方对分布式存储的定义并不完全相同，但有一点是统一的，就是分布式存储将数据分散放置在多个节点中，节点通过网络互连提供存储服务。这一点与传统集中式存储将数据集中放置的方式有着明显的区分。

现在已经不用了，全英文，很久以前的系统了，现在都WINDOWS的，中文，

周界入侵系统 小区监控系统 可视对讲系统 地下车位的出入库 等等

建议买本书仔细研读

区别就是，一个是叫超融合产品一个是叫分布式文件系统名字已经差别很多了，没有一个字是相同的

DCS是分布式控制系统。DCS是分布式控制系统的英文缩写（Distributed Control System），在国内自控行业又称之为集散控制系统。是相对于集中式控制系统而言的一种新型计算机控制系统，它是在集中式控制系统的基础上发展、演变而来的。集散控制系统是以微处理器为基础，采用控制功能分散、显示操作集中、兼顾分而自治和综合协调的设计原则的新一代仪表控制系统。集散控制系统简称DCS，也可直译为“分散控制系统”或“分布式计算机控制系统”。DCS具有以下特点：1、 高可靠性。由于DCS将系统控制功能分散在各台计算机上实现，系统结构采用容错设计，因此某一台计算机出现的故障不会导致系统其他功能的丧失。此外，由于系统中各台计算机所承担的任务比较单一，可以针对需要实现的功能采用具有特定结构和软件的专用计算机，从而使系统中每台计算机的可靠性也得到提高。2、开放性。DCS采用开放式，标准化、模块化和系列化设计，系统中各台计算机采用局域网方式通信，实现信息传输，当需要改变或扩充系统功能时，可将新增计算机方便地连入系统通信网络或从网络中卸下，几乎不影响系统其他计算机的工作。以上内容参考：百度百科——DCS

很多啊

DCS，全称：DistributedControlSystem，定义：DCS是分散控制系统（DistributedControlSystem）的简称，国内一般习惯称为集散控制系统。它是一个由过程控制级和过程监控级组成的以通信网络为纽带的多级计算机系统，综合了计算机（Computer）、通讯（Communication）、显示（CRT）和控制（Control）等4C技术，其基本思想是分散控制、集中操作、分级管理、配置灵活、组态方便。 PLC控制系统，Programmable Logic Controller，可编程逻辑控制器，一种数字运算操作的电子系统，专为在工业环境应用而设计的。它采用一类可编程的存储器，用于其内部存储程序，执行逻辑运算，顺序控制，定时，计数与算术操作等面向用户的指令，并通过数字或模拟式输入/输出控制各种类型的机械或生产过程。是工业控制的核心部分。 比如： 深奥图DCS系统实际就是采用PLC来实现的 真正DCS系统结构图 从上图可以看出，两者根本上没有太多区别： 1. DCS是一种“分散式控制系统”，而PLC只是一种(可编程控制器)控制“装置”，两者是“系统”与“装置”的区别。系统可以实现任何装置的功能与协调,PLC装置只实现本单元所具备的功能. 2. 在网络方面,DCS网络是整个系统的中枢神经，系统网采用的是双冗余的100Mbps的工业以太网，采用的国际标准协议TCP/IP。它是安全可靠双冗余的高速通讯网络，系统的拓展性与开放性更好.而PLC因为基本上都为个体工作，其在与别的PLC或上位机进行通讯时，所采用的网络形式基本都是单网结构，网络协议也经常与国际标准不符。在网络安全上，PLC没有很好的保护措施。电源,CPU,网络双冗余. 3. DCS整体考虑方案,操作员站都具备工程师站功能,站与站之间在运行方案程序下装后是一种紧密联合的关系，任何站、任何功能、任何被控装置间都是相互连锁控制, 协调控制;而单用PLC互相连接构成的系统，其站与站（PLC与PLC）之间的联系则是一种松散连接方式，是做不出协调控制的功能。 4. DCS在整个设计上就留有大量的可扩展性接口，外接系统或扩展系统都十分方便，PLC所搭接的整个系统完成后，想随意的增加或减少操作员站都是很难实现的。 5. DCS安全性：为保证DCS控制的设备的安全可靠，DCS采用了双冗余的控制单元，当重要控制单元出现故障时，都会有相关的冗余单元实时无扰的切换为工作单元，保证整个系统的安全可靠。PLC所搭接的系统基本没有冗余的概念，就更谈不上冗余控制策略。特别是当其某个PLC单元发生故障时，不得不将整个系统停下来，才能进行更换维护并需重新编程。所以DCS系统要比其安全可靠性上高一个等级。 6. 系统软件，对各种工艺控制方案更新是DCS的一项最基本的功能，当某个方案发生变化后，工程师只需要在工程师站上将更改过的方案编译后，执行下装命令就可以了，下装过程是由系统自动完成的，不影响原控制方案运行。系统各种控制软件与算法可以将工艺要求控制对象控制精度提高。而对于PLC构成的系统来说，工作量极其庞大，首先需要确定所要编辑更新的是哪个PLC，然后要用与之对应的编译器进行程序编译，最后再用专用的机器（读写器）专门一对一的将程序传送给这个PLC，在系统调试期间，大量增加调试时间和调试成本，而且极其不利于日后的维护。在控制精度上相差甚远。 7. 模块：DCS系统所有I/O模块都带有CPU，可以实现对采集及输出信号品质判断与标量变换，故障带电插拔，随机更换。而PLC模块只是简单电气转换单元，没有智能芯片，故障后相应单元全部瘫痪。 总而言之，从电厂搞维护而言DCS和PLC是有严格的界限的。锅炉、汽机、发电机三大主机的控制肯定用DCS控制，而PLC也只是应用于辅机如化学补给水系统、输煤系统、除灰渣系统及汽机保护（但不参与控制），还有一些厂家是自带的嵌入式PLC。DCS是从仪器仪表发展起来的控制系统，PLC是从顺序控制发展起来的，尽管在功能上相互渗透，但在实际应用中一般是不会有什么改变的。 更通俗说，点少了用PLC就是PLC，点超过500点以上用PLC，把逻辑编程与监控画面软件整合一起就称DCS。 以上回答也是借花献佛，不知是否满意？

DCS是分散控制系统(Distributed Control System)的简称，国内一般习惯称为集散控制系统。它是一个由过程控制级和过程监控级组成的以通信网络为纽带的多级计算机系统，综合了计算机(Computer)、通讯(Communication)、显示(CRT)和控制(Control)等4C技术，其基本思想是分散控制、集中操作、分级管理、配置灵活、组态方便。(1)高可靠性 由于DCS将系统控制功能分散在各台计算机上实现，系统结构采用容错设计，因此某一台计算机出现的故障不会导致系统其它功能的丧失。此外，由于系统中各台计算机所承担的任务比较单一，可以针对需要实现的功能采用具有特定结构和软件的专用计算机，从而使系统中每台计算机的可靠性也得到提高。　　(2)开放性 DCS采用开放式、标准化、模块化和系列化设计，系统中各台计算机采用局域网方式通信，实现信息传输，当需要改变或扩充系统功能时，可将新增计算机方便地连入系统通信网络或从网络中卸下，几乎不影响系统其他计算机的工作。　　(3)灵活性 通过组态软件根据不同的流程应用对象进行软硬件组态，即确定测量与控制信号及相互间连接关系、从控制算法库选择适用的控制规律以及从图形库调用基本图形组成所需的各种监控和报警画面，从而方便地构成所需的控制系统。　　(4)易于维护 功能单一的小型或微型专用计算机，具有维护简单、方便的特点，当某一局部或某个计算机出现故障时，可以在不影响整个系统运行的情况下在线更换，迅速排除故障。　　(5)协调性 各工作站之间通过通信网络传送各种数据，整个系统信息共享，协调工作，以完成控制系统的总体功能和优化处理。　　(6)控制功能齐全 控制算法丰富，集连续控制、顺序控制和批处理控制于一体，可实现串级、前馈、解耦、自适应和预测控制等先进控制，并可方便地加入所需的特殊控制算法。 DCS的构成方式十分灵活，可由专用的管理计算机站、操作员站、工程师站、记录站、现场控制站和数据采集站等组成，也可由通用的服务器、工业控制计算机和可编程控制器构成。 处于底层的过程控制级一般由分散的现场控制站、数据采集站等就地实现数据采集和控制，并通过数据通信网络传送到生产监控级计算机。生产监控级对来自过程控制级的数据进行集中操作管理，如各种优化计算、统计报表、故障诊断、显示报警等。随着计算机技术的发展，DCS可以按照需要与更高性能的计算机设备通过网络连接来实现更高级的集中管理功能，如计划调度、仓储管理、能源管理等。

目前的操作系统种类繁多，很难用单一标准统一分类。 根据应用领域来划分，可分为桌面操作系统、服务器操作系统、主机操作系统、嵌入式操作系统； 根据所支持的用户数目，可分为单用户(MSDOS、OS/2)、多用户系统(UNIX、MVS、Windows)； 根据硬件结构，可分为网络操作系统(Netware、Windows NT、OS/2 warp)、分布式系统(Amoeba)、多媒体系统(Amiga)； 根据操作系统的使用环境和对作业处理方式来考虑，可分为批处理系统(MVX、DOS/VSE)、分时系统( Linux、UNIX、XENIX、Mac OS)、实时系统(iEMX、VRTX、RTOS,RT WINDOWS)； 根据操作系统的技术复杂程度，可分为简单操作系统、智能操作系统（见智能软件）。所谓的简单操作系统，指的是计算机初期所配置的操作系统，如IBM公司的磁盘操作系统DOS／360和微型计算机的操作系统CP／M等。这类操作系统的功能主要是操作命令的执行，文件服务，支持高级程序设计语言编译程序和控制外部设备等。 下面介绍一下操作系统的五大类型：批处理操作系统、分时操作系统、实时操作系统、网络操作系统、分布式操作系统。 1. 批处理操作系统 批处理(Batch Processing)操作系统的工作方式是：用户将作业交给系统操作员，系统操作员将许多用户的作业组成一批作业，之后输入到计算机中，在系统中形成一个自动转接的连续的作业流，然后启动操作系统，系统自动、依次执行每个作业。最后由操作员将作业结果交给用户。 批处理操作系统的特点是：多道和成批处理。 2．分时操作系统 分时(Time Sharing)操作系统的工作方式是：一台主机连接了若干个终端，每个终端有一个用户在使用。用户交互式地向系统提出命令请求，系统接受每个用户的命令，采用时间片轮转方式处理服务请求，并通过交互方式在终端上向用户显示结果。用户根据上步结果发出下道命。分时操作系统将CPU的时间划分成若干个片段，称为时间片。操作系统以时间片为单位，轮流为每个终端用户服务。每个用户轮流使用一个时间片而使每个用户并不感到有别的用户存在。分时系统具有多路性、交互性、“独占”性和及时性的特征。多路性指，伺时有多个用户使用一台计算机，宏观上看是多个人同时使用一个CPU，微观上是多个人在不同时刻轮流使用CPU。交互性是指，用户根据系统响应结果进一步提出新请求(用户直接干预每一步)。“独占”性是指，用户感觉不到计算机为其他人服务，就像整个系统为他所独占。及时性指，系统对用户提出的请求及时响应。它支持位于不同终端的多个用户同时使用一台计算机，彼此独立互不干扰，用户感到好像一台计算机全为他所用。 常见的通用操作系统是分时系统与批处理系统的结合。其原则是：分时优先，批处理在后。“前台”响应需频繁交互的作业，如终端的要求； “后台”处理时间性要求不强的作业。 3．实时操作系统 实时操作系统(RealTimeOperatingSystem，RTOS)是指使计算机能及时响应外部事件的请求在规定的严格时间内完成对该事件的处理，并控制所有实时设备和实时任务协调一致地工作的操作系统。实时操作系统要追求的目标是：对外部请求在严格时间范围内做出反应，有高可靠性和完整性。其主要特点是资源的分配和调度首先要考虑实时性然后才是效率。此外，实时操作系统应有较强的容错能力。 4．网络操作系统 网络操作系统是基于计算机网络的，是在各种计算机操作系统上按网络体系结构协议标准开发的软件，包括网络管理、通信、安全、资源共享和各种网络应用。其目标是相互通信及资源共享。在其支持下，网络中的各台计算机能互相通信和共享资源。其主要特点是与网络的硬件相结合来完成网络的通信任务。 5．分布式操作系统 它是为分布计算系统配置的操作系统。大量的计算机通过网络被连结在一起，可以获得极高的运算能力及广泛的数据共享。这种系统被称作分布式系统(DistributedSystem) 。它在资源管理，通信控制和操作系统的结构等方面都与其他操作系统有较大的区别。由于分布计算机系统的资源分布于系统的不同计算机上，操作系统对用户的资源需求不能像一般的操作系统那样等待有资源时直接分配的简单做法而是要在系统的各台计算机上搜索，找到所需资源后才可进行分配。对于有些资源，如具有多个副本的文件，还必须考虑一致性。所谓一致性是指若干个用户对同一个文件所同时读出的数据是一致的。为了保证一致性，操作系统须控制文件的读、写、操作，使得多个用户可同时读一个文件，而任一时刻最多只能有一个用户在修改文件。分布操作系统的通信功能类似于网络操作系统。由于分布计算机系统不像网络分布得很广，同时分布操作系统还要支持并行处理，因此它提供的通信机制和网络操作系统提供的有所不同，它要求通信速度高。分布操作系统的结构也不同于其他操作系统，它分布于系统的各台计算机上，能并行地处理用户的各种需求，有较强的容错能力。 操作系统大全 早期操作系统（专利保护） TRS-DOS，ROM OS"s TI99-4 Commodore PET，64，和 VIC-20， 第一套IBM-PC 苹果电脑 Sinclair Micro和QnX等 非Unix商业操作系统 CPM操作系统 MP/M-80 UCSD P-system Mini-FLEX SSB-DOS CP/M-86 DR-DOS FreeDOS MS-DOS PC-DOS Mach 由卡纳尼基梅隆大学研究 L4微内核 第二代微内核 CHORUS Choices Multics OS-9 NSJ Netware:一种网络服务器操作系统 Unix及类似系统 A/UX(Apple UNIX) Unix 微软Xenix ChorusOS Cromix UNIflex OS-9 IBM的AIX BSD FreeBSD NetBSD OpenBSD DragonFly BSD PC-BSD Digital UNIX，即之后康柏Tru64 DNIX HP的HP-UX GNU/Hurd SGI的IRIX Inferno Linux（或称GNU/Linux） Mac OS X MenuetOS Minix OSF/1 Plan9 SCO的SCO UNIX Sun的SunOS，即之后的Solaris System V Ultrix UniCOS 麒麟操作系统(Kylin),由国防科技大学、中软公司、联想公司、浪潮公司和民族恒星公司五家单位合作研制的服务器操作系统 OS/390 z/OS Syllable 其他 Acorn Arthur ARX RISC OS RISCiX Amiga AmigaOS Atari ST TOS MultiTOS MiNT 苹果电脑（Apple/Macintosh） Apple DOS ProDOS Mac OS Mac OS X Mac OS X 10.4 Tiger Mac OS X 10.5 Leopard Mac OS X 10.6 Snow Leopard (Alpha) pink OS BeOS A/UX Be BeOS BeIA Digital/康柏（Compaq） AIS OS-8 RSTS/E RSX-11 RT-11 TOPS-10 TOPS-20 VMS（后更名为OpenVMS） IBM OS/2 AIX OS/400 OS/390 VM/CMS DOS/VSE VSE/SP VSE/ESA OS/360 MFT MVT SVS MVS TPF ALCS z/OS PC-DOS pink OS 微软（Microsoft） MS-DOS Xenix Microsoft Bob 基于MS-DOS操作系统的Windows Windows 1.0 Windows 2.0 Windows 3.1 Windows 95 Windows 98 Windows ME Windows NT Windows NT 3.5 Windows NT 4 Windows 2000 Windows XP Windows XP SP1 Windows XP SP2 Windows XP SP3 Windows XP Media Center Edition Windows XP Home Edition Windows XP Tablet PC Edition Windows XP Professional Windows XP Professional x64 Edition Windows Server 2003 Windows Server 2003 64-bit Edition Windows Vista Windows Vista SP1 Windows Vista Home Basic Windows Vista Home Premium Windows Vista Business Windows Vista Ultimate Windows Vista Enterprise Windows Vista Starter Windows Server 2008 Windows Server "Longhorn" Web x86 Windows Server "Longhorn" Web x64 Windows Server "Longhorn" Standard x86 Windows Server "Longhorn" Standard x64 Windows Server "Longhorn" Enterprise x86 Windows Server "Longhorn" Enterprise x64 Windows Server "Longhorn" Datacenter x86 Windows Server "Longhorn" Datacenter x64 Windows 7 Home Basic Windows 7 Starter Windows 7 Home Premium Windows 7 Professional Windows 7 Enterprise Windows 7 Ultimate Windows Server 2008 R2 Novell NetWare Unixware SUSE Linux NeXT NEXTSTEP（即之后的Mac OS X） Plan 9 Inferno Prime Computer Primos 西门子 BS2000 - 用于西门子公司的大型主机。 SINIX（也称Reliant UNIX） - 用于西门子公司的UNIX电脑系统。 个人电子助理（PDA）操作系统 Palm OS Pocket PC EPOC Microsoft Windows CE Linux 智能手机操作系统 Windows Mobile系列 Embedded Linux由Montavista创造,在Motorola"s A760,E680等机型上使用 Mobilinux由Montavista创造 Symbian OS系列 Android（Google手机操作系统） 其他操作系统 动态可扩展操作系统 MIT的Exo Kernel 华盛顿大学的 SPIN 哈佛大学的 VINO illinois大学的Choices ReactOS记得采纳啊

计算机和网络技术的飞速发展，引起了自动化控制系统结构的变革，一种世界上最新型的控制系统即现场总线控制系统（Fieldbus Control System，FCS）在上世纪九十年代走向实用化，并正以迅猛的势头快速发展。现场总线控制系统是目前自动化技术中的一个热点，正越来越受到国内外自动化设备制造商与用户的关注。现场总线控制系统的出现，将给自动化领域在过程控制系统上带来又一次革命，其深度和广度将超过历史的任何一次，从而开创自动化的新纪元。（1）FCS是第五代过程控制系统，它是21世纪自动化控制系统的方向。是3C技术（Communication，Computer， Control）的融合。基本任务是：本质（本征）安全、危险区域、易变过程、难于对付的非常环境。（2）全数字化、智能、多功能取代模拟式单功能仪器、仪表、控制装置。（3）用两根线联接分散的现场仪表、控制装置，取代每台仪表的两根线。“现场控制”取代“分散控制”；数据的传输采用“总线”方式。（4）从控制室到现场设备的双向数字通信总线，是互联的、双向的、串行多节点、开放的数字通信系统取代单向的、单点、并行、封闭的模拟系统。（5）用分散的虚拟控制站取代集中的控制站。（6）把微机处理器转入现场自控设备，使设备具有数字计算和数字通信能力，信号传输精度高，远程传输。实现信号传输全数字化、控制功能分散、标准统一全开放。扩展资料：FCS具有（1）很好的开放性、互操作性和互换性。（2）全数字通信。（3）智能化与功能自治性。（4）高度分散性。（5）很强的适用性。FCS的关键要点有三点：（1）FCS系统的核心是总线协议，即总线标准。采用双绞线、光缆或无线电方式传输数字信号，减少大量导线，提高了可靠性和抗干扰能力。FCS从传感器、变送器到调节器一直是数字信号，这就使我们很容易地处理更复杂、更精确的信号，同时数字通信的差错功能可检出传输中的误码。FCS可以将PID控制彻底分散到现场设备（Field Device）中。基于现场总线的FCS又是全分散、全数字化、全开放和可互操作的新一代生产过程自动化系统，它将取代现场一对一的4～20mA模拟信号线，给传统的工业自动化控制系统体系结构带来革命性的变化。根据IEC61158的定义，现场总线是安装在制造或过程区域的现场装置与控制室内的自动控制装置之间的数字式、双向传输、多分支结构的通信网络。现场总线使测控设备具备了数字计算和数字通信能力，提高了信号的测量、传输和控制精度，提高了系统与设备的功能、性能。IEC/TC65的SC65C/WG6工作组于1984年开始致力于推出世界上单一的现场总线标准工作，走过了16年的艰难历程，于1993年推出了IEC61158-2，之后的标准制定就陷于混乱。2000年初公布的IEC61158现场总线国际标准子集有八种，分别为：①类型1 IEC技术报告（FFH1）；②类型2 Control-NET（美国Rockwell公司支持）；③类型3 Profibus（德国Siemens公司支持）。④类型4 P-NET（丹麦Process Data公司支持）；⑤类型5 FFHSE（原FFH2）高速以太网（美国Fisher Rosemount公司支持）。⑥类型6 Swift-Net（美国波音公司支持）；⑦类型7 WorldFIP（法国Alsto公司支持）；⑧类型8 Interbus（美国Phoenix Contact公司支持）。除了IEC61158的8种现场总线外，IEC TC17B通过了三种总线标准：SDS（Smart Distributed System）；ASI（Actuator Sensor Interface）；Device NET。另外，ISO公布了ISO 11898 CAN标准。其中Device NET于2002年10月8日被中国批准为国家标准，并于2003年4月1日开始实施。所以，要实现这些总线类型的相互兼容和互操作，就目前状态而言，几乎是不可能的。开放的现场总线控制系统的互操作性，就一个特定类型的现场总线而言，只要遵循同一类型现场总线的总线协议，对其产品是开放的，并具有互操作性。换句话说，不论什么厂家的产品，也不一家是该现场总线公司的产品，只要遵循同一类型总线的总线协议，产品之间是开放的，并具有互操作性，就可以组成总线网络。参考资料百度百科-FCS系统

有平面图，系统图，你具体是问什么啊

　 　计算机网络专业术语： 　　adsl: asymmetric digital subscriber line，不对称数字订阅线路 　　ah: authentication header，鉴定文件头 　　amr(audio/modem riser，音效/数据主机板附加直立插卡) 　　arp(address resolution protocol，地址解析协议) 　　atm(asynchronous transfer mode，异步传输模式) 　　bod(bandwidth on demand，弹性带宽运用) 　　cbr(mitted burst rate，约定突发速率) 　　ccirn: coordinating mittee for intercontinental research working，洲 　　际研究网络协调委员会 　　ccm(call control manager，拨号控制管理) 　　cdsl: consumer digital subscriber line(消费者数字订阅线路) 　　cgi(mon gateway interface，通用网关接口) 　　ciea: mercial inter exchange association，商业因特网交易协会 　　cir(mitted infomation rate，约定信息速率) 　　cts(clear to send，清除发送) 　　dbs-pc: direct broadcast satellite pc(人造卫星直接广播式pc) 　　dce: data circuit terminal equipment，数据通信设备 　　des: data encryption standard，数据加密标准 　　dmt: discrete multi - tone，不连续多基频模式 　　dns(domain name system，域名系统) 　　docsis(data over cable service interface specifications，线缆服务接口数据规格) 　　dte: data terminal equipment，数据终端设备 　　ebr(excess burst rate，超额突发速率) 　　esp: encapsulating security payload，压缩安全有效载荷 　　fdm: frequency division multi，频率分离 　　flow-control流控制 　　fricc: federal research inter coordinating mittee，联邦调查因特网协调委员会 　　ftp(file transfer protocol，文件传输协议) 　　ghost:(general hardware oriented system transfer，全面硬件导向系统转移) 　　hdsl: high bit rate dsl，高比特率数字订阅线路 　　计算机网络专业术语： 　　(hypertext transfer protocol，超文本传输协议) 　　icmp(inter control message protocol，因特网信息控制协议) 　　ietf(inter engineering task framework，因特网工程任务组) 　　ike: inter key exchange，因特网密钥交换协议 　　imap4: inter message access protocol version 4，第四版因特网信息存取协议 　　inter(因特网) 　　ip(inter protocol，网际协议) 　　isdn(integrated service digital work，综合服务数字网络) 　　isoc: inter society，因特网协会 　　isp(inter service provider，因特网服务提供商) 　　lan(local area work，局域网) 　　ldap: lightweight directory access protocol，轻权目录访问协议 　　lom(lan-on-montherboard) 　　iab: inter activities board，因特网工作委员会 　　ietf: inter engineering task force，因特网工程作业推动 　　l2tp(layer 2 tunneling protocol，二级通道协议) 　　lmds: local multipoint distributed system，局域多点分布式系统 　　mime: multipurpose inter mail extension，多用途因特网邮件扩展协议 　　mnp: micro working protocal 　　modem(modulator demodulator，调制解调器) 　　nat(work address translation，网络地址转换) 　　nc(work puter，网络计算机)转载请保留 　　nds: novell directory service，novell目录服务 　　nntp: work news transfer protocol，网络新闻传输协议 　　msn: microsoft work，微软网络 　　ofdm(orthogonal frequency division multiplexing，直角频率部分多路复用) 　　计算机网络专业术语： 　　p3p(privacy preference project，个人私隐安全平台) 　　pds: public directory support，公众目录支持 　　pgp: pretty good privacy，优良保密协议 　　pics: platform for inter content selection，因特网内容选择平台 　　pof: polymer optical fiber，聚合体光纤 　　pop3: post office protocol version 3，第三版电子邮局协议 　　pptp: point to point tunneling protocol，点对点通道协议 　　radsl: rate adaptive dsl，速率自适应数字订阅线路 　　rarp(reverse address resolution protocol，反向地址解析协议) 　　rdf: resource deXion framework，资源描述框架 　　rsa(rivest shamir adlemen，一种因特网加密和认证体系) 　　rts(request to send，需求发送) 　　sis: switched interworking services(交换式网络互联服务) 　　s/mime: secure mime，安全多用途因特网邮件扩展协议 　　snmp(simple work management protocol，简单网络管理协议) 　　 *** tp(simple mail transfer protocol，简单邮件传输协议) 　　skip: simple key exchange inter protocol，因特网简单密钥交换协议 　　sua(single user account，单用户帐号) 　　tcp(tran *** ission control protocol，传输控制协议) 　　uart(universal asynchronous receiver/tran *** itter，通用异步接收/发送装置) 　　udp(user datagram protocol，用户数据报协议) 　　uls: user location service，用户定位服务 　　vod: video on demand，视频点播 　　vpn: virtual private work, 虚拟局域网 　　(world wide web，万维网，是因特网的一部分)

access 访问、存取、通路、进入 adjacency list method 邻接表表示法 adjacency matrix method 邻接矩阵表示法 algorithm 算法 array 数组 ATM(asynchronous transfer mode) 异步传输模式 b.. real programs kernels 实程序 核心程序 b.. toy benchmark synthetic benchmark 简单基准程序 复合基准程序 bandwidth 带宽 benchmark 基准测试程序 best - fit algorithm 最佳适应算法 BFS(breadth first search) 广度优先搜索法 binary 二进制 binary relation 二元关系 binary tree 二叉树 bit series 比特序列 black - box white - box 黑盒 白盒 block miss 块失效 blocked 阻塞（等待状态也称阻塞或封锁状态） boundary 界线 分界 bridge 网桥 bubble sort 冒泡排序 candidate key 候选键（辅键） capacity 容量 cartesian product 笛卡尔积 CASE(com.. aided sof.. engineering) 计算机辅助软件工程 CCP(communication control processor) 通信控制处理机 cell 信元 characteristic 特征 特性 circuit switching 线路交换 circular wait 循环等待 CISC(complex instruction set computer) 复杂指令集计算机 class 类 Client/Server 客户机/服务器 clock cycle/clock rate 时钟周期/时钟频率 coaxial cable 同轴电缆 cohesion/coupling 内聚/耦合 coincidental logical procedural functional 偶然内聚 逻辑内聚 过程内聚 功能内聚 communication 通信 complement number 补码 constrain 约束 contain 包含 correspond(corresponding) 相符合（相应的一致的） CPETT 计算机性能评价工具与技术 CPI 每条指令需要的周期数 CSMA/CD 带冲突检测的载波监听多路访问 cursor 游标 cyclic redundancy check 循环冗余检验 database: integrity consistency re story 完整性 一致性 可恢复性 database: security efficiency 数据库设计的目标：安全性 效率 deadlock: mutual exclusion 死锁条件：互斥 deadlock: circular wait no preemption 死锁条件：循环等待 无优先权 decimal 十进位的 decision 决定 判断 decomposition 双重的 混合的 definition 定义 definition phase 定义阶段 design phase 设计阶段 DFS(depth first search) 深度优先搜索法 diagram 图表 Difference Manchester 差分曼彻斯特 directed graph/undirected graph 有向图/无向图 distributed system 分布式系统 divide union intersection difference 除 并 交 差 document 文件 文档 DQDB(distributed queue dual bus) 分布队列双总线 dual 二元的 双的 dynamic design process 动态定义过程 element 元素 要素 elevator(scan) algorithm 电梯算法（扫描算法） encapsulation inheritance 封装（压缩）继承（遗传） entity 实体 entity integrity rule 实体完整性规则 equation 方程式 等式 Ethernet 以太网 exchange sort 交换排序 exclusive locks 排它锁（X锁） external(internal) fragmentation 外（内）碎片 fault page fault 中断 过错 页中断 FDDI(fiber distributed data interface) 光纤分布式数据接口 FDM(frequency division multiplexing) 频分多路复用 fiber optic cable 光缆 FIFO replacement policy 先进先出替换算法 figure 数字 图形 first normal form 第一范式 floppy 活动盘片（软盘） foreign key domain tuple 外来键 值域 元组 formula 公式 表达式 frame page frame 帧 结构 页结构 frequency 频率 FTP 文件传送服务 function 函数 functionally dependant 函数依赖 gateway 网间连接器 general - purpose registers 通用寄存器 generate 产生 grade 等级 标准 graph(graphic) 图 Groper 将用户的请求自动转换成FTP hash table/hash function/ collision 哈希表/哈希函数（散列函数）/碰撞 HDLC 面向比特型数据链路层协议 hit rate 命中率 host 主计算机 host language statement 主语言语句 hypertext 超级文本 index 索引 insertion sort 插入排序 instruction format 指令格式 instruction set 指令集 interface 接口 分界面 连接体 interrupt 中断 IPC 工业过程控制 ISAM VSAM 索引顺序存取方法 虚拟存储存取方法 join/natural join/semi join 连接/自然连接/半连接 kernel executive supervisor user 核心 执行 管理 用户 kernels 核心程序 key comparison 键（码）值比较 LAN(local area network) 局域网 load 负载 载入 logical functional 逻辑内聚 功能内聚 longitudinal 水平的 maintenance phase 维护（保养）阶段 MAN(metropolitan area network) 城域网 Manchester 曼彻斯特 map 地图 映射图 matrix 矩阵 点阵 memory reference 存储器参量 message switching 报文交换 MFLOP(million floating point operate per second) 每秒百万次浮点运算 MIPS(millions of instruction per second) 没秒百万条指令 module 单位 基准 monitor(model benchmark physical) mothod 监视 （模型 基准 物理）法 multilevel data flow chart 多层数据流图 multiple - term formula 多项式 multiplexing 多路复用技术 multiplication 乘法 mutual exclusion 互相 排斥 non - key attributes 非码属性 Nyquist 奈奎斯特 object oriented 对象 趋向的 使适应的 object oriented analysis 面向对象的分析 object oriented databases 面向对象数据库 object oriented design 面向对象的设计 object oriented implementation 面向对象的实现 occurrence 事件 one - dimensional array 一维数组 OODB(object oriented data base) 面向对象数据库 OOM(object oriented method) 面向对象的方法 oom: information object message class 信息 对象 消息 类 oom: instance method message passing 实例 方法消息传递 open system 开放系统 operand 操作数 overflow 溢出 overlapping register windows 重叠寄存器窗口 packet switching 报文分组交换 page fault 页面失效 page replacement algorithm 页替换算法 paged segments 段页式管理 PCB(process control block) 进程控制块 peer entities 对等实体 period 时期 周期 phase 阶段 局面 状态 physical data link network layer 物理层 数据链路层 网络层 pipeline 管道 platter/track/cluster 面/磁道/簇 predicate 谓语 preemption 有优先权的 prefix(Polish form) 前缀（波兰表达式） preorder/inorder/postorder 前序/中序/后序 presentation application layer 表示层 应用层 primary key attributes 主码属性 principle 原则 方法 procedural coincidental 过程内聚 偶然内聚 process 过程 加工 处理 program debugging 程序排错 projection selection join 投影 选择 连接 protocol 协议 prototype 原型 样板 prototyping method(model) 原型化周期（模型） pseudo - code 伪码（程序设计语言PDL） punctuation 标点 queue 队列 ready/blocked/running 就绪/阻塞（等待）/运行 real page number 实页数 real programs 实程序 redirected 重定向 redundancy 冗余 reference integrity rule 引用完整性规则 register(registry) 寄存器 登记 注册 挂号 relation 关系 relay 中继 repeater 中继器 replacement 替换 request indication response confirm 请求 指示 响应 确认 resource 资源 response 回答 响应 RISC(reduced instruction set computer) 精简指令集计算机 robustness 健壮性 router 路由器 scheme 计划 图表 sector head cylinder 扇区 磁头 柱面 selection sort 选择排序 semaphores 信号 sequence 序列 顺序 Shanon 香农 share locks 共享锁（S锁） short path critical path 最短路径 关键路径 signal 信号 signal - to - noise ratio 信噪比 B/N similar 相似的 SISD SIMD MISD MIMD *指令流 *数据流 SMDS 交换多兆位数据服务 software development phase 软件开发阶段 software engineering 软件工程 software portability 软件可移植性 software requirements specification 软件需求说明书 sort 种类 方式 分类 排序 spanning tree 跨越树（生成树） speedup 加速比 SSTF(shortest - seek - time - first) 最短寻道时间优先（磁盘调度算法） stack strategy non - stack strategy 堆栈型 非堆栈型 starvation 饥饿 匮乏 store procedures 存储过程 subset 子集 子设备 superclass subclass abstract class 超类 子类 抽象类 synthetic benchmark 复合基准程序 system testing 系统测试 Systolic 脉动阵列 table 表 表格 桌子 TDM(time division multiplexing) 时分多路复用 terminal 终端 testing phase 测试阶段 theta select/project/theta join θ选择/投影/θ连接 time complexity 时间复杂度 timestamping 时标技术 Token Bus 令牌总线 Token Ring 令牌环 toy benchmark 简单基准程序 transaction 事务 记录 transmit 传送 transport layer session layer 传输层 会话层 traversal method 遍历方法 triggers/store procedures 触发器/存储过程（ORACLE系统） unit system acceptance testing 单元测试 系统测试 确认测试 update 更新 value （数）值 variable 变量 vertice edge 顶点（节点）边 virtual memory system 虚拟存储系统 WAN(wide area network) 广域网 waterfall model 瀑布模型 white noises 白噪声 write - back(copy - back) 写回法 write - through(store - through) 写直达法

distributed antenna system分布式天线系统

“大数据（big data），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。在维克托·迈尔-舍恩伯格及肯尼斯·库克耶编写的《大数据时代》中大数据指不用随机分析法（抽样调查）这样捷径，而采用所有数据进行分析处理。大数据的5V特点（IBM提出）：Volume（大量）、Velocity（高速）、Variety（多样）、Value（低价值密度）、Veracity（真实性）。”

Hdfs分布式文件系统 就是hadoop开源云平台中的文件系统，是其最关键的技术 解决文件分块存储、索引等

集中控制、风险分散

云计算的开发需要多种语言共同参与，HADOOP在云计算产品中只是一个底层框架，适合做云盘、分布式计算等底层业务。很少有一种云产品只用一种开发语言解决所有问题的，语言只是工具，关键是要学会在不同的应用场景下，如何正确选择合适的工具。云产品的框架有很多，比如OpenStack是用Python写的，Hadoop是用Java写的。Ceph架构简介及其特点Ceph简介Ceph是一个统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。Ceph项目最早起源于Sage就读博士期间的工作（最早的成果于2004年发表），并随后贡献给开源社区。在经过了数年的发展之后，目前已得到众多云计算厂商的支持并被广泛应用。RedHat及OpenStack都可与Ceph整合以支持虚拟机镜像的后端存储。Ceph特点高性能a.摒弃了传统的集中式存储元数据寻址的方案，采用CRUSH算法，数据分布均衡，并行度高。b.考虑了容灾域的隔离，能够实现各类负载的副本放置规则，例如跨机房、机架感知等。c.能够支持上千个存储节点的规模，支持TB到PB级的数据。高可用性a.副本数可以灵活控制。b.支持故障域分隔，数据强一致性。c.多种故障场景自动进行修复自愈。d.没有单点故障，自动管理。高可扩展性a.去中心化。b.扩展灵活。c.随着节点增加而线性增长。特性丰富a.支持三种存储接口：块存储、文件存储、对象存储。b.支持自定义接口，支持多种语言驱动。Hadoop简介及其特点Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。HDFS有高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上；而且它提供高吞吐量（highthroughput）来访问应用程序的数据，适合那些有着超大数据集（largedataset）的应用程序。HDFS放宽了（relax）POSIX的要求，可以以流的形式访问（streamingaccess）文件系统中的数据。Hadoop的框架最核心的设计就是：HDFS和MapReduce。HDFS为海量的数据提供了存储，而MapReduce则为海量的数据提供了计算。云计算的开发语言多样hadoop和云计算是两回事，HADOOP开发首选JAVA，次选C/C++或者Python云计算就复杂了，不同的应用又不同额选择。很少有一种云产品只用一种开发语言解决所有问题的语言只是工具，关键是要学会在不同的应用场景下，如何正确选择合适的工具。云产品的框架有很多，比如OpenStack是用Python写的，Hadoop是用Java写的。HADOOP在云计算产品中只是一个底层框架，适合做云盘、分布式计算等底层业务。中间层和上层用什么语言开发取决产品的特性和技术人员的技术特点。

标准与技术研究院（NIST）定义：云计算是一种按使用量付费的模式，这种模式提供可用的、便捷的、按需的网络访问， 进入可配置的计算资源共享池（资源包括网络，服务器，存储，应用软件，服务），这些资源能够被快速提供，只需投入很少的管理工作，或与服务供应商进行很少的交互。云计算过去用来表示电信网，后来也用来表示互联网和底层基础设施的抽象。它是分布式计算（Distributed Computing）、并行计算（Parallel Computing）、效用计算（Utility Computing）、 网络存储（Network Storage Technologies）、虚拟化（Virtualization）、负载均衡（Load Balance）、热备份冗余（High Available）等传统计算机和网络技术发展融合的产物。云计算就是上面描述的，希望能帮到你

建筑智能化系统，过去通常称弱电系统。包括通信网络技术、计算机技术、自动控制技术、消防与安全防范技术、声频与视频应用技术、综合布线和系统集成技术。通信网络系统　　通信网络系统(CNS：CommunicationNetworkSystem)是在建筑或建筑群内传输语音、数据、图像且与外部网络(如公用电话网、综合业务数字网、因特网、数据通信网络和卫星通信网等)相联结的系统，主要包括通信系统、卫星数字电视及有线电视系统、公共广播及紧急广播系统等各子系统及相关设施，其中通信系统包括电话交换系统、会议电视系统及接人网设备。信息网络系统　　信息网络系统(INS：InformationNetworkSystem)是应用计算机技术、通信技术、多媒体技术、信息安全技术和行为科学等，由相关设备构成，用以实现信息传递、信息处理、信息共享，并在此基础上开展各种业务的系统，主要包括计算机网络、应用软件及网络安全等。建筑设备监控系统　　建筑设备监控系统(BAS：BuildingAutomationSystem)，过去通常称楼宇自动化系统，是将建筑或建筑群内的空调与通风、变配电、公共照明、给排水、热源与热交换、冷冻与冷却、电梯等设备或系统集中监视、控制和管理而构成的综合系统，其监控范围为空调与通风系统、变配电系统、公共照明系统、给排水系统、热源和热交换系统、冷冻和冷却水系统、电梯和自动扶梯系统等各子系统。火灾自动报警及消防联动系统　　火灾报警系统，一般由火灾探测器、区域报警器和集中报警器组成，当火灾报警系统根据工程的要求同各种灭火设施和通讯装置联动，形成中心控制系统，即由自动报警、自动灭火、安全疏散诱导、系统过程显示、消防档案管理等组成一个完整的消防控制系统时，被称为火灾自动报警及消防联动系统（FAS：FireAlarmSystem），主要包括火灾和可燃气体探测系统，火灾报警控制系统，消防联动系统等各子系统及相关设施安全防范系统　　安全防范系统(SAS：SafetyAutomationSystem)是以维护公共安全、预防刑事犯罪和灾害事故为目的，运用电子信息技术、计算机网络技术、系统集成技术和各种现代安全防范技术构成的入侵报警系统、视频监控系统、出入口控制系统等，或这些系统组合或集成的电子系统或网络，主要包括入侵报警系统、视频监控系统、出入口控制系统、停车库管理系统、巡更系统等。综合布线系统　　综合布线系统（PDS：PremisesDistributedSystem）是建筑或建筑群内部及其与外部的传输网络。它使建筑或建筑群内部的语音、数据和图像通信网络设备、信息网络交换设备和建筑设备自动化系统等相联，也使建筑或建筑群内通信网络与外部通信网络相联。智能化系统集成　　智能化系统集(ISI：IntelligentSystemIntegrated)成一般指在建筑设备监控系统、火灾自动报警和消防联动系统、安全防范系统等的基础上，实现建筑管理系统(SMS)的集成，以满足建筑监控功能、管理功能和信息共享的需求。通过对建筑和建筑设备的自动检测与优化控制、信息资源的优化管理，为使用者提供最佳的信息服务，使智能建筑适应信息社会的需要，并具有安全、舒适、高效和经济的特点。

Hadoop是由Apache开源软件基金会开发的，运行于大规模普通服务器上的分布式系统基础架构，用于大规模数据的存储、计算、分析等。通过使用Hadoop平台用户可以在不了解分布式底层细节的情况下，开发分布式程序，充分利用集群的威力进行高速运算和存储。2007年雅虎发布了第一个Apache Hadoop版本0.14.1；2008年雅虎用Hadoop做到全网尺度的搜索；2009年雅虎把内部版本全部开源，于是IBM也加入Hadoop的开发阵营；2010年Facebook宣布正式运行世界最大的Hadoop集群；2011年Apache Hadoop1.0版本发布；2012年Apache Hadoop2.0版本发布。下面具体介绍一下Hadoop系统的架构。Hadoop由许多元素构成，如下图图所示，包括HBase、Hive、Pig、Chukwa、Oozie和ZooKeeper等，但是其核心组件为HDFS和MapReduce。HDFS是Hadoop Distributed File System系统的缩写，是一个使用JAVA语言实现的、分布式的、可扩展的文件系统，它存储 Hadoop 集群中所有存储节点上的文件，由NameNode和DataNode两部分组成。HDFS的上一层是 MapReduce 引擎，该引擎由 JobTrackers 和 TaskTrackers 组成，用来对存储在HDFS上的数据进行计算分析。下面来具体介绍HDFS和MapReduce的工作原理及应用。HDFSHDFS采用master/slave架构。一个HDFS集群是由一个Namenode和一定数目的Datanodes组成。Namenode是一个中心服务器，负责管理文件系统的名字空间(namespace)以及客户端对文件的访问。集群中的Datanode是集群中的数据节点，用来存储实际的数据，并负责管理它所在节点上的数据存储。HDFS公开了文件系统的名字空间，用户能够以文件的形式在上面存储数据。从内部看，一个文件被分成一个或多个数据块，这些块存储在一组Datanode上。Namenode执行文件系统的名字空间操作，比如打开、关闭、重命名文件或目录。它也负责确定数据块到具体Datanode节点的映射。Datanode负责处理文件系统客户端的读写请求。在Namenode的统一调度下进行数据块的创建、删除和复制，下面就具体来阐述HDFS系统中涉及的基本概念；数据块（Block） HDFS和传统的分布式文件系统一样，也采用了数据块的概念，将数据分割成固定大小的数据块进行存储，默认大小为64MB，块的大小可针对每个文件配置，由客户端任意指定，并且每个块都有属于自己的全局ID，作为一个独立的单位存储在集群服务器上。与传统分布式文件系统不同的是，如果实际数据没有达到块大小时，则并不实际占用磁盘空间。HDFS元数据 HDFS元数据由文件系统目录树信息、文件和数据块的对应关系和块的存放位置三个部分组成，文件系统目录树信息包括文件名、目录名及文件和目录的从属关系，文件和目录的大小，创建及最后访问时间。文件和块的对应关系记录了文件由哪些块组成。此外元数据还记录了块的存放位置，包括存放块的机器名和块ID。NameNode HDFS对元数据和实际数据采取分别存储的方式，元数据存储在一台指定的服务器上，称为NameNode，实际数据则存储在集群中的其他机器上的文件系统中，称为DataNode。NameNode是用来管理文件系统命名空间的组件，并且一个HDFS集群只有一台NameNode，由于元数据存储在NameNode上，当NameNode出现故障时将导致整个集群无法工作。元数据保存在NameNode的内存当中，以便快速查询，1G内存大致可以存放1000000个块对应的元数据信息。DataNode DataNode用来存储块的实际数据，每个块会在本地文件系统产生两个文件，一个是实际的数据文件，另一个是块的附加信息文件，其中包括数据的校验和生成时间等信息。DataNode通过心跳包(Heartbeat)与NameNode通信，当客户端读取/写入数据的时候将直接与DataNode进行通信。Secondary NameNode Secondary NameNode在Hadoop集群中起到至关重要的作用，首先需要明确它并不是NameNode的备份节点，它和NameNode运行在不同的主机上，它主要的工作是阶段性地合并NameNode的日志文件，控制NameNode日志文件的大小。此外，在NameNode硬盘损坏的情况下，Secondary NameNode也可用作数据恢复，但恢复的只是部分数据。HDFS架构及工作原理下图为HDFS对数据存储的原理图，NameNode存储了DataNode节点所存储数据的元数据，即Hdfs和MapReduce两个文件的分块信息，假设单个文件的存储份数为3，即每个数据块有三份备份，那么数据在DataNode上的存储的原则为：相同的两个数据块存储在同一机架的不同的DataNode节点上；第三个数据块存储在不同机架上的DataNode节点上。这样就解决了当某个DataNode节点出现故障的时候数据丢失的问题，保障了存储在HDFS系统上数据的可用性。Hadoop MapReduceMapReduce是Google公司的核心计算模型，它将运行于大规模集群上的复杂的并行计算过程高度地抽象为两个函数：Map和Reduce。MapReduce也可以看成是一种解决问题的方法，它把一个复杂的任务分解成多个任务，Map负责把任务分解成多个任务，Reduce负责把分解后多任务处理的结果汇总起来。Hadoop中的MapReduce是一个简易的软件框架，基于它写出来的应用程序能够运行在由上千台机器组成的大型集群上，并以一种可靠容错的方式并行处理TB级别的数据集，实现了Hadoop在集群上的数据和任务的并行计算与处理。在并行计算中其他的种种复杂的问题，如分布式存储、工作调度、负载均衡、容错处理、网络通信等均由MapReduce框架负责处理，编程人员可以不用关心。用MapReduce来处理的数据集必须具备这样的特点：待处理的数据集可以分解成许多小的数据集，并且每个小的数据集都可以完全并行地进行处理。Hadoop MapReduce实现Hadoop MapReduce是基于HDFS的MapReduce编程框架实现的，我们把MapReduce处理的问题称为作业 (Job)，并将作业分解为任务 (Task)，在MapReduce执行过程中需要有两种任务。Map 把输入的键/值对转换成一组中间结果的键/值对.Reduce 把Map任务产生的一组具有相同键的中间结果根据逻辑转换生成较小的最终结果。Hadoop MapReduce的服务进程Hadoop MapReduce有两个主要的服务进程，一个是单独运行在主节点上的JobTracker进程，另一个是运行在每个集群从节点上的TaskTracker进程。服务进程部署如下图所示。JobTraker和NameNode运行在同一个服务器上，我们称为Hadoop集群的主节点，负责接收客户端提交的作业，并将任务分配到不同的计算节点TaskTracker上，同时监控作业的运行情况，完成作业的更新和容错处理；Tasktracker通常和DataNode装在一起，称为Hadoop集群的从节点，它调用Map和Reduce执行JobTracker指派的任务，并发送心跳消息给JobTracker，向JobTracker汇报可运行任务的数量。Hadoop安全机制Hadoop 一直缺乏安全机制，主要表现在以下几个方面。User to Service：NameNode或者JobTracker缺乏安全认证机制；DataNode缺乏安全授权机制；JobTracker缺乏安全授权机制。Service to Service安全认证：Datanode与TaskTracker缺乏安全授权机制，这使得用户可以随意启动假的DataNode和TaskTracker。磁盘或者通信连接没有经过加密。为了增强Hadoop的安全机制， 从2009年起Apache专门抽出一个团队为Hadoop增加安全认证和授权机制，Apache Hadoop 1.0.0版本之后的版本添加了安全机制，但是升级到该版本后可能会导致Hadoop的一些应用不可用。

　　现场总线简介　　它是一种工业数据总线，是自动化领域中底层数据通信网络。　　按照IEC的解释　　现场总线是指安装在制造或过程区域的现场装置与控制室内的自动装置之间的数字式、串行、多点通信的数据总线。 简单说，现场总线就是以数字通信替代了传统4-20mA模拟信号及普通开关量信号的传输。　　定义　　是连接智能现场设备和自动化系统的全数字、双向、多站的通信系统。主要解决工业现场的智能化仪器仪表、控制器、执行机构等现场设备间的数字通信以及这些现场控制设备和高级控制系统之间的信息传递问题 。　　主要用于　　制造业、流程工业、交通、楼宇、电力等方面的自动化系统中。　　典型的现场总线技术　　2003年4月，IEC61158 Ed.3现场总线标准第3版正式成为国际标准，规定10种类型的现场总线。 Type 1 TS61158现场总线 Type 2 ControlNet和Ethernet/IP现场总线 Type 3 Profibus现场总线 Type 4 P-NET现场总线 Type 5 FF HSE现场总线 Type 6 SwiftNet现场总线 Type 7 World FIP现场总线 Type 8 Interbus现场总线 Type 9 FF H1现场总线 Type 10 PROFInet现场总线　　现场总线的特点及优点　　(1) 全数字化通信 (2) 开放型的互联网络 (3) 互可操作性与互用性 (4) 现场设备的智能化 (5) 系统结构的高度分散性 (6) 对现场环境的适应性　　现场总线的特点　　现场控制设备具有通信功能，便于构成工厂底层控制网络。 通信标准的公开、一致，使系统具备开放性，设备间具有互可操作性。 功能块与结构的规范化使相同功能的设备间具有互换性。 控制功能下放到现场，使控制系统结构具备高度的分散性。　　现场总线的优点　　现场总线使自控设备与系统步入了信息网络的行列，为其应用开拓了更为广阔的领域； 一对双绞线上可挂接多个控制设备， 便于节省安装费用； 节省维护开销； 提高了系统的可靠性； 为用户提供了更为灵活的系统集成主动权。 现场总线技术的发展趋势　　发展趋势　　从现场总线技术本身来分析，它有两个明显的发展趋势： 一是寻求统一的现场总线国际标准 二是Industrial Ethernet走向工业控制网络 统一、开放的TCP/IP Ethernet是20多年来发展最成功的网络技术 ，过去一直认为，Ethernet是为IT领域应用而开发的，它与工业网络在实时性、环境适应性、总线馈电等许多方面的要求存在差距，在工业自动化领域只能得到有限应用。事实上，这些问题正在迅速得到解决，国内对EPA技术（Ethernet for Process Automation）也取得了很大的进展。 随着FF HSE的成功开发以及PROFInet的推广应用，可以预见Ethernet技术将会十分迅速地进入工业控制系统的各级网络。　　工业以太网的发展　　国际上形成的工业以太网技术的四大阵营： 主要用于离散制造控制系统的是： Modbus-IDA工业以太网 Ethernet/IP工业以太网 PROFInet工业以太网 主要用于过程控制系统的是： Foundation Fieldbus HSE工业以太网 随着科学技术的快速发展，过程控制领域在过去的两个世纪里发生了巨大的变革。150多年前出现的基于5－13psi的气动信号标准（PCS，Pneumatic Control System气动控制系统），标志着控制理论初步形成，但此时尚未有控制室的概念；20世纪50年代，随着基于0－10mA或4－20mA的电流模拟信号的模拟过程控制体系被提出并得到广泛的应用，标志了电气自动控制时代的到来，三大控制论的确立奠定了现代控制的基础，设立控制室、控制功能分离的模式也一直沿用至今；20世纪70年代，随着数字计算机的介入，产生了“集中控制”的中央控制计算机系统，而信号传输系统大部分是依然沿用4－20mA的模拟信号，不久人们也发现了伴随着“集中控制”，该系统存在着易失控、可靠性低的缺点，并很快将其发展为分布式控制系统（DCS，Distributed Control System分布式控制系统）；微处理器的普遍应用和计算机可靠性的提高，使分布式控制系统得到了广泛的应用，由多台计算机和一些智能仪表以及智能部件实现的分布式控制是其最主要的特征，而数字传输信号也在逐步取代模拟传输信号。随着微处理器的快速发展和广泛的应用，数字通信网络延伸到工业过程现场成为可能，产生了以微处理器为核心，使用集成电路代替常规电子线路，实施信息采集、显示、处理、传输以及优化控制等功能的智能设备。设备之间彼此通信、控制，在精度、可操作性以及可靠性、可维护性等都有更高的要求。由此，导致了现场总线的产生。　　现场总线的实质和优点　　1984年，现场总线的概念得到正式提出。IEC（International Electrotechnical Commission,国际电工委员会）对现场总线（Fieldbus）的定义为：现场总线是一种应用于生产现场，在现场设备之间、现场设备和控制装置之间实行双向、串形、多结点的数字通信技术。　　现场总线的本质体现　　不同的机构和不同的人可能对现场总线有着不同的定义，不过通常情况下，大家公认在以下六个方面：　　现场通信网络　　用于过程自动化和制造自动化的现场设备或现场仪表互连的现场通信网络。　　现场设备互联　　依据实际需要使用不同的传输介质把不同的现场设备或者现场仪表相互关联。　　互操作性　　用户可以根据自身的需求选择不同厂家或不同型号的产品构成所需的控制回路，从而可以自由地集成FCS。　　分散功能块　　FCS 废弃了DCS 的输入/输出单元和控制站, 把DCS 控制站的功能块分散地分配给现场仪表, 从而构成虚拟控制站，彻底地实现了分散控制。　　通信线供电　　通信线供电方式允许现场仪表直接从通信线上摄取能量, 这种方式提供用于本质安全环境的低功耗现场仪表, 与其配套的还有安全栅。　　开放式互联网络　　现场总线为开放式互联网络，既可以与同层网络互联，也可与不同层网络互联，还可以实现网络数据库的共享。 从以上内容我们可以看到，现场总线体现了分布、开放、互联、高可靠性的特点，而这些正是DCS系统的缺点。DCS通常是一对一单独传送信号，其所采用的模拟信号精度低，易受干扰，位于操作室的操作员对模拟仪表往往难以调整参数和预测故障，处于“失控”状态，很多的仪表厂商自定标准，互换性差，仪表的功能也较单一，难以满足现代的要求，而且几乎所有的控制功能都位于控制站中。FCS则采取一对多双向传输信号，采用的数字信号精度高、可靠性强，设备也始终处于操作员的远程监控和可控状态，用户可以自由按需选择不同品牌种类的设备互联，智能仪表具有通信、控制和运算等丰富的功能，而且控制功能分散到各个智能仪表中去。由此我们可以看到FCS相对于DCS的巨大进步。 也正是由于FCS的以上特点使得其在设计、安装、投运到正常生产都具有很大的优越性：首先由于分散在前端的智能设备能执行较为复杂的任务，不再需要单独的控制器、计算单元等，节省了硬件投资和使用面积；FCS的接线较为简单，而且一条传输线可以挂接多了设备，大大节约了安装费用；由于现场控制设备往往具有自诊断功能，并能将故障信息发送至控制室，减轻了维护工作；同时，由于用户拥有高度的系统集成自主权，可以通过比较灵活选择合适的厂家产品；整体系统的可靠性和准确性也大为提高。这一切都帮助用户实现了减低安装、使用、维护的成本，最终达到增加利润的目的。　　现场总线的现状　　由于各个国家各个公司的利益之争，虽然早在1984年国际电工技术委员会/国际标准协会（IEC/ISA）就着手开始制定现场总线的标准，至今统一的标准仍未完成。很多公司也推出其各自的现场总线技术，但彼此的开放性和互操作性还难以统一。目前现场总线市场有着以下的特点：　　多种现场总线并存　　目前世界上存在着大约四十余种现场总线，如法国的FIP，英国的ERA，德国西门子公司Siemens的ProfiBus，挪威的FINT，Echelon公司的LONWorks，PhenixContact公司的InterBus，RoberBosch公司的CAN，Rosemounr公司的HART，CarloGarazzi公司的Dupline，丹麦ProcessData公司的P-net，PeterHans公司的F-Mux，以及ASI（ActraturSensorInterface），MODBus，SDS，Arcnet，国际标准组织-基金会现场总线FF：FieldBusFoundation，WorldFIP，BitBus，美国的DeviceNet与ControlNet等等。这些现场总线大都用于过程自动化、医药领域、加工制造、交通运输、国防、航天、农业和楼宇等领域，大概不到十种的总线占有80％左右的市场。　　各种总线都有其应用的领域　　每种总线大都有其应用的领域，比如FF、PROFIBUS-PA适用于石油、化工、医药、冶金等行业的过程控制领域；LonWrks、PROFIBUS-FMS、DevieceNet适用于楼宇、交通运输、农业等领域；DeviceNet、PROFIBUS-DP适用于加工制造业，而这些划分也不是绝对的，每种现场总线都力图将其应用领域扩大，彼此渗透。　　每种现场总线都有其国际组织和支持背景　　大多数的现场总线都有一个或几个大型跨国公司为背景并成立相应的国际组织，力图扩大自己的影响、得到更多的市场份额。比如PROFIBUS以Siemens公司为主要支持，并成立了PROFIBUS国际用户组织WorldFIP以Alstom公司为主要后台，成立了WorldFIP国际用户组织。　　多种总线成为国家和地区标准　　为了加强自己的竞争能力，很多总线都争取成为国家或者地区的标准，比如PROFIBUS已成为德国标准，WorldFIP已成为法国标准等。　　设备制造商参与多个总线组织　　为了扩大自己产品的使用范围，很多设备制造商往往参与不止一个甚至多个总线组织。　　各个总线彼此协调共存　　由于竞争激烈，而且还没有哪一种或几种总线能一统市场，很多重要企业都力图开发接口技术，使自己的总线能和其他总线相连，在国际标准中也出现了协调共存的局面。 工业自动化技术应用于各行各业，要求也千变万化，使用一种现场总线技术也很难满足所有行业的技术要求；现场总线不同于计算机网络，人们将会面对一个多种总线技术标准共存的现实世界。技术发展很大程度上受到市场规律、商业利益的制约；技术标准不仅是一个技术规范，也是一个商业利益的妥协产物。而现场总线的关键技术之一是彼此的互操作性，实现现场总线技术的统一是所有用户的愿望。　　主流现场总线简介　　下面就几种主流的现场总线做一简单介绍。 1基金会现场总线（FoundationFieldbus 简称FF） 这是以美国Fisher-Rousemount公司为首的联合了横河、ABB、西门子、英维斯等80家公司制定的ISP协议和以Honeywell公司为首的联合欧洲等地150余家公司制定的WorldFIP协议于1994年9月合并的。该总线在过程自动化领域得到了广泛的应用，具有良好的发展前景。 基金会现场总线采用国际标准化组织ISO的开放化系统互联OSI的简化模型（1，2，7层），即物理层、数据链路层、应用层，另外增加了用户层。FF分低速H1和高速H2两种通信速率，前者传输速率为31.25Kbit/秒，通信距离可达1900m，可支持总线供电和本质安全防爆环境。后者传输速率为1Mbit/秒和2.5Mbit/秒，通信距离为750m和500m，支持双绞线、光缆和无线发射，协议符号IEC1158-2标准。FF的物理媒介的传输信号采用曼切斯特编码。 CAN（ControllerAreaNetwork 控制器局域网） 最早由德国BOSCH公司推出，它广泛用于离散控制领域，其总线规范已被ISO国际标准组织制定为国际标准，得到了Intel、Motorola、NEC等公司的支持。CAN协议分为二层：物理层和数据链路层。CAN的信号传输采用短帧结构，传输时间短，具有自动关闭功能，具有较强的抗干扰能力。CAN支持多主工作方式，并采用了非破坏性总线仲裁技术，通过设置优先级来避免冲突，通讯距离最远可达10KM/5Kbps/s，通讯速率最高可达40M /1Mbp/s，网络节点数实际可达110个。目前已有多家公司开发了符合CAN协议的通信芯片。 Lonworks 它由美国Echelon公司推出，并由Motorola、Toshiba公司共同倡导。它采用ISO/OSI模型的全部7层通讯协议，采用面向对象的设计方法，通过网络变量把网络通信设计简化为参数设置。支持双绞线、同轴电缆、光缆和红外线等多种通信介质，通讯速率从300bit/s至1.5M/s不等，直接通信距离可达2700m（78Kbit/s），被誉为通用控制网络。Lonworks技术采用的LonTalk协议被封装到Neuron（神经元）的芯片中，并得以实现。采用Lonworks技术和神经元芯片的产品，被广泛应用在楼宇自动化、家庭自动化、保安系统、办公设备、交通运输、工业过程控制等行业。 DeviceNet DeviceNet是一种低成本的通信连接也是一种简单的网络解决方案，有着开放的网络标准。DeviceNet具有的直接互联性不仅改善了设备间的通信而且提供了相当重要的设备级阵地功能。DebiceNet基于CAN技术，传输率为125Kbit/s至500Kbit/s,每个网络的最大节点为64个，其通信模式为：生产者/客户（Producer/Consumer），采用多信道广播信息发送方式。位于DeviceNet网络上的设备可以自由连接或断开，不影响网上的其他设备，而且其设备的安装布线成本也较低。DeviceNet总线的组织结构是Open DeviceNet Vendor Association（开放式设备网络供应商协会，简称“ODVA”）。 5PROFIBUS PROFIBUS是德国标准（DIN19245）和欧洲标准（EN50170）的现场总线标准。由PROFIBUS--DP、PROFIBUS－FMS、PROFIBUS－PA系列组成。DP用于分散外设间高速数据传输，适用于加工自动化领域。FMS适用于纺织、楼宇自动化、可编程控制器、低压开关等。PA用于过程自动化的总线类型，服从IEC1158－2标准。PROFIBUS支持主-从系统、纯主站系统、多主多从混合系统等几种传输方式。PROFIBUS的传输速率为9.6Kbit/s至12Mbit/s，最大传输距离在9.6Kbit/s下为1200m，在12Mbit/s小为200m，可采用中继器延长至10km，传输介质为双绞线或者光缆，最多可挂接127个站点。 6HART HART是Highway Addressable Remote Transducer的缩写，最早由Rosemount公司开发。其特点是在现有模拟信号传输线上实现数字信号通信，属于模拟系统向数字系统转变的过渡产品。其通信模型采用物理层、数据链路层和应用层三层，支持点对点主从应答方式和多点广播方式。由于它采用模拟数字信号混和，难以开发通用的通信接口芯片。HART能利用总线供电，可满足本质安全防爆的要求，并可用于由手持编程器与管理系统主机作为主设备的双主设备系统。 7CC-Link CC-Link是Control&Communication Link（控制与通信链路系统）的缩写，在1996年11月，由三菱电机为主导的多家公司推出，其增长势头迅猛，在亚洲占有较大份额。在其系统中，可以将控制和信息数据同是以10Mbit/s高速传送至现场网络，具有性能卓越、使用简单、应用广泛、节省成本等优点。其不仅解决了工业现场配线复杂的问题，同时具有优异的抗噪性能和兼容性。CC-Link是一个以设备层为主的网络，同时也可覆盖较高层次的控制层和较低层次的传感层。2005年7月CC-Link被中国国家标准委员会批准为中国国家标准指导性技术文件。 8WorldFIP WorkdFIP的北美部分与ISP合并为FF以后，WorldFIP的欧洲部分仍保持独立，总部设在法国。其在欧洲市场占有重要地位，特别是在法国占有率大约为60%。WorldFIP的特点是具有单一的总线结构来适用不同的应用领域的需求，而且没有任何网关或网桥，用软件的办法来解决高速和低速的衔接。WorldFIP与FFHSE可以实现“透明联接”，并对FF的H1进行了技术拓展，如速率等。在与IEC61158第一类型的连接方面，WorldFIP做得最好，走在世界前列。 INTERBUS INTERBUS是德国Phoenix公司推出的较早的现场总线，2000年2月成为国际标准IEC61158。INTERBUS采用国际标准化组织ISO的开放化系统互联OSI的简化模型（1，2，7层），即物理层、数据链路层、应用层，具有强大的可靠性、可诊断性和易维护性。其采用集总帧型的数据环通信，具有低速度、高效率的特点，并严格保证了数据传输的同步性和周期性；该总线的实时性、抗干扰性和可维护性也非常出色。INTERBUS广泛地应用到汽车、烟草、仓储、造纸、包装、食品等工业，成为国际现场总线的领先者。 此外较有影响的现场总线还有丹麦公司Process-Data A/S 提出的P-Net，该总线主要应用于农业、林业、水利、食品等行业；SwiftNet现场总线主要使用在航空航天等领域，还有一些其他的现场总线这里就不再赘述了。　　现场总线的发展和以太网　　现场总线技术是控制、计算机、通讯技术的交叉与集成，几乎涵盖了所有连续、离散工业领域，如过程自动化、制造加工自动化、楼半自动化、家庭自动化等等。它的出现和快速发展体现了控制领域对降低成本、提高可靠性、增强可维护性和提高数据采集的智能化的要求。现场总线技术的发展体现为两个方面：一个是低速现场总线领域的不断发展和完善；另一个是高速现场总线技术的发展。而目前现场总线产品主要是低速总线产品，应用于运行速率较低的领域，对网络的性能要求不是很高。从实际应用状况看，大多数现场总线，都能较好地实现速率要求较低的过程控制。因此，在速率要求较低的控制领域，谁都很难统一整个市场。就目前而言，由于FF基金会几乎集中了世界上主要自动化仪表制造商，其全球影响力日益增加，但其在中国市场营销力度似乎不足，市场份额不是很高，LonWorks形成了全面的分工合作体系，在国内有一些实质性的进展，在楼宇自动化、家庭自动化、智能通信产品等方面，LonWorks则具有独特的优势。在离散制造加工领域，由于行业应用的特点和历史原因，Profibus和CAN经在这一领域形成了自己的优势，具有较强的竞争力。国内厂商的规模相对较小，研发能力较差，更多的是依赖技术供应商的支持，比较容易受现场总线技术供应商 (芯片制造商等)对国内的支持和市场推广力度的影响。而且，还有一个不可忽视的一点就是在构建自动化管理系统时，选择的上位机，比如组态软件对总线设备的支持程度，有些监控组态软件，比如紫金桥监控组态软件或者InTouch等对一些主流的总线设备比如Lonworks、PROFIBUS、CAN等有着良好的支持，通过DDE、OPC或者直接连接等方式进行通讯，采集数据。这样可以方便用户的选择，而一些组态软件则支持的种类较少，是用户选择的范围也随之减少。 由于目前自动化技术从单机控制发展到工厂自动化FA，发展到系统自动化。工厂自动化信息网络可分为以下三层结构：工厂管理级、车间监控级、现场设备级，而现场总线是工厂底层设备之间的通信网络。这里先介绍一下以太网，本文特指工业以太网，工业以太网是作为办公室自动化领域衍生的工业网络协议，按习惯主要指IEEE 802.3协议，如果进一步采用TCP/IP协议族，则采用“以太网+TCP/IP”来表示，其技术特点主要适合信息管理、信息处理系统，并在IT业得到了巨大的成功。在工厂管理级、车间监控级信息集成领域中，工业以太网已有不少成功的案例，在设备层对实时性没有严格要求场合也有许多应用。由于现场总线目前种类繁多，标准不一，很多人都希望以太网技术能介入设备低层，广泛取代现有现场总线技术，施耐德公司就是该想法的积极倡导者和实践者，目前已有一批工业级产品问世和实际应用。可是就目前而言，以太网还不能够真正解决实时性和确定性问题，大部分现场层仍然会首选现场总线技术。由于技术的局限和各个厂家的利益之争，这样一个多种工业总线技术并存，以太网技术不断渗透的现状还会维持一段时间。用户可以根据技术要求和实际情况来选择所需的解决方案。

　　客户端通过调用FileSystem对象（对应于HDFS文件系统，调用DistributedFileSystem对象）的open()方法来打开文件（也即图中的第一步），DistributedFileSystem通过RPC（Remote Procedure Call）调用询问NameNode来得到此文件最开始几个block的文件位置（第二步）。对每一个block来说，namenode返回拥有此block备份的所有namenode的地址信息（按集群的拓扑网络中与客户端距离的远近排序，关于在Hadoop集群中如何进行网络拓扑请看下面介绍）。如果客户端本身就是一个datanode（如客户端是一个mapreduce任务）并且此datanode本身就有所需文件block的话，客户端便从本地读取文件。　　以上步骤完成后，DistributedFileSystem会返回一个FSDataInputStream（支持文件seek），客户端可以从FSDataInputStream中读取数据。FSDataInputStream包装了一个DFSInputSteam类，用来处理namenode和datanode的I/O操作。　　客户端然后执行read()方法（第三步），DFSInputStream（已经存储了欲读取文件的开始几个block的位置信息）连接到第一个datanode（也即最近的datanode）来获取数据。通过重复调用read()方法（第四、第五步），文件内的数据就被流式的送到了客户端。当读到该block的末尾时，DFSInputStream就会关闭指向该block的流，转而找到下一个block的位置信息然后重复调用read()方法继续对该block的流式读取。这些过程对于用户来说都是透明的，在用户看来这就是不间断的流式读取整个文件。　　当真个文件读取完毕时，客户端调用FSDataInputSteam中的close（）方法关闭文件输入流（第六步）。　　如果在读某个block是DFSInputStream检测到错误，DFSInputSteam就会连接下一个datanode以获取此block的其他备份，同时他会记录下以前检测到的坏掉的datanode以免以后再无用的重复读取该datanode。DFSInputSteam也会检查从datanode读取来的数据的校验和，如果发现有数据损坏，它会把坏掉的block报告给namenode同时重新读取其他datanode上的其他block备份。　　这种设计模式的一个好处是，文件读取是遍布这个集群的datanode的，namenode只是提供文件block的位置信息，这些信息所需的带宽是很少的，这样便有效的避免了单点瓶颈问题从而可以更大的扩充集群的规模。　　Hadoop中的网络拓扑　　在Hadoop集群中如何衡量两个节点的远近呢？要知道，在高速处理数据时，数据处理速率的唯一限制因素就是数据在不同节点间的传输速度：这是由带宽的可怕匮乏引起的。所以我们把带宽作为衡量两个节点距离大小的标准。　　但是计算两个节点之间的带宽是比较复杂的，而且它需要在一个静态的集群下才能衡量，但Hadoop集群一般是随着数据处理的规模动态变化的（且两两节点直接相连的连接数是节点数的平方）。于是Hadoop使用了一个简单的方法来衡量距离，它把集群内的网络表示成一个树结构，两个节点之间的距离就是他们离共同祖先节点的距离之和。树一般按数据中心(datacenter)，机架(rack)，计算节点(datanode)的结构组织。计算节点上的本地运算速度最快，跨数据中心的计算速度最慢（现在跨数据中心的Hadoop集群用的还很少，一般都是在一个数据中心内做运算的）。　　假如有个计算节点n1处在数据中心c1的机架r1上，它可以表示为/c1/r1/n1，下面是不同情况下两个节点的距离：　　u2022 distance(/d1/r1/n1, /d1/r1/n1) = 0 (processes on the same node)　　u2022 distance(/d1/r1/n1, /d1/r1/n2) = 2 (different nodes on the same rack)　　u2022 distance(/d1/r1/n1, /d1/r2/n3) = 4 (nodes on different racks in the same data center)　　u2022 distance(/d1/r1/n1, /d2/r3/n4) = 6 (nodes in different data centers)　　如下图所示：　　Hadoop　　写文件　　现在我们来看一下Hadoop中的写文件机制解析，通过写文件机制我们可以更好的了解一下Hadoop中的一致性模型。　　Hadoop　　上图为我们展示了一个创建一个新文件并向其中写数据的例子。　　首先客户端通过DistributedFileSystem上的create()方法指明一个欲创建的文件的文件名（第一步），DistributedFileSystem再通过RPC调用向NameNode申请创建一个新文件（第二步，这时该文件还没有分配相应的block）。namenode检查是否有同名文件存在以及用户是否有相应的创建权限，如果检查通过，namenode会为该文件创建一个新的记录，否则的话文件创建失败，客户端得到一个IOException异常。DistributedFileSystem返回一个FSDataOutputStream以供客户端写入数据，与FSDataInputStream类似，FSDataOutputStream封装了一个DFSOutputStream用于处理namenode与datanode之间的通信。　　当客户端开始写数据时（第三步），DFSOutputStream把写入的数据分成包（packet）, 放入一个中间队列——数据队列（data queue）中去。DataStreamer从数据队列中取数据，同时向namenode申请一个新的block来存放它已经取得的数据。namenode选择一系列合适的datanode（个数由文件的replica数决定）构成一个管道线（pipeline），这里我们假设replica为3，所以管道线中就有三个datanode。DataSteamer把数据流式的写入到管道线中的第一个datanode中（第四步），第一个datanode再把接收到的数据转到第二个datanode中（第四步），以此类推。　　DFSOutputStream同时也维护着另一个中间队列——确认队列（ack queue），确认队列中的包只有在得到管道线中所有的datanode的确认以后才会被移出确认队列（第五步）。　　如果某个datanode在写数据的时候当掉了，下面这些对用户透明的步骤会被执行：　　1）管道线关闭，所有确认队列上的数据会被挪到数据队列的首部重新发送，这样可以确保管道线中当掉的datanode下流的datanode不会因为当掉的datanode而丢失数据包。　　2）在还在正常运行的datanode上的当前block上做一个标志，这样当当掉的datanode重新启动以后namenode就会知道该datanode上哪个block是刚才当机时残留下的局部损坏block，从而可以把它删掉。　　3）已经当掉的datanode从管道线中被移除，未写完的block的其他数据继续被写入到其他两个还在正常运行的datanode中去，namenode知道这个block还处在under-replicated状态（也即备份数不足的状态）下，然后他会安排一个新的replica从而达到要求的备份数，后续的block写入方法同前面正常时候一样。　　有可能管道线中的多个datanode当掉（虽然不太经常发生），但只要dfs.replication.min（默认为1）个replica被创建，我们就认为该创建成功了。剩余的replica会在以后异步创建以达到指定的replica数。　　当客户端完成写数据后，它会调用close()方法（第六步）。这个操作会冲洗（flush）所有剩下的package到pipeline中，等待这些package确认成功，然后通知namenode写入文件成功（第七步）。这时候namenode就知道该文件由哪些block组成（因为DataStreamer向namenode请求分配新block，namenode当然会知道它分配过哪些blcok给给定文件），它会等待最少的replica数被创建，然后成功返回。　　replica是如何分布的　　Hadoop在创建新文件时是如何选择block的位置的呢，综合来说，要考虑以下因素：带宽（包括写带宽和读带宽）和数据安全性。如果我们把三个备份全部放在一个datanode上，虽然可以避免了写带宽的消耗，但几乎没有提供数据冗余带来的安全性，因为如果这个datanode当机，那么这个文件的所有数据就全部丢失了。另一个极端情况是，如果把三个冗余备份全部放在不同的机架，甚至数据中心里面，虽然这样数据会安全，但写数据会消耗很多的带宽。Hadoop 0.17.0给我们提供了一个默认replica分配策略（Hadoop 1.X以后允许replica策略是可插拔的，也就是你可以自己制定自己需要的replica分配策略）。replica的默认分配策略是把第一个备份放在与客户端相同的datanode上（如果客户端在集群外运行，就随机选取一个datanode来存放第一个replica），第二个replica放在与第一个replica不同机架的一个随机datanode上，第三个replica放在与第二个replica相同机架的随机datanode上。如果replica数大于三，则随后的replica在集群中随机存放，Hadoop会尽量避免过多的replica存放在同一个机架上。选取replica的放置位置后，管道线的网络拓扑结构如下所示：　　Hadoop　　总体来说，上述默认的replica分配策略给了我们很好的可用性（blocks放置在两个rack上，较为安全），写带宽优化（写数据只需要跨越一个rack），读带宽优化（你可以从两个机架中选择较近的一个读取）。　　一致性模型　　HDFS某些地方为了性能可能会不符合POSIX（是的，你没有看错，POSIX不仅仅只适用于linux/unix， Hadoop 使用了POSIX的设计来实现对文件系统文件流的读取 ），所以它看起来可能与你所期望的不同，要注意。　　创建了一个文件以后，它是可以在命名空间（namespace）中可以看到的：　　Path p = new Path("p");　　fs.create(p);　　assertThat(fs.exists(p), is(true));　　但是任何向此文件中写入的数据并不能保证是可见的，即使你flush了已经写入的数据，此文件的长度可能仍然为零：　　Path p = new Path("p");　　OutputStream out = fs.create(p);　　out.write("content".getBytes("UTF-8"));　　out.flush();　　assertThat(fs.getFileStatus(p).getLen(), is(0L));　　这是因为，在Hadoop中，只有满一个block数据量的数据被写入文件后，此文件中的内容才是可见的（即这些数据会被写入到硬盘中去），所以当前正在写的block中的内容总是不可见的。　　Hadoop提供了一种强制使buffer中的内容冲洗到datanode的方法，那就是FSDataOutputStream的sync()方法。调用了sync()方法后，Hadoop保证所有已经被写入的数据都被冲洗到了管道线中的datanode中，并且对所有读者都可见了：　　Path p = new Path("p");　　FSDataOutputStream out = fs.create(p);　　out.write("content".getBytes("UTF-8"));　　out.flush();　　out.sync();　　assertThat(fs.getFileStatus(p).getLen(), is(((long) "content".length())));　　这个方法就像POSIX中的fsync系统调用（它冲洗给定文件描述符中的所有缓冲数据到磁盘中）。例如，使用java API写一个本地文件，我们可以保证在调用flush()和同步化后可以看到已写入的内容：　　FileOutputStream out = new FileOutputStream(localFile);　　out.write("content".getBytes("UTF-8"));　　out.flush(); // flush to operating system　　out.getFD().sync(); // sync to disk （getFD()返回与该流所对应的文件描述符）　　assertThat(localFile.length(), is(((long) "content".length())));　　在HDFS中关闭一个流隐式的调用了sync()方法：　　Path p = new Path("p");　　OutputStream out = fs.create(p);　　out.write("content".getBytes("UTF-8"));　　out.close();　　assertThat(fs.getFileStatus(p).getLen(), is(((long) "content".length())));　　由于Hadoop中的一致性模型限制，如果我们不调用sync()方法的话，我们很可能会丢失多大一个block的数据。这是难以接受的，所以我们应该使用sync()方法来确保数据已经写入磁盘。但频繁调用sync()方法也是不好的，因为会造成很多额外开销。我们可以再写入一定量数据后调用sync()方法一次，至于这个具体的数据量大小就要根据你的应用程序而定了，在不影响你的应用程序的性能的情况下，这个数据量应越大越好。

Hadoop在2006年开始成为雅虎项目，随后晋升为顶级Apache开源项目。它是一种通用的分布式系统基础架构，具有多个组件：Hadoop分布式文件系统(HDFS)，它将文件以Hadoop本机格式存储并在集群中并行化; YARN，协调应用程序运行时的调度程序; MapReduce，这是实际并行处理数据的算法。Hadoop使用Java编程语言构建，其上的应用程序也可以使用其他语言编写。用一个Thrift客户端，用户可以编写MapReduce或者Python代码。除了这些基本组件外，Hadoop还包括Sqoop，它将关系数据移入HDFS; Hive，一种类似SQL的接口，允许用户在HDFS上运行查询; Mahout，机器学习。除了将HDFS用于文件存储之外，Hadoop现在还可以配置使用S3 buckets或Azure blob作为输入。它可以在Apache发行版开源，也可以用Cloudera(规模和范围最大的Hadoop供应商)，MapR或HortonWorks等厂商提供。

简单的说，单机模式只是执行程序用的，没有分布式环境。伪分布式是在一台电脑里虚拟出n个节点，执行hadoop程序的时候就和多台电脑环境一样。

所谓海计算、雾计算等与云计算区别开来的计算架构，都讲的是一回事：performing data processing at the edge of the network, near the source of the data。目前学术界最为承认的表述方式是Edge Computing（边缘计算），自去年起IEEE与ACM合办了边缘计算研讨会议SEC（IEEE/ACM Symposium on Edge Computing）。Edge Computing是一种介于传统嵌入式计算与云端数据中心计算中间的一种混合计算架构，它的催生主要有以下两点原因：配备各式传感器的边缘设备急剧增长，其所产生的海量的感知数据不同于互联网数据，具有高频、周期性不间断的特征，集中于云端数据中心处理的模式对网络传输带宽与流量要求难以满足，并难以保证实时性。海量的感知数据全方位地刻画用户生活与工作的真实写照，完全上传于云端进行处理与分析不可避免地会引发隐私窥探与泄露问题。

1. 大数据专业课程有哪些 首先我们要了解Java语言和Linux操作系统，这两个是学习大数据的基础，学习的顺序不分前后。 Java ：只要了解一些基础即可，做大数据不需要很深的Java 技术，学java SE 就相当于有学习大数据。基础 Linux：因为大数据相关软件都是在Linux上运行的，所以Linux要学习的扎实一些，学好Linux对你快速掌握大数据相关技术会有很大的帮助，能让你更好的理解hadoop、hive、hbase、spark等大数据软件的运行环境和网络环境配置，能少踩很多坑，学会shell就能看懂脚本这样能更容易理解和配置大数据集群。还能让你对以后新出的大数据技术学习起来更快。 好说完基础了，再说说还需要学习哪些大数据技术，可以按我写的顺序学下去。 Hadoop：这是现在流行的大数据处理平台几乎已经成为大数据的代名词，所以这个是必学的。Hadoop里面包括几个组件HDFS、MapRece和YARN，HDFS是存储数据的地方就像我们电脑的硬盘一样文件都存储在这个上面，MapRece是对数据进行处理计算的，它有个特点就是不管多大的数据只要给它时间它就能把数据跑完，但是时间可能不是很快所以它叫数据的批处理。 记住学到这里可以作为你学大数据的一个节点。 Zookeeper：这是个万金油，安装Hadoop的HA的时候就会用到它，以后的Hbase也会用到它。它一般用来存放一些相互协作的信息，这些信息比较小一般不会超过1M，都是使用它的软件对它有依赖，对于我们个人来讲只需要把它安装正确，让它正常的run起来就可以了。 Mysql：我们学习完大数据的处理了，接下来学习学习小数据的处理工具mysql数据库，因为一会装hive的时候要用到，mysql需要掌握到什么层度那?你能在Linux上把它安装好，运行起来，会配置简单的权限，修改root的密码，创建数据库。这里主要的是学习SQL的语法，因为hive的语法和这个非常相似。 Sqoop：这个是用于把Mysql里的数据导入到Hadoop里的。当然你也可以不用这个，直接把Mysql数据表导出成文件再放到HDFS上也是一样的，当然生产环境中使用要注意Mysql的压力。 Hive：这个东西对于会SQL语法的来说就是神器，它能让你处理大数据变的很简单，不会再费劲的编写MapRece程序。有的人说Pig那?它和Pig差不多掌握一个就可以了。 Oozie：既然学会Hive了，我相信你一定需要这个东西，它可以帮你管理你的Hive或者MapRece、Spark脚本，还能检查你的程序是否执行正确，出错了给你发报警并能帮你重试程序，最重要的是还能帮你配置任务的依赖关系。我相信你一定会喜欢上它的，不然你看着那一大堆脚本，和密密麻麻的crond是不是有种想屎的感觉。 Hbase：这是Hadoop生态体系中的NOSQL数据库，他的数据是按照key和value的形式存储的并且key是唯一的，所以它能用来做数据的排重，它与MYSQL相比能存储的数据量大很多。所以他常被用于大数据处理完成之后的存储目的地。 Kafka：这是个比较好用的队列工具，队列是干吗的?排队买票你知道不?数据多了同样也需要排队处理，这样与你协作的其它同学不会叫起来，你干吗给我这么多的数据(比如好几百G的文件)我怎么处理得过来，你别怪他因为他不是搞大数据的，你可以跟他讲我把数据放在队列里你使用的时候一个个拿，这样他就不在抱怨了马上灰流流的去优化他的程序去了，因为处理不过来就是他的事情。而不是你给的问题。当然我们也可以利用这个工具来做线上实时数据的入库或入HDFS，这时你可以与一个叫Flume的工具配合使用，它是专门用来提供对数据进行简单处理，并写到各种数据接受方(比如Kafka)的。 Spark：它是用来弥补基于MapRece处理数据速度上的缺点，它的特点是把数据装载到内存中计算而不是去读慢的要死进化还特别慢的硬盘。特别适合做迭代运算，所以算法流们特别稀饭它。它是用scala编写的。Java语言或者Scala都可以操作它，因为它们都是用JVM的。 2. hadoop视频教程下载 其实这个课程讲的“微博”项目是《HBase in action》中的例子。其中的源代码都放在 github 上面。 3. 请问哪位有《深入浅出Hadoop实战开发》的视频教程 Hadoop是什么，为什么要学习Hadoop? Hadoop是一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有着高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上。而且它提供高传输率（high throughput）来访问应用程序的数据，适合那些有着超大数据集（large data set）的应用程序。HDFS放宽了（relax）POSIX的要求（requirements）这样可以流的形式访问（streaming access）文件系统中的数据。 Hadoop 是一个能够对大量数据进行分布式处理的软件框架。但是 Hadoop 是以一种可靠、高效、可伸缩的方式进行处理的。Hadoop 是可靠的，因为它假设计算元素和存储会失败，因此它维护多个工作数据副本，确保能够针对失败的节点重新分布处理。Hadoop 是高效的，因为它以并行的方式工作，通过并行处理加快处理速度。Hadoop 还是可伸缩的，能够处理 PB 级数据。此外，Hadoop 依赖于社区服务器，因此它的成本比较低，任何人都可以使用。 Hadoop带有用Java 语言编写的框架，因此运行在 Linux 生产平台上是非常理想的。本课程的讲解是采用linux平台进行模拟讲解，完全基于真实场景进行模拟现实 亮点一:技术点全面,体系完善 本课程在兼顾Hadoop课程知识体系完善的前提下，把实际开发中应用最多、最深、最实用的技术抽取出来，通过本课程，你将达到技术的新高点，进入云计算的美好世界。在技术方面你将彻底掌握基本的Hadoop集群；Hadoop HDFS原理；Hadoop HDFS基本的命令；Namenode的工作机制；HDFS基本配置管理；MapRece原理； HBase的系统架构；HBase的表结构；HBase如何使用MapRece；MapRece高级编程；split的实现详解；Hive入门；Hive结合MapRece；Hadoop的集群安装等众多知识点。 亮点二:基础+实战=应用,兼顾学与练 课程每阶段都安排了实战应用项目,以此方便学生能更快的掌握知识点的应用，如在第一阶段,课程结合HDFS应用,讲解了图片服务器的设计、以及如何利用Java API去对HDFS操作、在第二阶段;课程结合HBase实现微博项目的各种功能，使学员可以活学活用。在第三阶段:HBase和MapRece结合时下了实现话单查询与统计系统，在第四阶段，Hive实战部分，通过实战数据统计系统，使学员在最短的时间内掌握Hive的高级应用。 亮点三:讲师丰富的电信集团云平台运作经验 讲师robby拥有丰富的电信集团工作经验，目前负责云平台的各方面工作，并拥有多年的企业内部培训经验。讲课内容完全贴近企业需求，绝不纸上谈兵。 更多技术亮点参考课程大纲:（本大纲以章节形式命名要为防止某些章节1章节内容超过1课时) 第1章节: > Hadoop背景 > HDFS设计目标 > HDFS不适合的场景 > HDFS架构详尽分析 > MapRece的基本原理 第2章节 > Hadoop的版本介绍 > 安装单机版Hadoop > 安装Hadoop集群 第3章节 > HDFS命令行基本操作 > Namenode的工作机制 > HDFS基本配置管理 第4章节 > HDFS应用实战：图片服务器(1) - 系统设计 > 应用的环境搭建 php + bootstrap + java > 使用Hadoop Java API实现向HDFS写入文件 第5章节 > HDFS应用实战：图片服务器(2) > 使用Hadoop Java API实现读取HDFS中的文件 > 使用Hadoop Java API实现获取HDFS目录列表 > 使用Hadoop Java API实现删除HDFS中的文件 第6章节 > MapRece的基本原理 > MapRece的运行过程 > 搭建MapRece的java开发环境 > 使用MapRece的java接口实现WordCount 第7章节 > WordCount运算过程分析 > MapRece的biner > 使用MapRece实现数据去重 > 使用MapRece实现数据排序 > 使用MapRece实现数据平均成绩计算 第8章节 > HBase详细介绍 > HBase的系统架构 > HBase的表结构，RowKey，列族和时间戳 > HBase中的Master，Region以及Region Server 第9章节 > 使用HBase实现微博应用（1） > 用户注册，登陆和注销的设计 > 搭建环境 struts2 + jsp + bootstrap + jquery + HBase Java API > HBase和用户相关的表结构设计 > 用户注册的实现 第10章节 > 使用HBase实现微博应用（2） > 使用session实现用户登录和注销 > “关注"功能的设计 > “关注"功能的表结构设计 > “关注"功能的实现 第11章节 > 使用HBase实现微博应用（3） > “发微博"功能的设计 > “发微博"功能的表结构设计 > “发微博"功能的实现 > 展现整个应用的运行 第12章节 > HBase与MapRece介绍 > HBase如何使用MapRece 第13章节 > HBase应用实战：话单查询与统计（1） > 应用的整体设计 > 开发环境搭建 > 表结构设计 第14章节 > HBase应用实战：话单查询与统计（2） > 话单入库单设计与实现 > 话单查询的设计与实现 第15章节 > HBase应用实战：话单查询与统计（3） > 统计功能设计 > 统计功能实现 第16章节 > 深入MapRece（1） > split的实现详解 > 自定义输入的实现 > 实例讲解 第17章节 > 深入MapRece（2） > Rece的partition > 实例讲解 第18章节 > Hive入门 > 安装Hive > 使用Hive向HDFS存入结构化数据 > Hive的基本使用 第19章节 > 使用MySql作为Hive的元数据库 > Hive结合MapRece 第20章节 > Hive应用实战:数据统计（1） > 应用设计，表结构设计 第21章节 > Hive应用实战：数据统计（2） > 数据录入与统计的实现 4. 哪个课程题库有hadoop的题 这是在一个平衡Hadoop集群中，为数据节点/任务追踪器提供的规格： 在一个磁盘阵列中要有12到24个1~4TB硬盘 2个频率为2~2.5GHz的四核、六核或八核CPU 64~512GB的内存 有保障的千兆或万兆以太网（存储密度越大，需要的网络吞吐量越高） 名字节点角色负责协调集群上的数据存储，作业追踪器协调数据处理（备用的名字节点不应与集群中的名字节点共存，并且运行在与之相同的硬件环境上。）。Cloudera客户购买在RAID1或10配置上有足够功率和级磁盘数的商用机器来运行名字节点和作业追踪器。 NameNode也会直接需要与群集中的数据块的数量成比列的RAM。一个好的但不精确的规则是对于存储在分布式文件系统里面的每一个1百万的数据块，分配1GB的NameNode内存。于在一个群集里面的100个DataNodes而言，NameNode上的64GB的RAM提供了足够的空间来保证群集的增长。我们也把HA同时配置在NameNode和JobTracker上， 这里就是为NameNode／JobTracker／Standby NameNode节点群的技术细节。驱动器的数量或多或少，将取决于冗余数量的需要。 4–6 1TB 硬盘驱动器 采用 一个 JBOD 配置 (1个用于OS, 2个用于文件系统映像[RAID 1], 1个用于Apache ZooKeeper, 1个用于Journal节点) 2 4-/16-/8-核心 CPUs, 至少运行于 2-2.5GHz 64-128GB 随机存储器 Bonded Gigabit 以太网卡 or 10Gigabit 以太网卡 记住, 在思想上，Hadoop 体系设计为用于一种并行环境。 5. 大数据的课程都有哪些 大数据本身属于交叉学科，涵盖计算机、统计学、数学三个学科的专业知识。所以大数据的课程内容，基本上也是围绕着三个学科展开的。 数理统计方面：数学分析、统计学习、高等代数、离散数学、概率与统计等课程是基本配置。 计算机专业课程：数据结构、数据科学、程序设计、算法分析与设计、数据计算智能、数据库系统、计算机系统基础、并行体系结构与编程、非结构化大数据分析等，也是必备课程。 而想要真正找到工作的话，大数据主流技术框架，也要去补充起来，这才是找工作当中能够获得竞争力的加分项。 6. hadoop 集群教程 要教程？不明白你这个啥意思 7. 有哪些好的hadoop学习资料 1."Hadoop.Operations.pdf.zip"//vdisk.weibo/s/vDOQs6xMAQH62 2."Hadoop权威指南(中文版)(带书签).pdf"Hadoop权威指南(中文版)(带书签).pdf 3."[Hadoop权威指南(第2版)].pdf"[Hadoop权威指南(第2版)].pdf 4."hadoop权威指南第3版2012.rar"hadoop权威指南第3版2012.rar 5.《Hadoop技术内幕：深入解析HadoopCommon和HDFS.pdf"《Hadoop技术内幕：深入解析Hadoop Common和HDFS.pdf 6."Hadoop技术内幕：深入解析MapRece架构设计与实现原理.pdf"Hadoop技术内幕：深入解析MapRece架构设计与实现原理.pdf 7."Hadoop实战.pdf"Hadoop实战.pdf 8."Hadoop实战-陆嘉恒(高清完整版).pdf"Hadoop实战-陆嘉恒(高清完整版).pdf 9."Hadoop实战(第2版).pdf"Hadoop实战(第2版).pdf 10."HadoopinAction.pdf"Hadoop in Action.pdf 11"Hadoop in practice.pdf"Hadoop in practice.pdf 12"HadoopThe.Definitive.Guide,3Ed.pdf"Hadoop The.Definitive.Guide,3Ed.pdf 13."O"Reilly.Hadoop.The.Definitive.Guide.3rd.Edition.May.2012.pdf"O"Reilly.Hadoop.The.Definitive.Guide.3rd.Edition.May.2012.pdf 14."hadoop入门实战手册.pdf"hadoop入门实战手册.pdf 15."Hadoop入门手册.chm"Hadoop入门手册.chm 16."windows下配置cygwin、hadoop等并运行maprece及maprece程序讲解.doc"windows下配置cygwin、hadoop等并运行maprece及maprece程序讲解.doc 17"在Windows上安装Hadoop教程.pdf"在Windows上安装Hadoop教程.pdf 18."Hadoop源代码分析(完整版).pdf"Hadoop源代码分析(完整版).pdf 19."hadoop-api.CHM"hadoop-api.CHM 20."HBase-Hadoop@小米.pptx" HBase-Hadoop@小米.pptx 21."但彬-Hadoop平台的大数据整合.pdf"但彬-Hadoop平台的大数据整合.pdf 22."QCon2013-罗李-Hadoop在阿里.pdf"QCon2013-罗李 23."网络hadoop计算技术发展.pdf"网络hadoop计算技术发展.pdf 24."QCon-吴威-基于Hadoop的海量数据平台.pdf"QCon-吴威-基于Hadoop的海量数据平台.pdf 25."8步安装好你的hadoop.docx"8步安装好你的hadoop.docx 26."hadoop运维经验分享.ppsx"hadoop运维经验分享.ppsx 27."PPT集萃：20位Hadoop专家分享大数据技术工具与最佳实践.rar"PPT集萃：20位Hadoop专家分享大数据技术工具与最佳实践.rar 28."Hadoop2.0基本架构和发展趋势.pdf"Hadoop 2.0基本架构和发展趋势.pdf 29."Hadoop与大数据技术大会PPT资料.rar"Hadoop与大数据技术大会PPT资料.rar 30."Hadoop2011云计算大会.rar"Hadoop2011云计算大会.rar

分布式系统是由若干个站集合而成。这些站又称为节点。分布式系统（distributed system）是建立在网络之上的软件系统。正是因为软件的特性，所以分布式系统具有高度的内聚性和透明性。

　　分布式系统和计算机网络系统的共同点是：多数分布式系统是建立在计算机网络之上的，所以分布式系统与计算机网络在物理结构上是基本相同的。　　他们的区别在于：分布式操作系统的设计思想和网络操作系统是不同的，这决定了他们在结构、工作方式和功能上也不同。网络操作系统要求网络用户在使用网络资源时首先必须了解网络资源，网络用户必须知道网络中各个计算机的功能与配置、软件资源、网络文件结构等情况，在网络中如果用户要读一个共享文件时，用户必须知道这个文件放在哪一台计算机的哪一个目录下；分布式操作系统是以全局方式管理系统资源的，它可以为用户任意调度网络资源，并且调度过程是“透明”的。当用户提交一个作业时，分布式操作系统能够根据需要在系统中选择最合适的处理器，将用户的作业提交到该处理程序，在处理器完成作业后，将结果传给用户。在这个过程中，用户并不会意识到有多个处理器的存在，这个系统就像是一个处理器一样。　　分布式系统被用在许多不同类型的应用中。以下我们列出了一些应用。对这些应用而言，使用分布式系统要比其他体系结构如处理机和共享存储器多处理机更优越：　　并行和高性能应用　　原则上，并行应用也可以在共享存储器多处理机上运行，但共享存储器系统不能很好地扩大规模以包括大量的处理机。HPCC（高性能计算和通信）应用一般需要一个可伸缩的设计，这种设计取决于分布式处理。　　容错应用　　因为每个PE是自治的，所以分布式系统更加可靠。一个单元或资源（软件或硬件）的故障不影响其他资源的正常功能。　　固有的分布式应用　　许多应用是固有分布式的。这些应用是突发模式（burstmode）而非批量模式（bulkmode）。这方面的实例有事务处理和InternetJavad,程序。　　这些应用的性能取决于吞吐量（事务响应时间或每秒完成的事务数）而不是一般多处理机所用的执行时间。　　对于一组用户而言，分布式系统有一个特别的应用称为计算机支持的协同工作（ComputerSupportedCooperativeWorking，CSCW）或群件（groupware），支持用户协同工作。另一个应用是分布式会议，即通过物理的分布式网络进行电子会议。同样，多媒体远程教学也是一个类似的应用。　　由于在不同的平台上如：Pc、工作站、局域网和广域网上可获得非常多样的应用，用户希望能超出他fliPc的限制以获得更广泛的特实用、功能和性能。不同网络和环境（包括分布式系统环境）下的q操作性变得越来越重要。为了达到互操作性，用户需要一个标准的分布式计算环境，在这个环境里，所有系统和资源都可用。　　DCE（分布式计算环境）是OSF（开放系统基金会）开发的分布式计算技术的工业标准集。它提供保护和控制对数据访问的安全服务、容易寻找分布式资源的名字服务、以及高度可伸缩的模型用于组织极为分散的用户、服务和数据。DCE可在所有主要的计算平台上运行，并设计成支持异型硬件和软件环境下的分布式应用。　　DCE已经被包括TRANSVARL在内的一些r一商实现。TRANSVARL是最早的多厂商组（multivendorteam）的成员之一，它提出的建议已成为DCE体系结构的基础。在中可以找到利用DCE开发分布式应用的指南。具有标准接口和协议的系统也叫做开放系统。　　一些其它标准基于一个特别的模型，比如CORBA（公用对象请求代理程序体系结构），它是由OMG（对象管理组）和多计算机厂商联盟开发的一个标准。CORBA使用面向对象模型实现分布式系统中的透明服务请求。　　工业界有自己的标准，比如微软的分布式构件对象模型（DCOM）和SunMicrosystem公司的JavaBeans。

综合布线系统（Premises Distributed System，简称PDS）是一种集成化通用传输系统，在楼宇和园区范围内，利用双绞线或光缆来传输信息，可以连接电话、计算机、会议电视和监视电视等设备的结构化信息传输系统。PDS使用标准的双绞线和光纤，支持高速率的数据传输。PDS使用物理分层星型拓扑结构，积木式、模块化设计，遵循统一标准，使系统的集中管理成为可能，也使每个信息点的故障、改动或增删不影响其它的信息点，使安装、维护、升级和扩展都非常方便，并节省了费用。 目前综合布线领域广泛遵循的标准是EIA/TIA-568、ISO/IEC 11801、EIA/TIA TSB-67。综合布线系统分为六个子系统： 一、建筑群连接子系统； 二、设备间子系统； 三、干线（垂直）子系统； 四、管理子系统； 五、水平子系统； 六、工作区子系统。 工作区子系统提供从水平子系统的信息插座到用户终端设备之间的连接。它包括装配软线、连接器和连接所需的扩展软线，并在终端设备和输入/输出（I/O）之间搭接。 水平子系统是由配线间至信息插座的配线电缆和工作区用的信息插座等组成。包括双绞线电缆、信息插座等。 干线（垂直）子系统是由设备间子系统、管理子系统和水平子系统的引入口设备之间的相互连接电缆组成。它是建筑物内的主干电缆、用于楼层之间垂直干线电缆的统称。 设备间子系统是在大楼的适当地方安装进出线设备和主配线架，并进行布线系统管理和维护的场所。设备间子系统应由语音、图像、数据等各种设备及其配线设备和主配线架等组成。 管理子系统由配线间的配线硬件、输入/输出设备等组成，每个配线间及配线间都有管理子系统。 建筑群主干子系统是通过各建筑物之间的缆线连接各建筑物之间的传输介质和各种支持设备组成的一个建筑群综合布线系统。 PDS是一套标准的配线系统，综合了所有的语音、数据、图像与监控等设备，并将多种设备终端插头插入标准的信息插座。即任一插座能够连接不同类型的设备，非常灵活、实用。PDS采用模块化设计，布线系统中固定于建筑物内的水平线缆外，其余所有的接插件都是积木式标准件，易于扩充及重新配置。当因发展而需要增加配线时，不会因此影响整个布线系统，可以保证用户先前在布线方面的投资。PDS为所有的语音、数据和图像设备提供了一套实用、灵活的、可扩展的模块化的介质通道。PDS系统采用的接口和综合业务数字网（ISDN）的接口是相同的八针模块插座和四对内部引线，且PDS支持的数据传输高于ISDN的基群速率。因此，可直接利用PDS和当前的电话网发展成ISDN，而不必另外布线。 PDS较好地解决了传统的布线方法存在的问题，因此，综合布线系统取代单一、昂贵、繁杂的传统布线系统，是“信息时代”的要求和历史发展的必然。 另外，最新推出的综合布线标准，可以在5类双绞线上走千兆，相应的交换设备也逐渐成熟起来，可见从长远的角度来看，综合布线系统可以充分地保护初期投资，满足系统扩展的需求。 综合布线设计标准 一级标准能满足高质量的高 频宽带，综合业务数字通信的要求。 (1)每个工作区（5-10m2）至少有一个双孔或多孔8芯的信息插座。 特殊工作区可采用多插孔的双介质混合型信息插孔。 (2)采用压接式跳线或插接式快速跳线的交叉连接硬件。 (3)配线子系统采用5类非屏蔽双绞线、5类屏蔽双绞线、超5类双绞线、光纤或混合组网。 (4)干线采用铜缆和光缆混合组网或全部采用光缆组网。 (5)每个工作区对应信息插孔均有独立的水平布线电缆引至楼层配线架。 综合布线设计要素 适配地安装在电信出口的外面 配线子系统线缆及相应插孔 1)4对100Ω非屏蔽双绞线(UTP)接入8芯信息插孔； 2)2对150Ω屏蔽双绞线（STP）接入屏蔽信息插孔； 3)62.5/125μm光纤线缆接入光纤标准接口； 4)双介质混合型线缆接入双介质混合型信息插座。 干线子系统线缆及长度 62.5/125μm 0.5线径100Ω UTP 150Ω STP (1)主交叉连接至中间交接 1500m 300m 700m (2)中间交接至管理区 500m500m 500m 500m (3)主交叉连接至管理区 2000m2000m 800m 700m 综合布线系统的计算机管理系统应能随时记录各种硬件设施的工作状态信息。 能显示：楼层平面图、所有硬件、设备间的位置、配线子系统和干线子系统的元件位置。 在出现同频干扰的情况下宜采用屏蔽布线系统。非屏蔽布线与电视电缆靠近会产生同频干扰。 综合布线应用范围要点 数据处理 IBM（3270 TYPE A，SYSTEM 36/38，AS/400）；NCR；HEWLETT PACKARD；HONEYWELL；PRIME；ERICSSON；OLIVETTI；WANG；UNISYS；DEC；GANDAL 数据通信 EIA-232-D，RS-422，RS-423；ETHERNET；STARLAN；TOKEN RING；FDDI；TPDDI 话音应用 AT&T；MATRA COMMUNICATIONS；ROLM；NORTHERNTELECOM；MITEL；DEC；ICL；ISDN 图 像 BASEBAND VIDEO；TRANSMISSION基带图象传输 综合布线的品牌很多,我认为比较好的有:安普,AVAYA,TCL,绿色硅谷，西蒙,3COM,D-LINK等.

D、网络操作系统 不是基本操作系统。操作系统的基本类型：1. 批处理操作系统 批处理(Batch Processing)操作系统的工作方式是：用户将作业交给系统操作员，系统操作员将许多用户的作业组成一批作业，之后输入到计算机中，在系统中形成一个自动转接的连续的作业流，然后启动操作系统，系统自动、依次执行每个作业。最后由操作员将作业结果交给用户。 批处理操作系统的特点是：多道和成批处理。 2．分时操作系统 分时(Time Sharing)操作系统的工作方式是：一台主机连接了若干个终端，每个终端有一个用户在使用。用户交互式地向系统提出命令请求，系统接受每个用户的命令，采用时间片轮转方式处理服务请求，并通过交互方式在终端上向用户显示结果。用户根据上步结果发出下道命。分时操作系统将CPU的时间划分成若干个片段，称为时间片。操作系统以时间片为单位，轮流为每个终端用户服务。每个用户轮流使用一个时间片而使每个用户并不感到有别的用户存在。分时系统具有多路性、交互性、“独占”性和及时性的特征。多路性指，伺时有多个用户使用一台计算机，宏观上看是多个人同时使用一个CPU，微观上是多个人在不同时刻轮流使用CPU。交互性是指，用户根据系统响应结果进一步提出新请求(用户直接干预每一步)。“独占”性是指，用户感觉不到计算机为其他人服务，就像整个系统为他所独占。及时性指，系统对用户提出的请求及时响应。它支持位于不同终端的多个用户同时使用一台计算机，彼此独立互不干扰，用户感到好像一台计算机全为他所用。 常见的通用操作系统是分时系统与批处理系统的结合。其原则是：分时优先，批处理在后。“前台”响应需频繁交互的作业，如终端的要求； “后台”处理时间性要求不强的作业。 3．实时操作系统 实时操作系统(RealTimeOperatingSystem，RTOS)是指使计算机能及时响应外部事件的请求在规定的严格时间内完成对该事件的处理，并控制所有实时设备和实时任务协调一致地工作的操作系统。实时操作系统要追求的目标是：对外部请求在严格时间范围内做出反应，有高可靠性和完整性。其主要特点是资源的分配和调度首先要考虑实时性然后才是效率。此外，实时操作系统应有较强的容错能力。 4．网络操作系统 网络操作系统是基于计算机网络的，是在各种计算机操作系统上按网络体系结构协议标准开发的软件，包括网络管理、通信、安全、资源共享和各种网络应用。其目标是相互通信及资源共享。在其支持下，网络中的各台计算机能互相通信和共享资源。其主要特点是与网络的硬件相结合来完成网络的通信任务。 5．分布式操作系统 它是为分布计算系统配置的操作系统。大量的计算机通过网络被连结在一起，可以获得极高的运算能力及广泛的数据共享。这种系统被称作分布式系统(DistributedSystem) 。它在资源管理，通信控制和操作系统的结构等方面都与其他操作系统有较大的区别。由于分布计算机系统的资源分布于系统的不同计算机上，操作系统对用户的资源需求不能像一般的操作系统那样等待有资源时直接分配的简单做法而是要在系统的各台计算机上搜索，找到所需资源后才可进行分配。对于有些资源，如具有多个副本的文件，还必须考虑一致性。所谓一致性是指若干个用户对同一个文件所同时读出的数据是一致的。为了保证一致性，操作系统须控制文件的读、写、操作，使得多个用户可同时读一个文件，而任一时刻最多只能有一个用户在修改文件。分布操作系统的通信功能类似于网络操作系统。由于分布计算机系统不像网络分布得很广，同时分布操作系统还要支持并行处理，因此它提供的通信机制和网络操作系统提供的有所不同，它要求通信速度高。分布操作系统的结构也不同于其他操作系统，它分布于系统的各台计算机上，能并行地处理用户的各种需求，有较强的容错能力。

最早的自动化控制要追溯到我国古代的自动化计时器和漏壶指南车，而自动化控制技术的广泛应用则开始于欧洲的工业革命时期。英国人瓦特在发明蒸汽机的同时，应用反馈原理，于1788年发明了离心式调速器。当负载或蒸汽量供给发生变化时，离心式调速器能够自动调节进气阀的开度，从而控制蒸汽机的转速。 150多年前第一代过程控制体系是基于5－13psi的气动信号标准（气动控制系统PCS，Pneumatic Control System）。简单的就地操作模式，控制理论初步形成，尚未有控制室的概念。第二代过程控制体系（模拟式或ACS,Analog Control System）是基于0－10mA或4－20mA的电流模拟信号，这一明显的进步，在整整25年内牢牢地统治了整个自动控制领域。它标志了电气自动控制时代的到来。控制理论有了重大发展，三大控制论的确立奠定了现代控制的基础；控制室的设立，控制功能分离的模式一直沿用至今。第三代过程控制体系（CCS，Computer Control System）.70年代开始了数字计算机的应用，产生了巨大的技术优势，人们在测量，模拟和逻辑控制领域率先使用，从而产生了第三代过程控制体系（CCS，Computer Control System）。这个被称为第三代过程控制体系是自动控制领域的一次革命，它充分发挥了计算机的特长，于是人们普遍认为计算机能做好一切事情，自然而然地产生了被称为“集中控制”的中央控制计算机系统，需要指出的是系统的信号传输系统依然是大部分沿用4－20mA的模拟信号，但是时隔不久人们发现，随着控制的集中和可靠性方面的问题，失控的危险也集中了，稍有不慎就会使整个系统瘫痪。所以它很快被发展成分布式控制系统（DCS）。第四代过程控制体系（DCS，Distributed Control System分布式控制系统）：随着半导体制造技术的飞速发展，微处理器的普遍使用，计算机技术可靠性的大幅度增加，目前普遍使用的是第四代过程控制体系（DCS，或分布式数字控制系统），它主要特点是整个控制系统不再是仅仅具有一台计算机，而是由几台计算机和一些智能仪表和智能部件构成一个了控制系统。于是分散控制成了最主要的特征。除外另一个重要的发展是它们之间的信号传递也不仅仅依赖于4－20mA的模拟信号，而逐渐地以数字信号来取代模拟信号。第五代过程控制体系（FCS，Fieldbus Control System现场总线控制系统）：FCS是从DCS发展而来，就象DCS从CCS发展过来一样，有了质的飞跃。“分散控制”发展到“现场控制”；数据的传输采用“总线”方式。但是FCS与DCS的真正的区别在于FCS有更广阔的发展空间。由于传统的DCS的技术水平虽然在不断提高，但通信网络最低端只达到现场控制站一级，现场控制站与现场检测仪表、执行器之间的联系仍采用一对一传输的4-20mA模拟信号，成本高，效率低，维护困难，无法发挥现场仪表智能化的潜力，实现对现场设备工作状态的全面监控和深层次管理。所谓现场总线就是连接智能测量与控制设备的全数字式、双向传输、具有多节点分支结构的通信链路。简单地说传统的控制是一条回路，而FCS技术是各个模块如控制器、执行器、检测器等挂在一条总线上来实现通信，当然传输的也就是数字信号。主要的总线有Profibus，LonWorks等。1、 40年代--60年代初：需求动力：市场竞争,资源利用，减轻劳动强度，提高产品质量，适应批量生产需要。主要特点：此阶段主要为单机自动化阶段，主要特点是:各种单机自动化加工设备出现，并不断扩大应用和向纵深方向发展。典型成果和产品：硬件数控系统的数控机床。2、60年代中--70年代初期：需求动力：市场竞争加剧，要求产品更新快，产品质量高，并适应大中批量生产需要和减轻劳动强度。主要特点：此阶段主要以自动生产线为标志，其主要特点是:在单机自动化的基础上，各种组合机床、组合生产线出现，同时软件数控系统出现并用于机床，CAD、CAM等软件开始用于实际工程的设计和制造中，此阶段硬件加工设备适合于大中批量的生产和加工。典型成果和产品：用于钻、镗、铣等加工的自动生产线。3、70年代中期--至今：需求动力：市场环境的变化，使多品种、中小批量生产中普遍性问题愈发严重，要求自动化技术向其广度和深度发展，使其各相关技术高度综合，发挥整体最佳效能。主要特点：自70年代初期美国学者首次提出CIM概念至今，自动化领域已发生了巨大变化，其主要特点是:CIM已作为一种哲理、一种方法逐步为人们所接受；CIM也是一种实现集成的相应技术，把分散独立的单元自动化技术集成为一个优化的整体。所谓哲理，就是企业应根据需求来分析并克服现存的“瓶颈”，从而实现不断提高实力、竞争力的思想策略；而作为实现集成的相应技术，一般认为是:数据获取、分配、共享；网络和通信；车间层设备控制器；计算机硬、软件的规范、标准等。同时，并行工程作为一种经营哲理和工作模式自80年代末期开始应用和活跃于自动化技术领域，并将进一步促进单元自动化技术的集成。典型成果和产品：CIMS工厂，柔性制造系统(FMS)。随着现代应用数学新成果的推出和电子计算机的应用，为适应宇航技术的发展，自动控制理论跨入了一个新阶段——现代控制理论。主要研究具有高性能，高精度的多变量变参数的最优控制问题，主要采用的方法是以状态为基础的状态空间法。目前，自动控制理论还在继续发展，正向以控制论，信息论，仿生学为基础的智能控制理论深入。为了实现各种复杂的控制任务，首先要将被控制对象和控制装置按照一定的方式连接起来，组成一个有机的总体，这就是自动控制系统。在自动控制系统中，被控对象的输出量即被控量是要求严格加以控制的物理量，它可以要求保持为某一恒定值，例如温度，压力或飞行航迹等；而控制装置则是对被控对象施加控制作用的机构的总体，它可以采用不同的原理和方式对被控对象进行控制，但最基本的一种是基于反馈控制原理的反馈控制系统。在反馈控制系统中，控制装置对被控装置施加的控制作用，是取自被控量的反馈信息，用来不断修正被控量和控制量之间的偏差从而实现对被控量进行控制的任务，这就是反馈控制的原理。

其实他们有有区别也有相似的

MRS集群处理的数据源来源于OBS或HDFS，HDFS是Hadoop分布式文件系统（Hadoop Distributed File System），OBS（Object Storage Service）即华为对象存储服务，是一个基于对象的海量存储服务，为客户提供海量、安全、高可靠、低成本的数据存储能力。MRS可以直接处理OBS中的数据，客户可以基于云管理平台Web界面和OBS客户端对数据进行浏览、管理和使用，同时可以通过REST API接口方式单独或集成到业务程序进行管理和访问数据。 数据存储在OBS：数据存储和计算分离，集群存储成本低，存储量不受限制，并且集群可以随时删除，但计算性能取决于OBS访问性能，相对HDFS有所下降，建议在数据计算不频繁场景下使用。数据存储在HDFS：数据存储和计算不分离，集群成本较高，计算性能高，但存储量受磁盘空间限制，删除集群前需将数据导出保存，建议在数据计算频繁场景下使用。

　　DCS是分布式控制系统的英文缩写（Distributed Control System），在国内自控行业又称之为集散控制系统。是相对于集中式控制系统而言的一种新型计算机控制系统，它是在集中式控制系统的基础上发展、演变而来的。　　个人手持式电话系统，PHS(Personal Handy-phone System是固定网络的补充和延伸，也被称为无线市话，俗称“小灵通”。

深圳昕网格、能为企业提供云计算方面的解决方案，他们有丰富的经验，值得去官网看看

　　Hadoop是一个能够对大量数据进行分布式处理的软件框架。具有可靠、高效、可伸缩的特点。　　Hadoop的核心是HDFS和Mapreduce，hadoop2.0还包括YARN。

除非阁下精通windows 恢复或重装吧

在Kafak中国社区的qq群中，这个问题被提及的比例是相当高的，这也是Kafka用户最常碰到的问题之一。本文结合Kafka源码试图对该问题相关的因素进行探讨。希望对大家有所帮助。怎么确定分区数？“我应该选择几个分区？”——如果你在Kafka中国社区的群里，这样的问题你会经常碰到的。不过有些遗憾的是，我们似乎并没有很权威的答案能够解答这样的问题。其实这也不奇怪，毕竟这样的问题通常都是没有固定答案的。Kafka官网上标榜自己是"high-throughputdistributedmessagingsystem"，即一个高吞吐量的分布式消息引擎。那么怎么达到高吞吐量呢？Kafka在底层摒弃了Java堆缓存机制，采用了操作系统级别的页缓存，同时将随机写操作改为顺序写，再结合Zero-Copy的特性极大地改善了IO性能。

《Cloud Native Java》（Josh Long）电子书网盘下载免费在线阅读链接: https://pan.baidu.com/s/1QqkhaT6aBYDNwGdkHkk83w 提取码: yz3q书名：Cloud Native Java作者：Josh Long豆瓣评分：8.2出版社：O"Reilly Media出版年份：2017-9-4页数：256内容简介：What separates the traditional enterprise from the likes of Amazon, Netflix, and Etsy? Those companies have refined the art of cloud native development to maintain their competitive edge and stay well ahead of the competition. This practical guide shows Java/JVM developers how to build better software, faster, using Spring Boot, Spring Cloud, and Cloud Foundry.Many organizations have already waded into cloud computing, test-driven development, microservices, and continuous integration and delivery. Authors Josh Long and Kenny Bastani fully immerse you in the tools and methodologies that will help you transform your legacy application into one that is genuinely cloud native.In four sections, this book takes you through:The Basics: learn the motivations behind cloud native thinking; configure and test a Spring Boot application; and move your legacy application to the cloudWeb Services: build HTTP and RESTful services with Spring; route requests in your distributed system; and build edge services closer to the dataData Integration: manage your data with Spring Data, and integrate distributed services with Spring"s support for event-driven, messaging-centric architecturesProduction: make your system observable; use service brokers to connect stateful services; and understand the big ideas behind continuous delivery作者简介：Josh Long is the Spring developer advocate for SpringSource, a division of VMware. Josh is the lead author on Apress" Spring Recipes, 2nd Edition, and a SpringSource committer and contributor. When he"s not hacking on code for SpringSource or other open-source projects, he can be found at the local Java User Group or at the local coffee shop. Josh likes solutions that push the boundaries of the technologies that enable them. His interests include scalability, integration, rich clients, BPM, grid processing, mobile computing and so-called "smart" systems. He blogs at blog.springsource.org or joshlong.com.Kenny Bastani is a passionate technology evangelist and and open source software advocate in Silicon Valley. As an enterprise software consultant he has applied a diverse set of skills needed for projects requiring a full stack web developer in agile mode. As a passionate blogger and open source contributor, Kenny engages a community of passionate developers who are looking to take advantage of newer graph processing techniques to analyze data.

什么是组态? 在使用工控软件中，我们经常提到组态一词，组态英文是“Configuration”,其意义究竟是什么呢？简单的讲，组态就是用应用软件中提供的工具、方法、完成工程中某一具体任务的过程。 在组态概念出现之前，要实现某一任务，都是通过编写程序（如使用BASIC,C,FORTRAN等）来实现的。编写程序不但工作量大、周期长，而且容易犯错误，不能保证工期。组态软件的出现，解决了这个问题。对于过去需要几个月的工作，通过组态几天就可以完成。 组态软件产生的背景 “组态”的概念是伴随着集散型控制系统（Distributed Control System简称DCS）的出现才开始被广大的生产过程自动化技术人员所熟知的。在工业控制技术的不断发展和应用过程中，PC（包括工控机）相比以前的专用系统具有的优势日趋明显。这些优势主要体现在：PC技术保持了较快的发展速度，各种相关技术已经成熟；由PC构建的工业控制系统具有相对较低的拥有成本；PC的软件资源和硬件资丰富，软件之间的互操作性强；基于PC的控制系统易于学习和使用，可以容易地得到技术方面的支持。在PC技术向工业控制领域的渗透中，组态软件占据着非常特殊而且重要的地位。 自动化软件 首先，自动化软件主要包括人机界面软件（HMI），像Intouch、iFix、组态王等；基于PC的控制软件，统称软PLC或软逻辑，像亚控的KingAct以及即将推出的组态王嵌入版、西门子的WinAC等；还包括生产执行管理软件，许多专家也将这一类软件归为MES（Manufacturing Execution System），像Intellution公司的iBatch、Wonderware公司的InTrack等，另外，与通用办公自动化软件相比，自动化软件还应包括相应的服务。 其次，自动化软件主要具备如下功能及特征：工业过程动态可视化；数据采集和管理；过程监控报警；报表功能；为其他企业级程序提供数据；简单的回路调节；批次处理；SPC过程质量控制；符合IEC1131-3标准。 什么是组态软件? 组态软件是指一些数据采集与过程控制的专用软件，它们是在自动控制系统监控层一级的软件平台和开发环境，使用灵活的组态方式，为用户提供快速构建工业自动控制系统监控功能的、通用层次的软件工具。组态软件应该能支持各种工控设备和常见的通信协议，并且通常应提供分布式数据管理和网络功能。 组态软件指一些数据采集与过程控制的专用软件，它们是在自动控制系统监控层一级的软件平台和开发环境，能以灵活多样的组态方式（而不是编程方式）提供良好的用户开发界面和简捷的使用方法，其预设置的各种软件模块可以非常容易地实现和完成监控层的各项功能，并能同时支持各种硬件厂家的计算机和I/O产品，与高可靠的工控计算机和网络系统结合，可向控制层和管理层提供软、硬件的全部接口，进行系统集成。 随着它的快速发展，实时数据库、实时控制、SCADA、通讯及联网、开放数据接口、对I/O设备的广泛支持已经成为它的主要内容，随着技术的发展，监控组态软件将会不断被赋予新的内容。 对应于原有的HMI（人机接口软件，Human Machine Interface）的概念，组态软件应该是一个使用户能快速建立自己的HMI的软件工具，或开发环境。在组态软件出现之前，工控领域的用户通过手工或委托第三方编写HMI应用，开发时间长，效率低，可靠性差；或者购买专用的工控系统，通常是封闭的系统，选择余地小，往往不能满足需求，很难与外界进行数据交互，升级和增加功能都受到严重的限制。组态软件的出现，把用户从这些困境中解脱出来，可以利用组态软件的功能，构建一套最适合自己的应用系统。 组态软件是有专业性的。一种组态软件只能适合某种领域的应用。人机界面生成软件就叫工控组态软件。其实在其他行业也有组态的概念，人们只是不这么叫而已。如AutoCAD，PhotoShop，办公软件(PowerPoint)都存在相似的操作，即用软件提供的工具来形成自己的作品，并以数据文件保存作品，而不是执行程序。组态形成的数据只有其制造工具或其他专用工具才能识别。但是不同之处在于，工业控制中形成的组态结果是用在实时监控的。组态工具的解释引擎，要根据这些组态结果实时运行。从表面上看，组态工具的运行程序就是执行自己特定的任务。 虽然说组态就是不需要编写程序就能完成特定的应用。但是为了提供一些灵活性，组态软件也提供了编程手段，一般都是内置编译系统，提供类BASIC语言，有的甚至支持VB。 组态软件的组成、功能和特点 组态软件组要包括人机界面软件（HMI）、基于PC的控制软件以及生产执行管理软件。 组态软件的功能：（1）工业生产过程的动态可视化控制；（2）生产过程中生产数据的采集和管理；（3）生产过程监控报警；（4）报表功能；（5）基于网络数据的上传和相应控制。 组态软件的特点：（1）延续性和可扩充性，用通用组态软件开发的应用程序，当现场（包括硬件设备或系统结构）或用户需求发生改变时，不需作很多修改即可方便地完成软件的更新和升级；（2）封装性（易学易用），通用组态软件所能完成的功能都用一种方便用户使用的方法包装起来，用户不需掌握太多的编程语言技术（甚至不需要编程技术），就能很好地完成一个复杂工程所要求的所有功能；（3）通用性，每个用户根据工程实际情况，利用通用组态软件提供的底层设备（PLC、智能仪表、智能模块、板卡、变频器等）的I／O Driver、开放式的数据库和画面制作工具，就能完成一个具有动画效果、实时数据处理、历史数据和曲线并存、具有多媒体功能和网络功能的工程，不受行业限制。 自动化软件（组态软件）的发展历史 自20世纪80年代初期诞生至今，自动化软件（组态软件）已有20年的发展历史。应该说组态软件作为一种应用软件，是随着PC机的兴起而不断发展的。80年代的组态软件，像Onspec、Paragon 500、早期的FIX等都运行在DOS环境下，图形界面的功能不是很强，软件中包含着大量的控制算法，这是因为DOS具有很好的实时性。90年代，随着微软的Windows 3.0风靡全球，以Wonderware公司的Intouch为代表的人机界面软件开创了Windows下运行工控软件的先河，由于Windows 3.0不具备实时性，所以当时，80年代已成名的自动化软件公司在对于操作系统的支持上，或按兵不动，或将组态软件从DOS向OS/2移植，人们这样做的原因，是大家都认为工控软件必须具有很强的实时性和控制能力，必须运行在一个具备实时性的操作系统下，像DOS、OS/2、Win NT（1993年才推出）等。历史证明，在当时的硬件条件下，上位机做人机界面切中了用户的需求，Wonderware因而在不长的时间内成为全球最大的独立自动化软件厂商，而在80年代靠DOS版组态软件起家，后来向OS/2移植的公司后来基本上都没落了。 自动化软件全球及国内市场发展状况 在全球范围内，自动化软件市场已比较成熟。目前，全球知名的自动化软件厂商不足20家，但头6家占据了整个市场75%的份额。 国内市场可细分为高端和中低端。高端市场基本上由国外品牌的软件占有，像一些国家级的大项目、大型企业的主生产线控制等，高端市场的特点是装机量小，但单机销售额大，目前国外品牌的软件年装机量没有一家能超过1000套。中低端市场基本由国产软件占有，亚控的组态王独占鳌头，占据了60%以上的份额，年装机量5000套左右，但单机销售额只有国外品牌的1/10~1/2。 国内有近10家自动化软件公司，与国外软件相比，国内自动化软件最大的差距并不是在技术和品牌上，而是在企业的经营策略上，比如国内不少自动化软件厂商不懂差异化经营，主要竞争手段就是低价和免费服务；许多厂商还抱着“只要有市场占有率，利润自然来”的产品时代的观念，不惜代价扩大市场占有率，这使得国内虽然厂家众多，但大多处于亏损或维持状态，不能健康发展，也不能够保证给用户带来长期的利益。

即时通讯英文：IM instant messaging instant communicationAnalysis of the security of instant messaging software即时通讯软件的安全性分析The using of the internet instant message in library基于因特网的即时通讯You are not signed into an im account您尚未登录任何即时通讯账号。 Technology and application of instant messaging in the proposition企业级即时通讯技术及其应用You are not logged into an account您尚未登录任何即时通讯账号。 The solution to the secure instant messaging based on ecc基于椭圆曲线密码的安全即时通讯解决方案Can be accessed from mobilephone and pc . must register提供p2p即时通讯聊天平台，可容纳多人在线。 Design of multi - server distributed instant messaging system model多服务器分布式即时通讯系统模型的设计Dude we got web cam , we got e - mail we got instant message day哥们，我们有摄像头，电邮还有即时通讯工具Dude we got web cam , we got e - mail we got instant message day哥们，我们有摄像头，电邮还有即时通

61. 网络操作系统是基于计算机网络的，是在各种计算机操作系统上按网络体系结构、协议和标准开发的软件，包括网络管理、通信、安全、资源共享和各种网络应用，其目标是相互通信及资源共享。62. 大量的计算机通过网络联结在一起，可以获得极高的运算能力及广泛的数据共享，这种系统被称作分布式系统（Distributed System）。63. MS-DOS具有字符型用户界面，采用命令行方式进行操作和管理，这种方式操作起来很不方便，而且需要用户记忆大量的DOS命令。64. Unix操作系统是一个通用、交互型分时操作系统。65. Mac OS操作系统是美国Apple公司推出的操作系统，运行在Macintosh计算机上。Mac OS是全图形化界面和操作方式的鼻祖。

hadoop、lustre、glustre等

SCADA、DCS、PLC的区别，区别如下：SCADA、DCS、PLC区别：SCADA：（Supervisory Control And Data Acquisition）监测控制和数据采集系统，不光是控制，重点更加突出数据采集和监控处理。DCS：（Distributed Control System）分布式控制系统，主要用在控制领域。是以微处理器为基础，采用分散控制、集中显示、分而自治、综合协调的设计原则的新一代仪表控制系统。PLC：（programmable logical controller）在工业自动化和控制系统的网络体系结构中，PLC作为重要的底层控制部件，通常应用在SCADA和DCS系统中，用于实现工业设备的具体操作与工艺控制。

公司的德国设备有安装DCS系统，应该属于设备运行的控制系统。包括运行状态，记录，报警等等功能。