网络分析工具

配置步骤：1、在Win7下，以管理员身份启动cmd，输入以下两条命令创建虚拟Wifi，并启动Wifi。其中ssid为WiFi的名字，key为密码。C:\>netsh wlan set hostednetwork mode=allow ssid=WifiUmer key=testdebug承载网络模式已设置为允许。已成功更改承载网络的 SSID。已成功更改托管网络的用户密钥密码。C:\>netsh wlan start hostednetwork已启动承载网络。参考笔记本为WIFI热点：http://www.cr173.com/html/19290_1.html创建成功后，控制面板->网络和Internet连接->网络连接中已经创建了无线网络连接2，如下图：2、网络共享在能上网的网络连接上（如有线的本地连接，无线的无线网络连接）右击，选择属性->共享，给虚拟WiFi启用共享。 3、手机连接到新设的虚拟Wifi上手机网络设置启用Wifi，将WLAN网络设到刚新增的WifiUmer上，输入刚设定的密码testdebug，点击连接，连接成功。通过cmd命令可以看到WifiUmer的上内网IP地址为：C:\>ipconfigWindows IP 配置无线局域网适配器 无线网络连接 2:   连接特定的 DNS 后缀 . . . . . . . :   本地链接 IPv6 地址. . . . . . . . : fe80::90bc:6340:45b0:b079%19   IPv4 地址 . . . . . . . . . . . . : 192.168.137.1   子网掩码  . . . . . . . . . . . . : 255.255.255.0   默认网关. . . . . . . . . . . . . :4、网络抓包Wireshark是一款很好的网络抓包工具，开源的，请自行下载安装选择刚才建立的虚拟Wifi连接“无线网络连接 2”。双击后可以进行设置，去掉无线网络连接的 2 的混杂模式(Capture packets in promiscuous mode)，可以减少不必要的网络包分析。如图示:设置完成后，点击启动界面的Start，进入主界面，设置好过滤条件，只抓http协议的包，抓包数据如下：手机打开uc浏览器后，进行的联网活动。

QQ，飞信，微信，MNS，阿里旺旺 中文的有新浪UC、51网的51聊天、百度的hi、阿里巴巴的阿里旺旺等，中英文的有雅虎通、MSN等

　　数据分析的概念太宽泛了，做需要的是侧重于数据展示、数据挖掘、还是数据存储的？是个人用还是企业、部门用呢？应用的场景是制作简单的个人图表，还是要做销售、财务还是供应链的分析？　　那就说说应用最广的BI吧，企业级应用，其实功能上已经涵盖了我上面所述的部分，主要用于数据整合，构建分析，展示数据供决策分析的，譬如FineBI，是能够”智能”分析数据的工具了。

1. 开源大数据生态圈Hadoop HDFS、Hadoop MapReduce, HBase、Hive 渐次诞生，早期Hadoop生态圈逐步形成。开源生态圈活跃，并免费，但Hadoop对技术要求高，实时性稍差。2. 商用大数据分析工具一体机数据库/数据仓库（费用很高）IBM PureData(Netezza), Oracle Exadata, SAP Hana等等。数据仓库（费用较高）Teradata AsterData, EMC GreenPlum, HP Vertica 等等。数据集市（费用一般）QlikView、 Tableau 、国内永洪科技Yonghong Data Mart 等等。前端展现用于展现分析的前端开源工具有JasperSoft，Pentaho, Spagobi, Openi, Birt等等。用于展现分析商用分析工具有Cognos,BO, Microsoft, Oracle,Microstrategy,QlikView、 Tableau 、国内永洪科技Yonghong Z-Suite等等。

数据分析工具要是分类型的话可能有几十种，优缺点和定位都不一样啊，不知道楼主需求是什么。我比较小白，没有编程基础，我一般用excel和bdp个人版，excel大家都很熟悉，不多说。bdp个人版的话，属于数据可视化分析工具，数据接入、处理、可视化分析这些功能都有，操作也算简单，呈现一些可视化图表效果。

扫描仪：（纸制材料扫描成图片，利用OCR软件识别为文字） 照相机：主要用于采集图像信息； 摄像机：主要用于采集视频信息； 录音设备：主要用于采集音频信息（麦克风、录音笔、Mp3）； 计算机：采集来自光盘网络等多种类型的信息至计算机中

所谓网络流量分析，是指通过一定的技术手段，实时监测用户网络七层结构中各层的流量分布，进行协议、流量的综合分析，从而有效的发现、预防网络流量和应用上的瓶颈，为网络性能的优化提供依据。通过流量分析帮助管理人员了解到网络中哪个用户正在大量的下载或者上传数据，判定出网络中是哪个用户在占用了大量的带宽，是由于哪个用户造成了网络的缓慢。通过流量分析管理，可以使网络管理人员掌握网络负载状况，及时发现网络结构的不合理，或是网络性能瓶颈，根据网内应用及不同业务使用情况，为用户提供高品质的网络服务，避免了网络带宽和服务器瓶颈问题。通过流量分析管理，可以使网络管理人员快速掌握网络流量的实时状况，网内应用及不同业务在不同的时间段的使用情况，快速展示某个时间段内的流量概况，帮助管理人员分析网络流量的忙闲时。目前市面上的网络流量分析软件很多，但是实现方式大致分为三类，通过这三种网络流量分析的采集技术，来实现网络流量的分析。2、 端口镜像（Port mirroring），也叫做端口扫描或端口监控功能，是在很多管理型交换机中的一个功能，其被用在一个网络交换机上来发送所有分组的拷贝，在一个交换机端口查看来监控在另一个交换机端口的网络连接。也就是把所有的交换机端口的数据，都拷贝一份到这个端口上，所有的数据都进行采集。3、 通过协议如netflow或者netstream等。根据需求和采集技术特点选择上述的三种技术，各有各的优点和缺点，其中的网络混杂模式，主要用于一个比较小的网络中，一般一个小的局域网内使用，比如网吧等，通过这种技术实现的软件比较多，如果sniffer等。缺点也很明显，就是对网络带宽的占用比较大。建议在非关键性的小网络中使用。另外一种通过端口镜像实现，特点是通过交换机来实现，缺点也比较明显，就是所有的端口的数据都要拷贝一份给监控端口，增加了交换机的负担，比较严重的影响交换机的性能。一般在公司网络的出口交换机上使用，比如监控公司中人员的互联网连接等。第三种通过思科的netflow协议或者华为的netstream协议，特点是占用网络带宽最小，切采集的数据最全，一般用在比较大的企业网络中，原理就是交换机本身将通过的数据计数，而不做数据的拷贝。这样，就大大降低了交换机的负担。市面上的软件也比较多，比较重要的厂商如摩卡软件等。下面以摩卡软件的NTA软件来举例说明网络流量分析的功能。摩卡软件网络流量分析的优势摩卡软件在行业内具有十年的IT运维管理经验，摩卡软件在全国超过23家的大客户现场积累了深厚的应用平台运维管理经验，其中对于网络流量监控的优势在于：支持协议种类多：从思科的netflow到华为的netstream，到IPFIX、sflow等都支持。适用的范围比较广：从宏观上监控整个网络中的流量，从二层到七层，所有的流量的情况。支持自定义的应用的监控：软件支持自定义的网络应用的监控。友好的用户界面：从用户的界面出发，更容易读懂和使用。

Netperf　　Netperf是一种网络性能的测量工具，主要针对基于TCP或UDP的传输。Netperf根据应用的不同，能进行不同模式的网络性能测试，即批量数据传输（bulk data transfer）模式和请求/应答（request/reponse）模式。Netperf测试结果所反映的是个系统能够以多快的速度向另外一个系统发送数据，及另外一个系统能够以多块的速度接收数据。　　Netperf工具以client/server方式工作。server端是netserver，用来侦听来自client端的连接，client端是netperf，用来向server发起网络测试。在client和server之间，首先建立一个控制连接，传递有关测试设置的信息，及测试的结果；在控制连接建立并传递了测试设置信息以后，client和server之间会再建立一个测试连接，用来来回传递着特别的流量模式，以测试网络的性能。 Iperf Iperf 是一个 TCP/IP 和 UDP/IP 的性能测量工具，能够提供网络吞吐率信息，以及震动、丢包率、最大段和最大传输单元大小等统计信息；从而能够帮助我们测试网络性能，定位网络瓶颈。其设计从根本上克服了原来的一些工具，如 ttcp 和 nettest 等，的固有的缺陷。

在大数据处理分析过程中常用的六大工具：1、HadoopHadoop 是一个能够对大量数据进行分布式处理的软件框架。但是 Hadoop 是以一种可靠、高效、可伸缩的方式进行处理的。Hadoop 是可靠的，因为它假设计算元素和存储会失败，因此它维护多个工作数据副本，确保能够针对失败的节点重新分布处理。Hadoop 是高效的，因为它以并行的方式工作，通过并行处理加快处理速度。Hadoop 还是可伸缩的，能够处理 PB 级数据。此外，Hadoop 依赖于社区服务器，因此它的成本比较低，任何人都可以使用。2、HPCCHPCC，High Performance Computing and Communications(高性能计算与通信)的缩写。1993年，由美国科学、工程、技术联邦协调理事会向国会提交了“重大挑战项目：高性能计算与 通信”的报告，也就是被称为HPCC计划的报告，即美国总统科学战略项目，其目的是通过加强研究与开发解决一批重要的科学与技术挑战问题。HPCC是美国 实施信息高速公路而上实施的计划，该计划的实施将耗资百亿美元，其主要目标要达到：开发可扩展的计算系统及相关软件，以支持太位级网络传输性能，开发千兆 比特网络技术，扩展研究和教育机构及网络连接能力。3、StormStorm是自由的开源软件，一个分布式的、容错的实时计算系统。Storm可以非常可靠的处理庞大的数据流，用于处理Hadoop的批量数据。Storm很简单，支持许多种编程语言，使用起来非常有趣。4、Apache Drill为了帮助企业用户寻找更为有效、加快Hadoop数据查询的方法，Apache软件基金会近日发起了一项名为“Drill”的开源项目。Apache Drill 实现了 Google's Dremel.据Hadoop厂商MapR Technologies公司产品经理Tomer Shiran介绍，“Drill”已经作为Apache孵化器项目来运作，将面向全球软件工程师持续推广。5、RapidMinerRapidMiner是世界领先的数据挖掘解决方案，在一个非常大的程度上有着先进技术。它数据挖掘任务涉及范围广泛，包括各种数据艺术，能简化数据挖掘过程的设计和评价。6、Pentaho BIPentaho BI 平台不同于传统的BI 产品，它是一个以流程为中心的，面向解决方案(Solution)的框架。其目的在于将一系列企业级BI产品、开源软件、API等等组件集成起来，方便商务智能应用的开发。它的出现，使得一系列的面向商务智能的独立产品如Jfree、Quartz等等，能够集成在一起，构成一项项复杂的、完整的商务智能解决方案。1、大数据是一个含义广泛的术语，是指数据集，如此庞大而复杂的，他们需要专门设计的硬件和软件工具进行处理。该数据集通常是万亿或EB的大小。2、这些数据集收集自各种各样的来源：a、传感器、气候信息、公开的信息、如杂志、报纸、文章。b、大数据产生的其他例子包括购买交易记录、网络日志、病历、事监控、视频和图像档案、及大型电子商务。c、大数据分析是在研究大量的数据的过程中寻找模式，相关性和其他有用的信息，可以帮助企业更好地适应变化，并做出更明智的决策。