性能监控诊断优化

2014-02-12 15:03

前不久的“棱镜门”让国人认识到发展国产软件的重要性,也被认为是国产数据库发展的重要契机。国产数据库在过去发展中一直受到国家的支持,但由于起步较晚,与国外主流数据库之间的差距还很大。但随着大数据时代的到来,国产数据库与国外数据库站在同一起跑线上,获得同样的机遇。本文将对几家国产数据库厂商的产品策略进行盘点,从中找到它们在大数据时代的未来。

2014-02-12 14:54

1、 MPP简介

MPP即大规模并行处理。在数据库非共享集群中,每个节点都有独立的磁盘存储系统和内存系统,业务数据根据数据库模型和应用特点划分到各个节点上,每台数据节点通过高速专用网络或者商业通用网络互相连接,彼此协同计算,作为整体提供数据库服务。非共享数据库集群有完全的可伸缩性、高可用、高性能、优秀的性价比、资源共享等优势。[5]典型的无共享结构的并行数据库集群, 其性能特性在很大程度上依赖于数据库模式的划分策略及数据在各个节点的分布情况。

2014-02-10 01:07

 三十年数据库的发展和形成的以Oracle、IBM、Microsoft等为代表的强势垄断格局,使得传统国产数据库不仅生不逢时,加上技术上采取跟随战略、在事务处理领域顽强拼杀,虽然产品不断进步、市场应用也不断取得单点突破,但大多处于非核心应用。尽管政府给予了持续的大力支持,但在垄断壁垒和开源软件左右夹击下,除了政策性市场之外,很难取得规模化突破,尚未形成企业发展良性循环和政府支持的双赢局面。

2014-02-09 22:43

 计算机系统之间的数据传输或存储格式从来就不是一个轻松的任务,特别是当它涉及结构化和非结构化的数据。

“复杂的数据迁移工作意味着超负荷运行和延迟都是很长常见的”,Arvind Singh(以下简称辛格),芝加哥一家企业的数据解决方案提供商的联合创始人兼CEO表达了以上观点。

在《信息周刊》的一次电话采访中,Arvind Singh概述了10个常见的数据迁移问题,其中包括五个陷阱和五个风险,以此警告企业应该竭力避免。

2014-02-09 21:29

 最近在做几款网管软件的选型,从自身需求看,希望需要管理交换机,路由器,服务器,数据库,应用服务器,虚拟化等资源。在评估过程中,本文对Zabbix, Nagios,Hyperic HQ,OpenNMS 软件的安装做一些比较,结果如下。

2014-01-23 12:55

 某信息安全厂商需监控千兆网络下的进出数据,同时截留途经网关的所有数据包,按照监控需求对数据来源、行为等,做挖掘、分析和趋势判断,其数据量巨大,对数据库的同步加载、实时统计分析是非常大的挑战。

采用五台节点服务器搭建的翰云数据库系统,用以保存截留的数据包,同时在翰云数据库数据库中做查询、统计、分析。数据同步加载时,翰云数据库轻松支撑起1GB/S带宽流量的数据导入加载。数据量规模达到TB级别时,典型的查询操作响应时间在秒级返回结果。

2014-01-23 12:52

某互联网企业为其电子商务交易网站,开发商业信息数据挖掘的应用。其中涉及对服务器中用户的浏览、搜索、关注、交易、评价等信息,进行导出、清洗、存储,进而进行分析和挖掘的应用。项目初期开发团队将电子商务网站原始信息数据,全部保存到INFOBRIGHT数据库中,再通过每日夜间服务器空闲时段,对原始信息数据进行萃取转换,存储到MYSQL数据库后,基于MYSQL数据库进行分析和挖掘任务。

但该方案现在实际运行中遇到了瓶颈,MYSQL数据库计算性能有限,测试中发现数据量达到百万级时,应用操作响应时间需几十秒以上才能得出结果,当数据量规模增加至上亿条时,MYSQL数据库便无法响应。

2014-01-23 12:49

某情报分析部门需要对互联网信息进行数据挖掘和分析,通过工具收集互联网信息,进行舆情分析处理。之前采用国际著名厂商数据库系统,运行在一台数据库服务器上,由于互联网信息的海量特性,致使现有的单服务器数据库应对此数据挖掘操作,需要几分钟甚至几十分钟才能得出结果,远远不能达到实时情报分析的应用要求。且单台服务器的存储空间有限运算处理性能极低,为满足海量数据的存储和实时分析需要,若通过升级服务器硬件设备,解决海量存储和实时分析的需求,其软硬件升级成本极高,同时不宜维护和后期更大规模的扩展。又因情报数据是极其敏感的机密信息,使用国外数据库产品也存在着信息安全的诸多隐患。

2014-01-23 12:45

国产自主可控翰云数据库依据国际标准的TPCH规范进行性能测试,其结果表明翰云数据库已经领先于国内外的数据库系统。

TPCH是国际非盈利组织TPC制定的应对大数据量时查询性能的测试规范,共由8个表组成,测试的查询语句有22个。翰云数据库针对TPC-H 10G和TPC-H 30G分别对比国内外数据库进行了测试比较,其测试结果显示,翰云数据库在应对大数据处理时,其响应时间只有国内外知名数据的几十分之一,其运算性能是其他产品的几十倍以上。

2014-01-23 12:10

如果您需要及时处理大规模数据,需要自主可控的解决方案,欢迎与我们联系试用。

页面