-
全球级的分布式数据库Google Spanner原理
Google Spanner简介Spanner 是Google的全球级的分布式数据库 (Globally-Distributed Database) 。Spanner的扩展性达到了令人咋舌的全球级,可以扩展到数百万的机器,数已百计的数据中心,上万亿的行。更给力......
2021-05-31数据库
-
SSIS Cluster配置
安装完成SQL Server 2005 Cluster之后,SSIS并不会默认安装成为Cluster,需要手工进行配置,配置过程请参考:http://msdn2.microsoft.com/en-us/library/ms345193(SQL.90).aspx##。重要提示:Microsoft 不建......
2021-05-31数据库
-
AIX下was进程占用CPU率较高实例深解析
一朋友求助,生产服务器一台AIX小机WAS进程占用CPU率较高引发频繁报警,而此前该服务器一直正常。环境:AIX 5.3/WAS6.1发生故障现象时的截图如下:问题处理步骤 1、首先通过topas监控可以看到当前占用CPU率较高......
2021-05-31数据库
-
Vmware RHEL5 Oracle 10G RAC安装实验详细过程(一)
实验环境:普通PC一台(3GB内存,500GB硬盘)Vmware Server 1.0.6版RedHat Linux Enterprise 5.1Oracle 10g for linux(10.2.0.1)前言: 首先要感谢itpub里君三思学习笔记里的:《手把手教你用VMware在l......
2021-05-31数据库
-
DRBD+Corosync+Pacemaker配置MySQL高可用性群集(上)
一、实验环境Vmware-Redhatenterprise5.4在node1与node2上操作1、修改主机名#vim/etc/sysconfig/networkNETWORKING=yesNETWORKING_IPV6=noHOSTNAME=node1.a.com/HOSTNAME=node2.a.com2、hosts文件#echo"192.168.......
2021-05-31数据库
-
mysql-proxy实现负载均衡及读写分离
mysql-proxy具有代理的功能,将客户端的mysql请求轮询至后台的mysql-server。环境介绍:一台mysql-proxy(178)两台mysql-server(180,122)一台mysql-client(254)在mysql-proxy上安装如下包:1.安装 pkg-config:(......
2021-05-31数据库
-
基于HBASE的并行计算架构之rowkey设计篇
1.大数据在HBASE存储、计算以及查询的应用场景海量数据都是事务数据,事务数据都是在时间的基础上产生的。数据的业务时间可能会顺序产生,也可能不会顺序产生,比如某些事务发生在早上10点,但是在下午5点才结束......
2021-05-31数据库
-
NOSQL系列-memcached安装管理与repcached高可用性
Memcached :基于内存工作键值存储型数据库,可以作为应用->memcached 缓存层->数据库。Danga Interactive公司开发,最初为了加速LiveJournal访问速度而开发的,后来成为广泛应用的开源项目。一、实验环境1.系......
2021-05-31数据库
-
MMM (Multi-Master Replication Manager for MySQL)MySQL集群简介
OneCoder最近在关注一些基于MySQL的数据库集群方案。不过目前只是一些表面的搜集和粗浅的了解,还没有亲身试用。这次我们了解的是:Multi-Master Replication Manager for MySQL,官网地址:http://mysql-mm......
2021-05-31数据库
-
Memcached常规应用与分布式部署方案
下面天涯[PHPHA.COM]介绍下Memcached的最常规的应用及分布式部署方案。相关内容参考了凹凸曼写的Memcached使用与实践章节。至于Memcached的安装及基本使用,这里不做介绍,有需要可以借助Google或Baidu。1、Memc......
2021-05-31数据库
-
AIX下删除LV后的现场保护和数据恢复方案
在AIX环境下,因维护误操作、存储mapping错误等,不小心将LV误删除,这种损失通常是巨大的。删除后的不当保护及恢复操作可能使数据无法恢复,也可能增加处理的时间与算法复杂度。如何有效保护现场,并选择正确......
2021-05-31数据库
-
AIX平台下HA环境安装HDLM的步骤
前提 产看HDLM与主机和HA的兼容性,确保兼容性。上传HDLM软件1、将HDLM上传到/tmp下修改目录权限chown -R root:staff /tmp/HDLM_AIX0662002、拷贝license文件 可以直接将license文件直接上传到/var/tmp "l......
2021-05-31数据库
-
磁盘读写与数据库的关系
一 磁盘物理结构(1) 盘片:硬盘的盘体由多个盘片叠在一起构成。在硬盘出厂时,由硬盘生产商完成了低级格式化(物理格式化),作用是将空白的盘片(Platter)划分为一个个同圆心、不同半径的磁道(Track),还将磁道划......
2021-05-31数据库
-
MYSQL+heratbeat+DRBD+LVS 数据库高可用群集 DRBD部分
在企业数据库应用群集方案中MYSQL+heratbeat+DRBD+LVS已经很成熟了,通过heartbeat+DRBD实现MYSQL的主节点写操作的高可用性;通过MYSQL+LVS实现MYSQL读操作的负载均衡。DRBD简单工作流程:当数据写入到本地主节点......
2021-05-31数据库
-
Memcache集群的安装和配置
一、常用命令 -p 监听的端口-l 连接的IP地址, 默认是本机-d start 启动memcached服务-d restart 重起memcached服务-d stop|shutdown 关闭正在运行的memcached服务-d install 安装memcached服务-d u......
2021-05-31数据库
-
Hadoop+hive+map+reduce集群安装部署 (二)
上一节介绍了Hadoop 集群的部署过程,这一节我们来用Python创建一个map/reduces过程来分析IIS日志日志文件为附件:map脚本advanceiislog.py 内容为:#!/usr/bin/python2.4#coding=utf8import fileinputimport......
2021-05-31数据库
-
Hadoop+hive+map+reduce集群安装部署(一)
环境准备:Centos 5.5 x64 (3台)10.129.8.52 (master) ======>> NameNode, SecondaryNameNode,JobTracker10.129.8.76 (slave01) ======>> DataNode, TaskTracker10.129.8.33 (slave02) ======>> ......
2021-05-31数据库
-
mysql基于RHCS、Gtid主从复制的高性能、LB、HA集群架构
本文基于2个角度进行1:mysql主从复制,读写分离部分2:RHCS实现mysql-proxy、mysql-master、lvs高可用架构图可能会用到的yum源http://dl.fedoraproject.org/pub/epel/6/x86_64/epel-release-6-8.noarch.rpmhttp......
2021-05-31数据库
-
MySQL Cluster(MySQL集群) 初试
MySQLCluster是MySQL适合于分布式计算环境的高实用、高冗余版本。它采用了NDBCluster存储引擎,允许在1个Cluster中运行多个MySQL服务器。在MyQL5.0及以上的二进制版本中、以及与最新的Linux版本兼容的RPM中提供了......
2021-05-31数据库
-
corosync+heartbeat+mysql+nfs实现mysql高可用
简单介绍随着互联网络应用的发展,大规模海量级数据存储对于一个企业越来越重要,组织机构依赖于数据库来运行各种重要的业务,几小时甚至几分钟的宕机,都会造成不可估量的损失,因此保证数据库的高可用是所有组......
2021-05-31数据库
-
mongodb分片集群(sharding with replica set)配置4servers
一共有4台机器,各自挂接一个存储,希望实现:1,尽量节约存储2,高可用性3,存储大量数据配置方案:1,每一台机器做一个分片的主数据库2,每一台机器做一个分片的后备数据库3,每一台机器做一个分片的仲裁服务4,两个两......
2021-05-31数据库
-
heartbeat集群(1)集群原理
一, HA集群概念 (1)节点(node)运行heartbeat进程的一个独立主机,称为节点,节点是HA的核心组成部分,每个节点上运行着操作系统和heartbeat软件服务,在heartbeat集群中,节点有主次之分,分别称为......
2021-05-31数据库
-
heartbeat集群(2)集群安装
一,前期准备 1、Heartbeat集群必须的硬件 构建一个Heartbeat集群系统必须的硬件设备有: 节点服务器、网络和网卡、共享磁盘 2、操作系统规划 每个节点服务器都有两块网卡,一块用作连接公用网络,另......
2021-05-31数据库
-
MySQL数据库服务器端核心参数详解和配置
I.-------------------------------------------l lower_case_table_names Linux或类Unix平台,对文件名称大小写敏感,也即对数据库、表、存储过程等对象名称大小写敏 感,为减少开发人员的开发成本,为此推荐......
2021-05-31数据库
-
Hadoop伪集群模式的搭建实验
1、实验概述: 本实验主要是实现在单台服务器(虚拟机)上实现Hadoop的伪集群。为以后的实验进行铺垫2、实验目的: 熟悉Hadoop伪集群的搭建过程,并能够独立动手完成集群的搭建运行3、实验环境(CloudStack3.0......
2021-05-31数据库