• 全球级的分布式数据库Google Spanner原理

    Google Spanner简介Spanner 是Google的全球级的分布式数据库 (Globally-Distributed Database) 。Spanner的扩展性达到了令人咋舌的全球级,可以扩展到数百万的机器,数已百计的数据中心,上万亿的行。更给力......

    2021-05-31数据库

  • SSIS Cluster配置

    安装完成SQL Server 2005 Cluster之后,SSIS并不会默认安装成为Cluster,需要手工进行配置,配置过程请参考:http://msdn2.microsoft.com/en-us/library/ms345193(SQL.90).aspx##。重要提示:Microsoft 不建......

    2021-05-31数据库

  • AIX下was进程占用CPU率较高实例深解析

    一朋友求助,生产服务器一台AIX小机WAS进程占用CPU率较高引发频繁报警,而此前该服务器一直正常。环境:AIX 5.3/WAS6.1发生故障现象时的截图如下:问题处理步骤 1、首先通过topas监控可以看到当前占用CPU率较高......

    2021-05-31数据库

  • Vmware RHEL5 Oracle 10G RAC安装实验详细过程(一)

    实验环境:普通PC一台(3GB内存,500GB硬盘)Vmware Server 1.0.6版RedHat Linux Enterprise 5.1Oracle 10g for linux(10.2.0.1)前言: 首先要感谢itpub里君三思学习笔记里的:《手把手教你用VMware在l......

    2021-05-31数据库

  • DRBD+Corosync+Pacemaker配置MySQL高可用性群集(上)

    一、实验环境Vmware-Redhatenterprise5.4在node1与node2上操作1、修改主机名#vim/etc/sysconfig/networkNETWORKING=yesNETWORKING_IPV6=noHOSTNAME=node1.a.com/HOSTNAME=node2.a.com2、hosts文件#echo"192.168.......

    2021-05-31数据库

  • mysql-proxy实现负载均衡及读写分离

    mysql-proxy具有代理的功能,将客户端的mysql请求轮询至后台的mysql-server。环境介绍:一台mysql-proxy(178)两台mysql-server(180,122)一台mysql-client(254)在mysql-proxy上安装如下包:1.安装 pkg-config:(......

    2021-05-31数据库

  • 基于HBASE的并行计算架构之rowkey设计篇

    1.大数据在HBASE存储、计算以及查询的应用场景海量数据都是事务数据,事务数据都是在时间的基础上产生的。数据的业务时间可能会顺序产生,也可能不会顺序产生,比如某些事务发生在早上10点,但是在下午5点才结束......

    2021-05-31数据库

  • NOSQL系列-memcached安装管理与repcached高可用性

    Memcached :基于内存工作键值存储型数据库,可以作为应用->memcached 缓存层->数据库。Danga Interactive公司开发,最初为了加速LiveJournal访问速度而开发的,后来成为广泛应用的开源项目。一、实验环境1.系......

    2021-05-31数据库

  • MMM (Multi-Master Replication Manager for MySQL)MySQL集群简介

    OneCoder最近在关注一些基于MySQL的数据库集群方案。不过目前只是一些表面的搜集和粗浅的了解,还没有亲身试用。这次我们了解的是:Multi-Master Replication Manager for MySQL,官网地址:http://mysql-mm......

    2021-05-31数据库

  • Memcached常规应用与分布式部署方案

    下面天涯[PHPHA.COM]介绍下Memcached的最常规的应用及分布式部署方案。相关内容参考了凹凸曼写的Memcached使用与实践章节。至于Memcached的安装及基本使用,这里不做介绍,有需要可以借助Google或Baidu。1、Memc......

    2021-05-31数据库

  • AIX下删除LV后的现场保护和数据恢复方案

    在AIX环境下,因维护误操作、存储mapping错误等,不小心将LV误删除,这种损失通常是巨大的。删除后的不当保护及恢复操作可能使数据无法恢复,也可能增加处理的时间与算法复杂度。如何有效保护现场,并选择正确......

    2021-05-31数据库

  • AIX平台下HA环境安装HDLM的步骤

    前提 产看HDLM与主机和HA的兼容性,确保兼容性。上传HDLM软件1、将HDLM上传到/tmp下修改目录权限chown -R root:staff /tmp/HDLM_AIX0662002、拷贝license文件 可以直接将license文件直接上传到/var/tmp "l......

    2021-05-31数据库

  • 磁盘读写与数据库的关系

    一 磁盘物理结构(1) 盘片:硬盘的盘体由多个盘片叠在一起构成。在硬盘出厂时,由硬盘生产商完成了低级格式化(物理格式化),作用是将空白的盘片(Platter)划分为一个个同圆心、不同半径的磁道(Track),还将磁道划......

    2021-05-31数据库

  • MYSQL+heratbeat+DRBD+LVS 数据库高可用群集 DRBD部分

    在企业数据库应用群集方案中MYSQL+heratbeat+DRBD+LVS已经很成熟了,通过heartbeat+DRBD实现MYSQL的主节点写操作的高可用性;通过MYSQL+LVS实现MYSQL读操作的负载均衡。DRBD简单工作流程:当数据写入到本地主节点......

    2021-05-31数据库

  • Memcache集群的安装和配置

    一、常用命令 -p 监听的端口-l 连接的IP地址, 默认是本机-d start 启动memcached服务-d restart 重起memcached服务-d stop|shutdown 关闭正在运行的memcached服务-d install 安装memcached服务-d u......

    2021-05-31数据库

  • Hadoop+hive+map+reduce集群安装部署 (二)

    上一节介绍了Hadoop 集群的部署过程,这一节我们来用Python创建一个map/reduces过程来分析IIS日志日志文件为附件:map脚本advanceiislog.py 内容为:#!/usr/bin/python2.4#coding=utf8import fileinputimport......

    2021-05-31数据库

  • Hadoop+hive+map+reduce集群安装部署(一)

    环境准备:Centos 5.5 x64 (3台)10.129.8.52 (master) ======>> NameNode, SecondaryNameNode,JobTracker10.129.8.76 (slave01) ======>> DataNode, TaskTracker10.129.8.33 (slave02) ======>> ......

    2021-05-31数据库

  • mysql基于RHCS、Gtid主从复制的高性能、LB、HA集群架构

    本文基于2个角度进行1:mysql主从复制,读写分离部分2:RHCS实现mysql-proxy、mysql-master、lvs高可用架构图可能会用到的yum源http://dl.fedoraproject.org/pub/epel/6/x86_64/epel-release-6-8.noarch.rpmhttp......

    2021-05-31数据库

  • MySQL Cluster(MySQL集群) 初试

    MySQLCluster是MySQL适合于分布式计算环境的高实用、高冗余版本。它采用了NDBCluster存储引擎,允许在1个Cluster中运行多个MySQL服务器。在MyQL5.0及以上的二进制版本中、以及与最新的Linux版本兼容的RPM中提供了......

    2021-05-31数据库

  • corosync+heartbeat+mysql+nfs实现mysql高可用

    简单介绍随着互联网络应用的发展,大规模海量级数据存储对于一个企业越来越重要,组织机构依赖于数据库来运行各种重要的业务,几小时甚至几分钟的宕机,都会造成不可估量的损失,因此保证数据库的高可用是所有组......

    2021-05-31数据库

  • mongodb分片集群(sharding with replica set)配置4servers

    一共有4台机器,各自挂接一个存储,希望实现:1,尽量节约存储2,高可用性3,存储大量数据配置方案:1,每一台机器做一个分片的主数据库2,每一台机器做一个分片的后备数据库3,每一台机器做一个分片的仲裁服务4,两个两......

    2021-05-31数据库

  • heartbeat集群(1)集群原理

    一, HA集群概念 (1)节点(node)运行heartbeat进程的一个独立主机,称为节点,节点是HA的核心组成部分,每个节点上运行着操作系统和heartbeat软件服务,在heartbeat集群中,节点有主次之分,分别称为......

    2021-05-31数据库

  • heartbeat集群(2)集群安装

    一,前期准备 1、Heartbeat集群必须的硬件 构建一个Heartbeat集群系统必须的硬件设备有: 节点服务器、网络和网卡、共享磁盘 2、操作系统规划 每个节点服务器都有两块网卡,一块用作连接公用网络,另......

    2021-05-31数据库

  • MySQL数据库服务器端核心参数详解和配置

    I.-------------------------------------------l lower_case_table_names Linux或类Unix平台,对文件名称大小写敏感,也即对数据库、表、存储过程等对象名称大小写敏 感,为减少开发人员的开发成本,为此推荐......

    2021-05-31数据库

  • Hadoop伪集群模式的搭建实验

    1、实验概述: 本实验主要是实现在单台服务器(虚拟机)上实现Hadoop的伪集群。为以后的实验进行铺垫2、实验目的: 熟悉Hadoop伪集群的搭建过程,并能够独立动手完成集群的搭建运行3、实验环境(CloudStack3.0......

    2021-05-31数据库