Spark（53）
Spark中的数据本地性分为两种
executor 层面的数据本地性
task 层面的数据本地性
在两种本地性中，task层面的数据本地性是由Spark本身决定的，而executor的分发则是Cluter Manager控制的，因此下文主要描述在不同Cluster Manager中的executor分发机制。
Spark Standalone
Standalone提供了两种executor的分发模式。
由参数spark.deploy.spreadOut控制，默认为true，将会把executor分配到尽可能多的worker上，因此通常都能提供非常良好的数据本地性。
如果设置为false(不建议)，会将executor优先分配到一台机器中，能提供更高的机器使用率。
Spark on Yarn
在Spark on Yarn方式下，如果启用了Dynamic Allocation并设置spark.dynamicAllocation.initialExecutors为一个较低的值（例如0）。则在pending task申请executor时，就会判断任务的数据本地性，并且在有数据的节点上启动executor。
Spark on Mesos
会将executor集中分配在有空闲的slave中，因此会导致某些节点load非常高，而一些节点异常空闲情况，所以最好配合docker,marathon使用。
通过上述来看，目前Spark on Yarn + Dynamic Allocation的方式在executor的数据本地性上有着一定的优势。
分布式计算的瓶颈往往出现在IO上，因此良好的数据本地性能提高程序的整体运行速度。在机器较多的集群中，为了拥有更好的数据本地性，最简单的一种方式就是通过启动更多的executor来实现。
例如需要一个&4 cores, 20G RAM&的Spark Application。如果只启动一个executor，那么只会运行在一台节点上，其他机器的数据则需要通过网络IO来获取。如果启动4个executor,每个executor使用&1 cores,5G RAM&，那么executor将能分布到更多的节点上，获取更好的数据本地性。
参考知识库
* 以上用户言论只代表其个人观点，不代表CSDN网站的观点或立场
访问：65834次
积分：1505
积分：1505
排名：第19332名
原创：87篇
评论：15条
/users/dba7cda12069
个人主页：
www.lswyyy.me
同盾科技大数据岗位内推
(2)(6)(1)(5)(5)(1)(6)(7)(6)(10)(13)(5)(1)(2)(5)(1)(1)(6)(4)(6)(3)热门职位推荐
地区人才网招聘地区人才网招聘cluster manager - 必应 词典网络集群管理器；群集管理器；集群管理者1.集群管理器1). 集群管理器（Cluster Manager）集群（Cluster）由节点（Node）组成，而节点就是生产机、备份机。只有在 MC/Services Guard的管 …|2.群集管理器 本白皮书主要介绍群集管理器(Cluster Manager)的功能，同时也会介绍怎样将群集管理器和IP负载均 衡结合在一起共同为企业提供一个灵...|3.集群管理者集群技术工作原理:在一个集群中，又一个节点机充当集群管理者（Cluster Manager）的角色，塔最先收到用户发来的请求，然后判断一 …|4.簇管理器November | 2008 | thelinguahouse | Page 3 ... cluster ID 簇标示 Cluster Manager 簇管理器 cluster number 簇编号 ... |5.服务器集群管理器7. 服务器集群管理器(Cluster Manager)，负责管理多个服务器之间的负载平衡。由于单台服务器能够提供的服务量有限，可以采用软件负 …|6.集群软件集群软件（cluster manager）简称CM，工作在os级别。|7.集群式管理并将各自独立的视频服务器联成一体，提供集群式管理 (Cluster Manager) ；在为运营商提供更高的系统|更多释义收起释义例句释义:全部,集群管理器,群集管理器,集群管理者类别:全部,口语,书面语,标题,技术来源:全部,字典,网络难度:全部,简单,中等,难更多例句筛选收起例句筛选1.The
(clstrmgr)
Manager on an
R5 clusters
on the Internet
8. of their
9.The DB2 HA
nodes in the 必应词典应用准确权威无广告下 载 手 机 版 必 应 词 典体 验 P C 版 必 应 词 典© 2016 Microsoft[原创] 好久没写什么东东了，写点VCS - ChinaUnix.net
[原创] 好久没写什么东东了，写点VCS
http://www.chinaunix.net 作者:&&发表于： 01:46:54
1．环境：
两台SUN&Fire&480&,&A1000的阵列。Oracle&9i&环境。
每台480主机上面有6个网络接口。
---------------------------------------------------------------------
ce0&&&&&&&用来连接公网
ce1&&&&&&&
eri0&
fcip0
qfe0&qfe1&qfe2&qfe3&其中qfe0,qfe1用来做心跳线
---------------------------------------------------------------------
主机名&：&TEST1&&&&&&&10.10.10.11/24
&&&&&&&&&&TEST2&&&&&&&10.10.10.14/24
虚拟IP&：&10.10.10.10
VCS管理IP：10.10.10.9
2．准备工作
a.用两根交叉线把两台机器的qfe0和qfe0，qfe1和qfe1连接起来做心跳线。
b.两边机器写/etc/hosts文件，把两台主机名都写进去。
c.建立两台主机的信任关系
#vi&.rhost
+
安装好后可以删除。
d.在两台主机上面同时安装Oracle&9i,都不建库。关闭一台主机，用另一台主机在阵列上建库。
同时开两台主机。
把建好库的这台主机$ORACLE_BASE/&admin/{SID}/
&&&&&&&&&&&&&&&&&&$ORACLE_HOME/dbs/
&&&&&&&&&&&&&&&&&&$ORACLE_HOME/network/admin/
三个目录下的控制文件拷贝到另一台机器上，并做测试连接。
3．安装VCS
a.安装VCS软件包
#&cd&/cdrom/cdrom0
#&cd&cluster_server
#&ls
copyright&&&&&&installvcs&&&&&pkgs&&&&&&&&&&&scripts&&&&&&&&uninstallvcs
docs&&&&&&&&&&&licensevcs&&&&&release_notes&&support
#&./&installvcs
输入你要安装VCS的两台机器的主机名，前面的一个是active的，即本机。
Enter&the&names&of&the&systems&on&which&VCS&is&to&be&installed
separated&by&spaces&(example:&system1&system2):&TEST1&TEST2
&&&&Checking&for&ssh&on&TEST1&...........................&not&found
&&&&Checking&OS&version&on&TEST1&........................&SunOS&5.8
&&&&Verifying&communication&with&TEST2&............&ping&successful
&&&&Attempting&rsh&with&TEST2&......................&rsh&successful
&&&&Checking&OS&version&on&TEST2&........................&SunOS&5.8
&&&&Creating&/tmp&subdirectory&on&TEST2&...&/tmp&subdirectory&created
系统将自动和备机同步，如果在这里不能进行，你需要检查你的心跳连线是否正确。
Using&/usr/bin/rsh&and&/usr/bin/rcp&to&communicate&with&TEST2
Communication&check&completed&successfully
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&&&&&&&&&&
输入VCS的license
VCS&licensing&verification:
Checking&TEST1&...........................&No&license&key&found
Enter&the&license&key&for&TEST1:&PJPT-XNRY-2P8H-86P3-ZJPP
Valid&VCS&Demo&key&entered&for&TEST1
&&&&Registering&key&PJPT-XNRY-2P8H-86P3-ZJPP&on&TEST1&........&Done
&&&&Registering&key&PJPT-XNRY-2P8H-86P3-ZJPP&on&TEST2&........&Done
VCS&licensing&completed&successfully
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&&&
&&&&&
The&GUI&modules&of&VCS&use&the&Java&Run&Time&Environment(1.3)&from&Sun
and&require&that&some&Solaris&patches&be&installed&to&function&properly.
You&can&find&information&about&these&patches&and&instructions&for
downloading&them&at:
&&&&&&&&/j2se/1.3/install-solaris-patches.html
Are&you&ready&to&start&the&Cluster&installation&now?&(Y)&&Y
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&&&&&&&&&&&&&
Checking&current&installation&on&TEST1:
&&&&Checking&VRTSvcsw&...................................&Not&installed
&&&&Checking&VRTSweb&....................................&Not&installed
&&&&Checking&VRTSvcsmn&................................&Not&installed
&&&&Checking&VRTSvcsdc&..................................&Not&installed
&&&&Checking&VRTSvcsag&..................................&Not&installed
&&&&Checking&VRTSvcsmg&..................................&Not&installed
&&&&Checking&VRTSvcs&....................................&Not&installed
&&&&Checking&VRTSgab&....................................&Not&installed
&&&&Checking&VRTSllt&....................................&Not&installed
&&&&Checking&VRTSperl&...................................&Not&installed
&&&&Checking&VRTSvlic&...................................&Not&installed
Checking&current&installation&on&TEST2:
&&&&Checking&VRTSvcsw&...................................&Not&installed
&&&&Checking&VRTSweb&....................................&Not&installed
&&&&Checking&VRTSvcsmn&..................................&Not&installed
&&&&Checking&VRTSvcsdc&..................................&Not&installed
&&&&Checking&VRTSvcsag&..................................&Not&installed
&&&&Checking&VRTSvcsmg&..................................&Not&installed
&&&&Checking&VRTSvcs&....................................&Not&installed
&&&&Checking&VRTSgab&....................................&Not&installed
&&&&Checking&VRTSllt&....................................&Not&installed
&&&&Checking&VRTSperl&...................................&Not&installed
&&&&Checking&VRTSvlic&...................................&Not&installed
Installation&check&completed&successfully
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&&&&&&&&&&&&&&
Checking&file&system&space&on&TEST1:
&&&&Checking&/opt&............................&required&space&available
&&&&Checking&/usr&............................&required&space&available
&&&&Checking&/var&............................&required&space&available
&&&&Checking&/&...............................&required&space&available
Checking&file&system&space&on&TEST2:
&&&&Checking&/tmp&............................&required&space&available
&&&&Checking&/opt&............................&required&space&available
&&&&Checking&/usr&............................&required&space&available
&&&&Checking&/var&............................&required&space&available
&&&&Checking&/&...............................&required&space&available
File&system&verification&completed&successfully
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&&&&&&&&&&&&&&
Stopping&VCS&processes&on&TEST1:
&&&&Checking&VCS&..........................................&not&running
&&&&Checking&CmdServer&...............................&not&running
&&&&Checking&Web&GUI&processes&..................&not&running
&&&&Checking&notifier&processes&......................&not&running
&&&
Stopping&VCS&processes&on&TEST2:
&&&&Checking&VCS&..........................................&not&running
&&&&Checking&CmdServer&................................&not&running
&&&&Checking&Web&GUI&processes&...................&not&running
&&&&Checking&notifier&processes&.......................&not&running
&&&&Checking&GAB&...........................................&not&running
&&&&Checking&LLT&.............................................&not&running
VCS&processes&are&stopped
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&&&&&&&&&&&
输入VCS&cluster的名字，Cluster&ID&，一般为0。
To&configure&VCS&the&following&is&required:
&&&&&&&&A&unique&Cluster&name
&&&&&&&&A&unique&Cluster&ID&number&between&0-255
&&&&&&&&Two&NIC&cards&on&each&system&used&for&private&network&heartbeat&links
Are&you&ready&to&configure&VCS&on&these&systems?&(Y)&&Y&
Enter&the&unique&cluster&name:&&HSWAPJSCL
&[1mEnter&the&unique&Cluster&ID&number&between&0-255:&&0
Discovering&NICs&on&TEST1&...&discovered&qfe0&qfe1&qfe2&qfe3&le0&le1&le1&eri0&ce0&ce1&fcip0
输入你用于心跳线的网卡的名字。我们在这里用qfe0&&qfe1做心跳。
Enter&the&NIC&for&the&first&private&network&heartbeat&link&on&TEST1:&(qfe0&qfe1&qfe2&qfe3&le0&le1&le1&eri0&ce0&ce1&fcip0)&&qfe0
&[1mEnter&the&NIC&for&the&second&private&network&heartbeat&link&on&TEST1:&(qfe1&qfe2&qfe3&le0&le1&le1&eri0&ce0&ce1&fcip0)&&qfe1
Are&you&using&the&same&NICs&for&private&heartbeat&links&on&all&systems?&(Y)&&Y&
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&&&&&&&&&&&
Cluster&information&verification:
&&&&&&&&Cluster&Name:&HSWAPJSCL
&&&&&&&&Cluster&ID&Number:&0
&&&&&&&&Private&Network&Heartbeat&Links&for&TEST1:&link1=qfe0&link2=qfe1
&&&&&&&&Private&Network&Heartbeat&Links&for&TEST2:&link1=qfe0&link2=qfe1
Is&this&information&correct?&(Y)&&Y&
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&&&&&&&&&&&&&&
输入一个IP，即用于VCS&Web&Console远程管理的IP
The&following&information&is&required&to&configure&Cluster&Manager:
&&&&&&&&A&public&NIC&used&by&each&system&in&the&cluster
&&&&&&&&A&Virtual&IP&address&and&netmask&for&Cluster&Manager
Do&you&want&to&configure&Cluster&Manager&(Web&Console)&(Y)&&Y&
输入Web&Console的网卡端口和IP，这个端口用来做VCS的远程管理，注意：这个端口同时也可以是ORACLE对外的端口。即漂移地址10.10.10.10占用的端口。
Active&NIC&devices&discovered&on&TEST1:&ce0
Enter&the&NIC&for&Cluster&Manager&(Web&Console)&to&use&on&TEST1:&(ce0)&
Is&ce0&the&public&NIC&used&for&all&systems&(Y)&&Y
Enter&the&Virtual&IP&address&for&Cluster&Manager:&&&&10.10.10.9
Enter&the&netmask&for&IP&10.10.10.9:&(255.255.255.0)&&&
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&&&&&&&&&&&&&
Cluster&Manager&(Web&Console)&verification:
&&&&&&&&NIC:&ce0
&&&&&&&&IP:&10.10.10.9
&&&&&&&&Netmask:&255.255.255.0
Is&this&information&correct?&(Y)&&&Y
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&&&&&
&&&&
选择是否要对VCS做SMTP和SNMP管理
The&following&information&is&required&to&configure&SMTP&notification:
&&&&&&&&The&domain&based&address&of&the&SMTP&server
&&&&&&&&The&email&address&of&each&SMTP&recipient
&&&&&&&&A&minimum&severity&level&of&messages&to&send&to&each&recipient
Do&you&want&to&configure&SMTP&notification?&(Y)&&n
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&&&&&
The&following&information&is&required&to&configure&SNMP&notification:
&&&&&&&&System&names&of&SNMP&console(s)&to&receive&VCS&trap&messages
&&&&&&&&SNMP&trap&daemon&port&numbers&for&each&console
&&&&&&&&A&minimum&severity&level&of&messages&to&send&to&each&console
Do&you&want&to&configure&SNMP&notification?&(Y)&&n
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&
Installing&VCS&3.5&on&TEST1:
&&&&Installing&VRTSvlic&package&..................................&Done
&&&&Installing&VRTSperl&package&..................................&Done
&&&&Installing&VRTSvcs&package&...................................&Done
&&&&Installing&VRTSvcsmg&package&.................................&Done
&&&&Installing&VRTSvcsag&package&.................................&Done
&&&&Installing&VRTSvcsdc&package&.................................&Done
&&&&Installing&VRTSvcsmn&package&.................................&Done
&&&&Installing&VRTSweb&package&...................................&Done
&&&&Installing&VRTSvcsw&package&..................................&Done
&&&&Copying&VCS&Release&Notes&to&/opt/VRTSvcs/docs&...............&Done
Installing&VCS&3.5&on&TEST2:
&&&&Copying&VRTSvlic&binaries&....................................&Done
&&&&Installing&VRTSvlic&package&..................................&Done
&&&&Copying&VRTSperl&binaries&....................................&Done
&&&&Installing&VRTSperl&package&..................................&Done
&&&&Copying&VRTSllt&binaries&.....................................&Done
&&&&Installing&VRTSllt&package&...................................&Done
&&&&Copying&VRTSgab&binaries&.....................................&Done
&&&&Installing&VRTSgab&package&...................................&Done
&&&&Copying&VRTSvcs&binaries&.....................................&Done
&&&&Installing&VRTSvcs&package&...................................&Done
&&&&Copying&VRTSvcsmg&binaries&...................................&Done
&&&&Installing&VRTSvcsmg&package&.................................&Done
&&&&Copying&VRTSvcsag&binaries&...................................&Done
&&&&Installing&VRTSvcsag&package&.................................&Done
&&&&Copying&VRTSvcsdc&binaries&...................................&Done
&&&&Installing&VRTSvcsdc&package&.................................&Done
&&&&Copying&VRTSvcsmn&binaries&...................................&Done
&&&&Installing&VRTSvcsmn&package&.................................&Done
&&&&Copying&VRTSweb&binaries&.....................................&Done
&&&&Installing&VRTSweb&package&...................................&Done
&&&&Copying&VRTSvcsw&binaries&....................................&Done
&&&&Installing&VRTSvcsw&package&..................................&Done
&&&&Copying&VCS&Release&Notes&to&/opt/VRTSvcs/docs&...............&Done
Package&installation&completed&successfully
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&&&&&&&&&&&&&
&&&&Configuring&VCS&......................................................................&Done
&&&&Copying&VCS&configuration&files&to&TEST1&.................&Done
&&&&Copying&VCS&configuration&files&to&TEST2&.................&Done
Configuration&files&copied&successfully
是否启动VCS
Do&you&want&to&start&the&cluster&components&now?&(Y)&&Y
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&&&&&&&&&&&
Starting&VCS&on&TEST1
&&&&Starting&LLT&..............................................&Started
&&&&Starting&VCS&..............................................&Started
Starting&VCS&on&TEST2
&&&&Starting&LLT&VCS:10619:'HAD'&starting&on:&TEST1
&&&&Starting&VCS&..............................................&Started
VERITAS&CLUSTER&SERVER&INSTALLATION&PROGRAM&&&&&&&&&&&
Initial&VCS&configuration&files&are&backed&up&with&a&.init.HSWAPJSCL&extension
The&Cluster&can&be&managed&using&Cluster&Manager&(Web&Console)&using&the&URL:
&&&&&&&&http://10.10.10.9:8181/vcs
using&the&User&Name:&'admin'&and&the&Password:&'password'.
Use&the&'/opt/VRTSvcs/bin/hauser'&command&to&add&new&users.
To&manage&your&cluster(s)&using&Cluster&Manager&(Java&Console)&add&the
VRTScscm&package&to&a&non-clustered&system.
A&VCS&install&report&has&been&saved&at:
&&&&&&&&/var/VRTSvcs/installvcsReport.HSWAPJSCL
VCS&installation&completed&successfully
#&May&&7&18:39:55&TEST1&gab:&GAB:20036:&Port&h&gen&eb6ce001&membership&01
VCS:10077:received&new&cluster&membership
VCS:10082:System&(TEST1)&is&in&Regular&Membership&-&Membership:&0x3
VCS:10082:System&()&is&in&Regular&Membership&-&Membership:&0x3
VCS:10073:building&from&local&configuration
VCS:10066:entering&RUNNING&state
b.检测VCS安装是否正确
#&cd&VRTSvcs
#&ls
bin&&&&&&&docs&&&&&&install&&&lib&&&&&&&messages&&qsbin&&&&&rdc&&&&&&&src
#&cd&sbin
#&ls&llt*
lltconfig&&lltstat
显示VCS安装是否正确。
#&./lltstat
LLT&statistics:
&&&&312&&&&&&&&Snd&data&packets
&&&&39&&&&&&&&&Snd&retransmit&data
&&&&4476&&&&&&&Snd&connect&packets
&&&&25&&&&&&&&&Snd&independent&ACKs
&&&&138&&&&&&&&Snd&piggyback&ACKs
&&&&0&&&&&&&&&&Snd&independent&NACKs
&&&&0&&&&&&&&&&Snd&piggyback&NACKs
&&&&327&&&&&&&&Snd&loopback&packets
&&&&173&&&&&&&&Rcv&data&packets
&&&&8&&&&&&&&&&Rcv&out&of&window
&&&&0&&&&&&&&&&Rcv&duplicates
&&&&1&&&&&&&&&&Rcv&out&of&sequence
&&&&0&&&&&&&&&&Rcv&datagr&&0&&&&&&&&&&Rcv&multiblock&data
&&&&0&&&&&&&&&&Rcv&misaligned&data
LLT&errors:
&&&&0&&&&&&&&&&Rcv&not&connected
&&&&0&&&&&&&&&&Rcv&unconfigured
&&&&0&&&&&&&&&&Rcv&bad&dest&address
&&&&0&&&&&&&&&&Rcv&bad&source&address
&&&&0&&&&&&&&&&Rcv&bad&generation
&&&&0&&&&&&&&&&Rcv&no&buffer
&&&&0&&&&&&&&&&Rcv&malformed&packet
&&&&0&&&&&&&&&&Rcv&bad&dest&SAP
&&&&0&&&&&&&&&&Rcv&bad&STREAM&primitive
&&&&0&&&&&&&&&&Rcv&bad&DLPI&primitive
&&&&0&&&&&&&&&&Rcv&DLPI&error
&&&&0&&&&&&&&&&Snd&not&connected
&&&&0&&&&&&&&&&Snd&no&buffer
&&&&0&&&&&&&&&&Snd&stream&flow&drops
&&&&0&&&&&&&&&&Snd&no&links&up
查看两边的VCS是否已经启动起来
#&./gabconfig&-a
GAB&Port&Memberships
===============================================================
Port&a&gen&f76aec01&membership&01&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&
Port&h&gen&eb6ce001&membership&01&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&
配置文件
/etc/VRTSvcs/config/下面
c.安装VCS客户端GUI工具，Oracle&Agent,&Oracle&QuickStart&Wizard
注意：要在两台主机上都安装这些包
#&cd&/cdrom/cdrom0
#&cd&cluster_server
#&ls
copyright&&&&&&installvcs&&&&&pkgs&&&&&&&&&&&scripts&&&&&&&&uninstallvcs
docs&&&&&&&&&&&licensevcs&&&&&release_notes&&support
#&cd&pkgs
#&pkgadd&-d&./
下列软件包是可以使用的:
&&1&&VRTSappqw&&&&&VERITAS&Cluster&Server&Application&QuickStart&Wizard
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&2&&VRTScscm&&&&&&VERITAS&Cluster&Server&Cluster&Manager
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&3&&VRTSgab&&&&&&&VERITAS&Group&Membership&and&Atomic&Broadcast
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&4&&VRTSllt&&&&&&&VERITAS&Low&Latency&Transport
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&5&&VRTSoraqw&&&&&VERITAS&Cluster&Server&Oracle&QuickStart&Wizard
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&6&&VRTSperl&&&&&&VERITAS&Perl&for&VRTSvcs
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&7&&VRTSvcs&&&&&&&VERITAS&Cluster&Server
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&8&&VRTSvcsag&&&&&VCS&Bundled&Agents
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&9&&VRTSvcsdc&&&&&VERITAS&Cluster&Server&Documentation
&&&&&&&&&&&&&&&&&&&(Sparc)&3.5
&10&&VRTSvcsmg&&&&&VCS&Message&Catalogs
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
...&6&more&menu&choices&to&
&RETURN&;&for&more&choices,&&CTRL-D&;&to&stop&display:
&11&&VRTSvcsmn&&&&&VCS&Manual&Pages
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&12&&VRTSvcsor&&&&&VERITAS&Cluster&Server&Oracle&Enterprise&Extension
&&&&&&&&&&&&&&&&&&&(sparc)&2.0.1
&13&&VRTSvcsqw&&&&&VERITAS&Cluster&Server&QuickStart&Cluster&Manager&(Web&Console)
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&14&&VRTSvcsw&&&&&&VERITAS&Cluster&Manager&(Web&Console)
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&15&&VRTSvlic&&&&&&VERITAS&License&Utilities
&&&&&&&&&&&&&&&&&&&(sparc)&3.00.007d
&16&&VRTSweb&&&&&&&VERITAS&Web&GUI&Engine
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
选择你要执行的软件包(或选择'全部'执行所有的软件包).&(default:&all)&[?,??,q]:&2&5&12&
处理软件包范例&VRTScscm&;来自&/cdrom/storage_solutions_solaris_3.5cd1/cluster_server/pkgs&;
VERITAS&Cluster&Server&Cluster&Manager
(sparc)&3.5
/*&@(#)copyright&&&&&&&&1.4&27&May&:03&-&&&*/
/*
&*&Copyright(C)&1999&-&2002&VERITAS&Software&Corporation.&All&Rights&Reserved
&*
&*&THIS&SOFTWARE&CONTAINS&CONFIDENTIAL&INFORMATION&AND
&*&TRADE&SECRETS&OF&VERITAS&SOFTWARE.&&USE,&DISCLOSURE,
&*&OR&REPRODUCTION&IS&PROHIBITED&WITHOUT&THE&PRIOR
&*&EXPRESS&WRITTEN&PERMISSION&OF&VERITAS&SOFTWARE&CORPORATION
&*
&*&&&&&&&&&&&&&&&RESTRICTED&RIGHTS&LEGEND
&*&USE,&DUPLICATION&OR&DISCLOSURE&BY&THE&U.S.&GOVERNMENT&IS
&*&SUBJECT&TO&RESTRICTIONS&SET&FORTH&IN
&*&THE&VERITAS&SOFTWARE&CORPORATION&LICENSE&AGREEMENT&AND&AS
&*&PROVIDED&IN&DFARS&227.7202-1(a)&and
&*&227.7202-3(a)&(1998),&and&FAR&12.212,&as&applicable.
&*&VERITAS&Software&Corporation
&*&350&Ellis&Street,
&*&Mountain&View,&CA&94043.
&*
&*&UNPUBLISHED&--&RIGHTS&RESERVED&UNDER&THE&COPYRIGHT
&*&LAWS&OF&THE&UNITED&STATES.&&USE&OF&A&COPYRIGHT&NOTICE
&*&IS&PRECAUTIONARY&ONLY&AND&DOES&NOT&IMPLY&PUBLICATION
&*&OR&DISCLOSURE.
&*
&*/
使用&/&;作为包的基本目录
##&正在处理软件包信息.
##&正在处理系统信息.
3软件包路径名已经正确地安装
##&检查软件包的从属性
##&检查磁盘空间需求
##&检查同已经安装的软件包之间的冲突.
##&检查setuid/setgid程序。
在这个软件包中包含了正文程序，只有具有超级-用户的权限才能在这个软件包
的安装过程中执行它们.
要继续安装&VRTScscm&;吗?&y
安装VERITAS&Cluster&Server&Cluster&Manager成为&VRTScscm&;
##正在安装1部分-&1.
安装&VRTScscm&;成功
处理软件包范例&VRTSoraqw&;来自&/cdrom/storage_solutions_solaris_3.5cd1/cluster_server/pkgs&;
VERITAS&Cluster&Server&Oracle&QuickStart&Wizard
(sparc)&3.5
/*&@(#)copyright&&&&&&&&1.4&27&May&:03&-&&&*/
/*
&*
&*&Copyright(C)&1999&-&2002&VERITAS&Software&Corporation.&All&Rights&Reserved
&*
&*&THIS&SOFTWARE&CONTAINS&CONFIDENTIAL&INFORMATION&AND
&*&TRADE&SECRETS&OF&VERITAS&SOFTWARE.&&USE,&DISCLOSURE,
&*&OR&REPRODUCTION&IS&PROHIBITED&WITHOUT&THE&PRIOR
&*&EXPRESS&WRITTEN&PERMISSION&OF&VERITAS&SOFTWARE&CORPORATION
&*
&*&&&&&&&&&&&&&&&RESTRICTED&RIGHTS&LEGEND
&*&USE,&DUPLICATION&OR&DISCLOSURE&BY&THE&U.S.&GOVERNMENT&IS
&*&SUBJECT&TO&RESTRICTIONS&SET&FORTH&IN
&*&THE&VERITAS&SOFTWARE&CORPORATION&LICENSE&AGREEMENT&AND&AS
&*&PROVIDED&IN&DFARS&227.7202-1(a)&and
&*&227.7202-3(a)&(1998),&and&FAR&12.212,&as&applicable.
&*&VERITAS&Software&Corporation
&*&350&Ellis&Street,
&*&Mountain&View,&CA&94043.
&*
&*&UNPUBLISHED&--&RIGHTS&RESERVED&UNDER&THE&COPYRIGHT
&*&LAWS&OF&THE&UNITED&STATES.&&USE&OF&A&COPYRIGHT&NOTICE
&*&IS&PRECAUTIONARY&ONLY&AND&DOES&NOT&IMPLY&PUBLICATION
&*&OR&DISCLOSURE.
&*
&*/
使用&/&;作为包的基本目录
##&正在处理软件包信息.
##&正在处理系统信息.
&&&3软件包路径名已经正确地安装
##&检查软件包的从属性
##&检查磁盘空间需求
##&检查同已经安装的软件包之间的冲突.
##&检查setuid/setgid程序。
安装VERITAS&Cluster&Server&Oracle&QuickStart&Wizard成为&VRTSoraqw&;
##正在安装1部分-&1.
/opt/VRTSvcs/qsbin/clusterservice-wizard
/opt/VRTSvcs/qsbin/vcsqs-nfs-wizard
/opt/VRTSvcs/qsbin/vcsqs-oracle-wizard
/opt/VRTSvcs/wizards/VCSQSWiz.jar
[&确认类别&none&;&]
安装&VRTSoraqw&;成功
处理软件包范例&VRTSvcsor&;来自&/cdrom/storage_solutions_solaris_3.5cd1/cluster_server/pkgs&;
VERITAS&Cluster&Server&Oracle&Enterprise&Extension
(sparc)&2.0.1
&&Copyright(C)&1998&-&2002&VERITAS&Software&Corporation.&All&Rights&Reserved
&
&&THIS&SOFTWARE&CONTAINS&CONFIDENTIAL&INFORMATION&AND
&&TRADE&SECRETS&OF&VERITAS&SOFTWARE.&&USE,&DISCLOSURE,
&&OR&REPRODUCTION&IS&PROHIBITED&WITHOUT&THE&PRIOR
&&EXPRESS&WRITTEN&PERMISSION&OF&VERITAS&SOFTWARE&CORPORATION
&
&&&&&&&&&&&&&&&&RESTRICTED&RIGHTS&LEGEND
&&USE,&DUPLICATION&OR&DISCLOSURE&BY&THE&U.S.&GOVERNMENT&IS
&&SUBJECT&TO&RESTRICTIONS&SET&FORTH&IN
&&THE&VERITAS&SOFTWARE&CORPORATION&LICENSE&AGREEMENT&AND&AS
&&PROVIDED&IN&DFARS&227.7202-1(a)&and
&&227.7202-3(a)&(1998),&and&FAR&12.212,&as&applicable.
&&VERITAS&Software&Corporation
&&350&Ellis&Street,
&&Mountain&View,&CA&94043.
&
&&UNPUBLISHED&--&RIGHTS&RESERVED&UNDER&THE&COPYRIGHT
&&LAWS&OF&THE&UNITED&STATES.&&USE&OF&A&COPYRIGHT&NOTICE
&&IS&PRECAUTIONARY&ONLY&AND&DOES&NOT&IMPLY&PUBLICATION
&&OR&DISCLOSURE.
使用&/&;作为包的基本目录
##&正在处理软件包信息.
##&正在处理系统信息.
&&&9软件包路径名已经正确地安装
##&检查软件包的从属性
##&检查磁盘空间需求
##&检查同已经安装的软件包之间的冲突.
##&检查setuid/setgid程序。
在这个软件包中包含了正文程序，只有具有超级-用户的权限才能在这个软件包
的安装过程中执行它们.
要继续安装&VRTSvcsor&;吗?&y
安装VERITAS&Cluster&Server&Oracle&Enterprise&Extension成为&VRTSvcsor&;
##正在安装1部分-&1.
安装&VRTSvcsor&;成功
下列软件包是可以使用的:
&&1&&VRTSappqw&&&&&VERITAS&Cluster&Server&Application&QuickStart&Wizard
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&2&&VRTScscm&&&&&&VERITAS&Cluster&Server&Cluster&Manager
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&3&&VRTSgab&&&&&&&VERITAS&Group&Membership&and&Atomic&Broadcast
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&4&&VRTSllt&&&&&&&VERITAS&Low&Latency&Transport
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&5&&VRTSoraqw&&&&&VERITAS&Cluster&Server&Oracle&QuickStart&Wizard
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&6&&VRTSperl&&&&&&VERITAS&Perl&for&VRTSvcs
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&7&&VRTSvcs&&&&&&&VERITAS&Cluster&Server
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&8&&VRTSvcsag&&&&&VCS&Bundled&Agents
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
&&9&&VRTSvcsdc&&&&&VERITAS&Cluster&Server&Documentation
&&&&&&&&&&&&&&&&&&&(Sparc)&3.5
&10&&VRTSvcsmg&&&&&VCS&Message&Catalogs
&&&&&&&&&&&&&&&&&&&(sparc)&3.5
...&6&more&menu&choices&to&
&RETURN&;&for&more&choices,&&CTRL-D&;&to&stop&display:&^D&&退出
选择你要执行的软件包(或选择'全部'执行所有的软件包).&(default:&all)&[?,??,q]:&q
注意在/etc/vfstab里面要把挂载阵列的那一行删除掉。
#&more&&vfstab
#device&&&&&&&&&device&&&&&&&&&&mount&&&&&&&&&&&FS&&&&&&fsck&&&&mount&&&mount
#to&mount&&&&&&&to&fsck&&&&&&&&&point&&&&&&&&&&&type&&&&pass&&&&at&boot&options
#
#/dev/dsk/c1d0s2&/dev/rdsk/c1d0s2&/usr&&&&&&&&&&ufs&&&&&1&&&&&&&yes&&&&&-
fd&&&&&&-&&&&&&&/dev/fd&fd&&&&&&-&&&&&&&no&&&&&&-
/proc&&&-&&&&&&&/proc&&&proc&&&&-&&&&&&&no&&&&&&-
/dev/dsk/c1t0d0s1&&&&&&&-&&&&&&&-&&&&&&&swap&&&&-&&&&&&&no&&&&&&-
/dev/dsk/c1t0d0s0&&&&&&&/dev/rdsk/c1t0d0s0&&&&&&/&&&&&&&ufs&&&&&1&&&&&&&no&&&&&&
-
/dev/dsk/c1t0d0s3&&&&&&&/dev/rdsk/c1t0d0s3&&&&&&/usr&&&&ufs&&&&&1&&&&&&&no&&&&&&
-
/dev/dsk/c1t0d0s5&&&&&&&/dev/rdsk/c1t0d0s5&&&&&&/var&&&&ufs&&&&&1&&&&&&&no&&&&&&
-
/dev/dsk/c1t1d0s0&&&&&&&/dev/rdsk/c1t1d0s0&&&&&&/export/home&&&&ufs&&&&&2&&&&&&&
yes&&&&&-
/dev/dsk/c1t1d0s1&&&&&&&/dev/rdsk/c1t1d0s1&&&&&&/export/product&ufs&&&&&2&&&&&&&
yes&&&&&-
/dev/dsk/c1t0d0s4&&&&&&&/dev/rdsk/c1t0d0s4&&&&&&/opt&&&&ufs&&&&&2&&&&&&&yes&&&&&
-
#&/dev/dsk/c2t5d0s0&&&&&/dev/rdsk/c2t5d0s0&&&&&&/oradb&&ufs&&&&&2&&&&&&&yes&&&&&不能有这个
-
swap&&&&-&&&&&&&/tmp&&&&tmpfs&&&-&&&&&&&yes&&&&&-
4.使用VCS&GUI设置
a.root登陆
b.&登陆VCS&管理GUI界面
#hagui&&
c.输入cluster的别名，我们这里叫testCL，输入主机名test1
&
d.输入用户名和密码，admin&password
e.把ORACLE&agent的文件copy&过去,copy&OracleTypes.cf&到/VRTS/conf/config下面，
选择File-Import&File--type&
f.添加资源
IP&&&&&&&对外漂移地址
NIC&&&&&使用的网卡ce0
ORACLE&agent&&
MOUNT点
Sqlnet&&
&
&
建立资源并做link，在建立IP的时候建立虚拟IP，即对外的IP，10.10.10.10就是oracle漂移地址。
注意：/opt/VRTSvcs/bin/Oracle/OracleAgent必须存在，不然oracle&agent不能在线，修改文件Oracle&Agent.Current为OracleAgent文件,
在加ORACLE的时候注意要设置成local
sqlnet&要设置成gloab
&
g.右键资源，对建立的资源做link
&
g.右击资源的oracle--online--选一台主机，使之上线
&
h.两台主机间的切换
&
右击资源Switch&To---选主机
i.最终的配置文件在
/etc/VRTSvcs/conf/config/main.cf
include&"types.cf"
include&"OracleTypes.cf"
cluster&HSWAPJSCL&(
UserNames&=&{&admin&=&"cDRpdxPmHpzS."&}
Administrators&=&{&admin&}
CounterInterval&=&5
system&TEST1&(
system&TEST2&(
group&oracle&(
SystemList&=&{&TEST1&=&1,&TEST2&=&2&}
AutoStartList&=&{&TEST1&}
Critical&=&0
Device&=&ce0
Address&=&"10.10.10.10"
NetMask&=&"255.255.255.0"
Mount&mount&(
Critical&=&0
MountPoint&=&"/oradb"
BlockDevice&@TEST1&=&"/dev/dsk/c2t5d0s0"
BlockDevice&@TEST2&=&"/dev/dsk/c3t5d0s0"
FSType&=&ufs
FsckOpt&=&"-n"
Critical&=&0
Device&=&ce0
NetworkType&=&ether
Oracle&oracle&(
Critical&=&0
Sid&@TEST1&=&test
Sid&@TEST2&=&test
Owner&@TEST1&=&oracle
Owner&@TEST2&=&oracle
Home&@TEST1&=&"/export/product/oracle/app"
Home&@TEST2&=&"/export/product/oracle/app"
Pfile&@TEST1&=&"/export/product/oracle/app/dbs/inittest.ora"
Pfile&@TEST2&=&"/export/product/oracle/app/dbs/inittest.ora"
Sqlnet&sqlnet&(
Critical&=&0
Owner&@TEST1&=&oracle
Home&@TEST1&=&"/export/product/oracle/app"
Home&@TEST2&=&"/export/product/oracle/app"
TnsAdmin&@TEST1&=&"/export/product/oracle/app/network/admin"
Listener&@TEST2&=&LISTENER
ip&requires&nic
oracle&requires&ip
oracle&requires&mount
sqlnet&requires&oracle
//&resource&dependency&tree
// group&oracle
// Sqlnet&sqlnet
// &&&&Oracle&oracle
// &&&&&&&&{
// &&&&&&&&IP&ip
// &&&&&&&&&&&&{
// &&&&&&&&&&&&NIC&nic
// &&&&&&&&&&&&}
// &&&&&&&&Mount&mount
// &&&&&&&&}
几个容易出问题的地方
1.有两个IP地址要设置，一个是在安装的时候要设置的VCS&WEB管理的地址，既是10.10.10.9。
一个是在安装好后用GUI设置的ORACLE对公网的漂移地址，既是10.10.10.10。
2．/etc/vfstab中间的关于阵列的那行一定要删除，两边机器绝对不能同时mount数据库的目录并操作。不然会造成数据库的崩溃。
&&&&:emn2:&:emn2:&:emn2:&:emn2:&:emn2:&:emn2:
& 回复于： 17:29:31
俺告诉你的方法没有问题吧：）
& 回复于： 17:44:58
老大，你给偶的那个也太简单了.......
& 回复于： 17:48:45
没人给贴个标吗？？？太打击偶的积极性了................&:emn17:
& 回复于： 17:51:53
我给你那个&文章&翻译&的不错。。。
就是还有好多没翻过来。。。
& 回复于： 17:55:05
臭猪，16号把你的关于nis/nis+的文章交出来
还有SL&hutao，你的那个ldap刚两章，剩下的呢？
& 回复于： 18:06:47
引用：原帖由&"diag"&发表：我给你那个&文章&翻译&的不错。。。
就是还有好多没翻过来。。。
想S呀！！！！这是我笔记，安装的时候一步步抓下来的.......&:evil:&&:evil:
& 回复于： 18:43:25
引用：原帖由&"sunmarmot"&发表：
想S呀！！！！这是我笔记，安装的时候一步步抓下来的.......&:evil:&&:evil:
辛苦拉，以后多抓抓，呵呵
现在工资高了不少吧，可以到北京请我吃饭拉吧
& 回复于： 19:02:03
引用：原帖由&"sunmarmot"&发表：
想S呀！！！！这是我笔记，安装的时候一步步抓下来的.......&:evil:&&:evil:
没有党的领导&。。你能认识这么多西班牙文吗？？？？？
& 回复于： 20:11:21
应该说是凤凰领导的好！
& 回复于： 20:46:35
请教:只用一根心跳线似乎也可以吧?&:roll:
& 回复于： 00:20:34
引用：原帖由&"leucen"]请教:只用一根心跳线似乎也可以吧?&:roll:&发表：
可以,也可以将公网当作私网用.当然这样的话,公网的流量会很大.
& 回复于： 08:39:35
哇，好东东，收藏一下!
我顶!
& 回复于： 09:16:55
引用：原帖由&"南非蜘蛛"&发表：
辛苦拉，以后多抓抓，呵呵
现在工资高了不少吧，可以到北京请我吃饭拉吧
好吧！！！不如你到南京或上海我请你吃饭~~~~~~我的手艺还是可以的。二级大厨的水平，hohoho~~~~~~现在天天在家做，安全第一啦！！
& 回复于： 09:28:11
引用：原帖由&"sunmarmot"&发表：
好吧！！！不如你到南京或上海我请你吃饭~~~~~~我的手艺还是可以的。二级大厨的水平，hohoho~~~~~~现在天天在家做，安全第一啦！！
把饭给我EMS&过来。&我正饿着呢。
& 回复于： 09:44:06
支持，支持。已经收藏！
& 回复于： 09:49:10
:oops:&我有一台&sun&ultra&1和一台sun&sparc&5&不知道能干什么？？
& 回复于： 14:36:08
在Oracle&Agent脚本里，最好将sys换成system，因为如果用sys，oracle会产生大量的audit文件。Oracle&Agent在不断地探测Oracle的可用性，Oracle&Agent每连接一次Oracle&Server，就会有一个audit文件。如果有一天很不幸你的机器非正常reboot了，几万个甚至几十万个audit文件......，fsck都够你等半天的。我试过很多次，怎么也去不掉audit，pfile和spfile我都改了，邪门！
BTW，楼主说的vcs，我怎么觉得是vcsqs啊，好像不是vcsae和rac配置的load&balance的集群，当年用vcsae和rac好像还有很多步骤，都忘的差不多了。
& 回复于： 16:44:19
:)&
不错不错，安装时有这样的文挡参考应该有用处。
& 回复于： 16:50:26
& 回复于： 16:54:11
就是VCSQS咯
& 回复于： 23:49:26
引用：原帖由&"ORA-600"]在Oracle&Agent脚本里，最好将sys换成system，因为如果用sys，oracle会产生大量的audit文件。Oracle&Agent在不断地探测Oracle的可用性，Oracle&Agent每连接一次Oracle&Server，就会有一个audit文件。如果有一天很不?.........&发表：
楼上的,请问"最好将sys换成system"什么意思啊?
& 回复于： 10:34:30
顶一下！！我也想知道
& 回复于： 12:40:10
Vcsqs的Oracle&Agent是用sqlplus&"/&as&sysdba"等方式连接数据库，然后执行一些sql语句来监测数据库的可用性。因为sys的身份是sysdba，sysdba每次连接数据库都会产生审计文件，即audit文件，vcsqs频繁地以sys连接oracle，更会产生大量的audit文件(在$ORACLE_HOME/rdbms/audit里)，如果磁盘出现问题，那么大量的audit文件会使fsck速度减慢，有时候还会出问题。所以可以将脚本改改，就不会出现这些问题了，每次数据库switch的时候，还是会有audit文件，但是那样就少的多了。管理员还是要经常看看数据库的情况的。
& 回复于： 13:18:00
长见识了,怎么改啊?&oracle&agent的脚本可以直接改么?
& 回复于： 13:19:34
& 回复于： 13:24:02
懂了！！那偶也可以不去改那个东东，在contab里面定制一条，定期把在$ORACLE_HOME/rdbms/audit里的东东备份，然后把audit里的删除掉就可以了。一个星期做一回我感觉比较好！！
& 回复于： 21:52:38
root@GDBLDB01&#&hares&-online&GDWAPPTL&-sys&GDBLDB01
VCS:10269:Agent&for&resource&failed&on&system&GDBLDB01
有哪位大侠知道如何处理这个问题？？？&我每次通过VCS起ORACLE都不成功。急死啦&&&
跪谢………………
& 回复于： 23:27:47
偶写了呀！你看看你的agent的配置文件呀
& 回复于： 01:46:54
Good&Stuff!
原文链接：
转载请注明作者名及原文出处