荔园在线

荔园之美,在春之萌芽,在夏之绽放,在秋之收获,在冬之沉淀

[回到开始] [上一篇][下一篇]


发信人: unique (花开四季 香飘八方), 信区: Linux
标  题: crontab命令完成SCO UNIX系统中大批量数据的自动备份
发信站: 荔园晨风BBS站 (2005年04月14日20:01:35 星期四), 转信


作者:佚名 来源:InterNet 加入时间:2005-2-15
 在UNIX系统中,为了使数据备份变得轻松、容易、安全,最好的办法就是自动安
排系统例行工作(系统调度),在系统空闲时间里自动执行任务。如定期删除一些流
水文件、日志文件,定期完成数据的本地备份和异地备份等。这样既发挥了UNIX系
统的卓越功能,又减轻了系统管理员的工作量,使数据备份做到及时安全。
一、建立数据备份用户
  首先建立一个用户,如:userbk,将该用户的属主、属组设定为Informix,权限
为755。在该用户下存放备份的各种数据,以便统一备份到磁带上或异地机器上。
二、用系统例行工作安排作业
  UNIX系统有一个始终运行的守护进程,该进程可以在正常调度的间隙运行作业,
用户可以在一个文件中指定crontab命令运行任务,cron守护程序在初始化或该文件
修改后自动读取其内容。crontab文件中指定的各个域为:
  分钟 小时 月 日 星期几 命令
如文件/usr/spool/cron/crontabs/root存放超级用户调度的命令,内容为:
  17 5  0 /etc/cleanup>/dev/null
  0 2  0,4 /usr/lib/cron/logchecker
  3 3 /usr/lib/cleantmp>/dev/null
  1 3 /etc/setclk-rd1800>/dev/null 2>&1
  #5 18 1-5/usr/lib/sa/sa2 -s 8:00 -e 18:01-i 1200-A
  0 4 0 /etc/custom -V symlinks;#CUSTOM -SYMLINK -REPORT
  0 0 1-5 scosh cronsched-r
  0 01 scosh cronsched-wr
第一行的作用是在每周星期日5:17执行/etc/cleanup来清除系统上的某些日志文
件。第二行的作用是每周星期日和星期四2:00执行/usr/lib/cron/logchecker来检
查守护进程cron的日志文件。第三行为每天3:03运行/usr/lib/cheantmp命令清除
指定目录中的临时文件等。
  用户可以用命令crontab -u root -e来编辑此文件,在文件最后加入一行内容
:
  0 3  kill-user
此行内容为每天3:00运行kill-user,此命令文件的任务是终止某些用户的进程。

  同样,用命令crontab-u userbk -e来编辑userbk文件,安排userbk用户的作业
任务,内容如下:
  10 3 bdbf
  30 5  0 ftp -inv<ydbf>ydbf.log
  0 2  1 rm .log
第一行内容为每天3:10运行bdbf程序,使数据备份至/usr/userbk目录下, 并拷贝
到磁带上。第二行内容为每周星期日5:30运行ydbf程序,将备份至/usr/userbk目
录下的数据通过网络传送到异地机器上存贮,并将备份信息写入 ydbf.log日志文件
中。第三行内容为每月1日2:00删除/usr/userbk下的日志文件。
三、本地数据备份
  笔者使用的操作平台为SCO Openserver5.04系统,数据库为Informix4.0和
Informix-Online7.3两种版本。在Informix4.0上使用的业务有“人身保险”(用
户名rsbx)、“子女备用金保险”(用户名zbbx)等。数据以字符串形式保存在各自
的目录下,备份时可用tar命令或cpio命令将整个用户目录备份即可。而在
Informix-Online7.3上应用的有“综合处理系统”(用户名c4g1,库名picc2.
dbs),“会计记帐系统”(用户名为claf,库名account.dbs)等,数据存放在
Online指定的设备上,平时采用ontape -s命令备份,但由于此命令实现自动备份较
困难,并且不能和其它数据备份到一盘磁带上,会造成备份介质的浪费。所以最好采
用 dbexport命令备份数据。运行dbexport命令的前提是调用数据库的相关用户必

退出,一旦有一个应用点没有退出,备份就会失败。为了确保数据的安全备份,需
编制一个终止进程的命令文件,即前述中由超级用户调度的kill-user程序。
  程序1:/usr/bin/kill-user
  ps -u rsbx >tmp-a
  ps -u zbbx >>tmp-a
  ps -u c4gl >>tmp-a
  ps -u claf >>tmp-a
  cut -cl-6 tmp-a >tmp-b
  while read a
  do
    kill-9 $a
    echo “kill alread$a”|cat>>/tmp/kill-user.log
  done <tmp-b
  rm tmp-a tmp-b
  程序前5行为列用户进程,并将所要终止的进程存放至/tmp/K-user2文件中,后面
的循环语句是杀死进程,并将运行信息存放至/tmp/kill-user.log日志文件中,以
备查阅。此程序放在“/”下或“/usr/bin”下。
  程序2:/usr/user/bdbf 本地数据备份程序
  INFORMIXDIR=/user/informix
  PATH=$PATH:$HOME/bin:.:$INFORMIXDIR
/bin
  INFORMIXSERVER=cbps-shm
  ONCONFIG=onconfig.cbps
  export PATH MAIL INFORMIXDIR INFORMIXSERVER ONCONFIG
  rm -r .Z
  find /usr/rsbx |cpio-oacvB>RSBX;compress RSBX
  find /usr/zbbx |cpio-oacvB>ZBBX;compress ZBBX
  …
  rm-r.exp
  dbexport -c picc2 -ss
  find ./picc2.exp | cpio-oacvB>PICC2;compress PICC2
  dbexport -c account -ss
  find ./account.exp | cpio-oacvB>ACCOUNT;compress ACCOUNT
  …
  sleep 10
  tar c8v .Z
  date | cat>>userbk.log
  echo“PICC2 ACCOUNT RSBX ZBBX...backup over”|cat>>userbk.log
  程序中所设置的环境变量同Informix用户的环境变量设置一样,所有需要备份的
数据用归档命令cpio拷贝至/usr/userbk目录下,用户可根据自已的实际情况自行添
加,然后用tar命令统一将所有文件拷贝至磁带上,最后将备份信息写到日志文件
userbk.log中,这样系统管理员只需每天早晨上班后检查一下是否备份好,然后更换
一般磁带即可。
  四、异地数据备份
  熟悉网络的人都知道FTP的功能十分强大,它主要用于网络之间的文件传输。一
般情况下,用户传输多个文件时,需登录服务器逐一传输,只有等待一个文件传送
完毕之后才能传输下一个,这样用户需花很长时间守候在终端前等待一个文件传输
结束。为了简化工作,在UNIX平台上FTP支持非在线传输,即用户只需把要输入的命
令逐条写进shell脚本,FTP传输文件时调用脚本即可,例:对上述/usr/userbk目录下
的数据文件的异地备份,可用如下脚本来完成。
  程序3:/usr/userbk/ydbf
  open hostgs
  user mybackup mypasswd
  mpt .Z
  bye
程序中的hostgs为异地的主机名。该主机名需在本地主机/etc/hosts文件中定义。
mybackup、mypasswd是异地主机中为备份数据而建立的用户名和口令字,当系统例
行程序调用此程序时,可将数据全部备份至异地的hostgs主机中mybackup用户下。

五、数据恢复
  本地备份到磁带上的数据可用tar x8v命令将数据文件拷贝到/usr/userbk目录下
。异地备份的数据可用FTP命令传输至该目录下,或者直接用/usr/userbk目录下的
数据,用uncompress.Z解压。
  对于Informix4.0版以字符串形式存放的数据,可直接用cpio命令来恢复。如:
rsbx用户数据可用如下命令来恢复:
  cpio -icduvB < RSBX
  对于Informix-Online的数据恢复,需采用如下方法。如对picc2数据库的恢复
可用如下命令来恢复:
  cpio -icduvB < PICC2
  dbimport picc2 -d workdbs
  其中,workdbs为Online建立的数据空间,须注意的是恢复数据库时,原数据库
必须删除。




--

        每当有人赞美我的时候 我总是感到浑身不安
;
;                                        因为我觉得他们赞美的不够


※ 来源:·荔园晨风BBS站 bbs.szu.edu.cn·[FROM: 192.168.55.192]


[回到开始] [上一篇][下一篇]

荔园在线首页 友情链接:深圳大学 深大招生 荔园晨风BBS S-Term软件 网络书店