已阅读5页,还剩10页未读, 继续免费阅读
版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
对Oracle数据库进行容灾(Veritas Volume Replicator(VVR)) 2008-08-13 07:12:08标签:数据库 容灾推送到技术圈 随着全球信息化时代的到来,信息数据越来越成为企业关注的焦点,即在各种自然灾害或者人为破坏的情况下,如何保证生产数据的安全和关键业务的不中断运行。传统的保护方法离线备份、备份介质异地保存在一定程度上可以解决上述问题,但为了能够对业务系统提供更高的实时性和可靠性,保证关键业务7x24不中断,应对激烈的市场竞争和提高客户满意度,企业必须在IT系统围绕“连续”(BC)主题进行构建,实施业务连续/容灾备份计划,包括业务连续性、高可用性管理、容灾、数据复制和恢复方案、安全等,下面就对数据复制技术做一个简单的介绍。 根据数据复制运行的位置,可以将数据复制方式分为以下四种:基于存储(Storage-Based):代表厂商有EMC SRDF、IBM PPRC/GDPS 、HP BusinessCopy、HDS TrueCopy等,特点对主机透明,对应用系统的影响较小,技术成熟,有较多的成功案例,但是投资较大,对网络连接的要求也较高。基于服务器(Host-based):代表厂商主要是Symantec公司的Veritas Volume Replicator (VVR),是存储卷的复制技术。需要占用主机一定的系统资源。基于存储交换机(SAN-Based):运行于挂接在存储网络上的专用设备中,代表厂商有CISCO的SANTap,FalconStor IPStor,Topio SANsafe,DataCore SANsymphony, Asynchronous Internet Mirroring (AIM)等。基于数据库/软件应用 :代表厂商有Oracle DataGuard,Quest SharePlex,IBM-DB2的远程Q复制,SYBASE的复制服务器(Replication Server) 等,这些技术都是对数据逻辑操作的复制,属于逻辑数据复制,而其它3种复制的是数据卷中的数据变化,属于物理数据复制。典型的逻辑数据复制是通过数据库日志实现的,优点是硬件投资小,对生产系统的影响比较小,对主、备用系统的硬件平台没有选择性;可以在广域网范围内使用。但它对数据库系统有严格的要求,并且主、备用系统必须使用相同的数据库版本。上面介绍的主要的各厂商方案和产品可以参见下图:本文主要介绍基于主机和逻辑卷的数据复制VVR。VERITAS的VVR(Veritas Volume Replicator)是用于有效的灾难恢复的数据复制软件,可以连续对应用数据进行一个或者多个的拷贝保护。具有的优点主要有:高性能,距离不限,支持异构的存储和操作系统,对数据的连续保护,支持同步和异步复制。VVR系统架构如下图:VVR具有的系统特性如下:(1) 最高支持32个远程节点,可以通过基于IP的LAN或者WAN网络;(2) 通过对逻辑卷的同步和异步复制模式,保证数据的完整性和一致性;(3) 确保备用节点和主节点的数据具有相同的写入顺序;(4) 支持对网络带宽的管理和定义,支持多链路的连接;(5) 支持对备用节点的脱机操作,以便在备用节点进行查询(例如DSS决策支持系统)或者数据备份;(6) 易管理:同时支持命令行和图形界面(VEA);(7) 主备节点之间支持多种异构存储;(8) 支持不同操作系统平台之间的复制;(注:在本文中,因为设计到Oracle数据库的复制,所以主备操作系统必须同一类型,比如必须都是Solaris平台,版本完全相同的Oracle版本)(9) 支持主流关系数据库系统,包括Oracle,DB2,Sybase和Informix,数据文件的存放格式包括逻辑卷(裸设备)或者文件系统;(10) 支持共享的集群环境中的逻辑卷复制,比如Oracle RAC (Real Application Clusters) (注:本文中采用的是单节点Oracle复制);(11) 支持Veritas volume set;(12) 支持PDC (Portable Data Container)环境的数据复制;VVR数据复制系统主要由下面五个组件组成: Replicated Volume Group (RVG) 复制卷组RVG是位于VxVM 磁盘组(DG)内的一组逻辑卷,RVG隶属于磁盘组的一部分,通过定义这些逻辑卷,应用对逻辑卷的写操作都可以保持以主节点上同样的顺序,来写到备用节点上。对于多数数据库系统来说,都是由一些特定的进程完成对磁盘的写操作,比如Oracle系统中的LOWR和DBWR进程,而这些写操作总是依照着一定顺序,从而来保证实例恢复中数据的一致和完整。比如数据库变化通常在写入日志文件后才会写入数据文件,所以当日志文件和数据文件属于要复制的不同逻辑卷的时候,它们必须被定义到同一组RVG中。每组RVG最多可以包括2048个数据卷。下面介绍SRL和RLINK,它们也包括在RVG中。 Storage Replicator Log (SRL)SRL用于记录RVG中数据写操作的日志,并循环被使用。每个RVG包括一个SRL。数据在写入RVG中的卷之前,首先要写到主节点的SRL中。从VxVM的角度来看,SRL是一个单独的卷,因为所有的写操作首先要写到SRL中,这个卷需要有较好的写性能,所以多数情况下需要对这个卷进行条带化,并且在不同的盘上mirror以保护数据,同时数据卷和SRL卷最好分布在不同的物理磁盘上以得到更好的性能。不允许人工直接对SRL进行访问。 Replication LinkRLINK用于连接主RVG和备用RVG之间的一个“链接”,一个主的RVG最多可以有32个RLINK。可以定义RLINK的多个属性来调整数据复制的参数,比如指定复制的网络。 Data Change Map (DCM) Replicated Data Set (RDS)一个RDS包括了所有的主节点和备用节点的复制卷组(RVG)。RDS不是一个具体存在的对象,而是一个VVR复制技术中的一个概念。在异步模式下VVR的数据复制和数据流向在同步模式下VVR的数据复制和数据流向另外,VVR是Veritas Volume Manager (VxVM)的一个单独的option,需要单独的license。Veritas Volume Replicator 的安装主备节点硬件和软件配置和版本如下:主节点 机器名:lxsfrac01Sun Microsystems Sun Fire X4100 Server操作系统 solaris10u4 x86_64VVR版本: Veritas Volume Replicator 5.0 GAOracle 版本: Oracle 10gR2 Enterprise Edition磁盘阵列:SAN/ HDS AMS 1000Public网卡:e1000g0 私有(复制)网卡:e1000g1备用节点机器名:lxsfrac02软硬件环境与主节点相同两个节点分别安装VVR和vxfs,安装方法相同,以lxsfrac02为例:放入安装介质,一般Solaris都由vold进程自动mount CD,如果需要手工 mount:mountFhsfsoro/dev/dsk/c0t6d0s2/cdrom rootlxsfrac02#cd./volume_replicator/ rootlxsfrac02#ls copyrightdocsinstallvvrpkgsrelease_notesscriptstoolsuninstallvvr rootlxsfrac02#ls-l total24 -rw-r-r-1rootroot476Dec152006copyright drwxrwxr-x2rootroot512Jun2110:13docs -rwxr-xr-x1rootroot2283Apr142007installvvr drwxrwxr-x3rootroot1024Jun2110:13pkgs drwxrwxr-x2rootroot512Jun2110:13release_notes drwxrwxr-x3rootroot512Jun2110:13scripts drwxrwxr-x3rootroot512Jun2110:13tools -rwxr-xr-x1rootroot2283Apr142007uninstallvvr rootlxsfrac02#./installvvrlxsfrac02 VeritasVolumeReplicator5.0InstallationProgram Copyright(c)2007SymantecCorporation.Allrightsreserved.Symantec,theSymantecLogoaretrademarksorregisteredtrademarksofSymantecCorporationoritsaffiliatesintheU.S.andothercountries.Othernamesmaybetrademarksoftheirrespectiveowners. TheLicensedSoftwareandDocumentationaredeemedtobecommercialcomputersoftwareandcommercialcomputersoftwaredocumentationasdefinedinFARSections12.212andDFARSSection227.7202. Logsforinstallvvrarebeingcreatedin/var/tmp/installvvr-mrk46Y. Initialsystemcheck: CheckingVVRinstallationonlxsfrac02.notinstalled Checkingarchitectureonlxsfrac02.i386 VeritasVolumeReplicator5.0InstallationProgram Checkingsystemlicensing Installinglicensingpackages VVRisnotlicensedonlxsfrac02 EnteraVVRlicensekeyforlxsfrac02:* *successfullyregisteredonlxsfrac02 PermanentVVRlicenseregisteredonlxsfrac02 Doyouwanttoenteranotherlicensekeyforlxsfrac02?y,n,q(n) VeritasVolumeReplicator5.0InstallationProgram Checkinginstalledpackagesonlxsfrac02 VeritasVolumeReplicator5.0InstallationProgram VVRcanbeinstalledwithoutoptionalpackagestoconservediskspace. Additionalpackagesaretypicallyinstalledtosimplifyfutureupgrades. 1)RequiredVeritasVolumeReplicatorpackages-855MBrequired 2)AllVeritasVolumeReplicatorpackages-861MBrequired 3)StorageFoundationEnterprisepackages-911MBrequired Selectthepackagestobeinstalledonallsystems?1-3,q,?(3)2 VeritasVolumeReplicator5.0InstallationProgram ThefollowingVVRpackageswillbeinstalled: VRTSperlVeritasPerl5.8.8Redistribution VRTSvlicVeritasLicensing VRTSicscoSymantecCommonInfrastructure VRTSpbxSymantecPrivateBranchExchange VRTSsmfSymantecServiceManagementFramework VRTSatSymantecProductAuthenticationService VRTSobc33VeritasEnterpriseAdministratorCoreService VRTSobVeritasEnterpriseAdministratorService VRTSobguiVeritasEnterpriseAdministrator VRTSccgVeritasEnterpriseAdministratorCentralControlGrid VRTSmhVeritasStorageFoundationManagedHostbySymantec VRTSaaVeritasEnterpriseAdministratorActionAgent VRTSsptVeritasSoftwareSupportTools SYMClmaSymantecLicenseInventoryAgent VRTSvxvmVeritasVolumeManagerBinaries VRTSdsaVeritasDatacenterStorageAgent VRTSfsproVeritasFileSystemManagementServicesProvider VRTSvmmanVeritasVolumeManagerManualPages VRTSvmdocVeritasVolumeManagerDocumentation PressReturntocontinue: .continued: VRTSdcliVeritasDistributedCommandLineInterface VRTSallocVeritasVolumeManagerIntelligentStorageProvisioning VRTSvmproVeritasVolumeManagerManagementServicesProvider VRTSddlprVeritasDeviceDiscoveryLayerServicesProvider VRTSvrproVeritasVolumeReplicatorClientExtensionandProviderfor VeritasEnterpriseAdministrator VRTSvcsvrVeritasClusterServerAgentsforVVR VRTSjreVeritasJavaRuntimeEnvironmentRedistribution VRTSjre15VeritasJavaRuntimeEnvironmentRedistribution VRTSwebVeritasJavaWebServer VRTSvrwVeritasVolumeReplicatorWebConsole VRTSvrdocVeritasVolumeReplicatorDocumentation PressReturntocontinue: CheckingforanyAPdriverissuesonlxsfrac02.None AcopyofapreviousVxVMconfigurationispresentonthesystemlxsfrac02. DoyouwanttorestoreandreusethepreviousVxVMconfigurationofsystemlxsfrac02y,n,q,?(y)n VeritasVolumeReplicator5.0InstallationProgram InstallingVVR:100% Installationcompletedsuccessfullyonallsystems ItisoptionaltoconfigureVVRnow.IfyouchoosetoconfigureVVRlater,youcaneitherdosomanually,orruntheinstallvvr-configurecommand.Theproductinstallationscriptscanbefoundin/opt/VRTS/installdirectory AreyoureadytoconfigureVVR?y,n,q(y) Theenclosure-basednamingschemeisafeatureofVeritasVolumeManager.Itallowsonetoreferencedisksusingasymbolicnamethatismoremeaningfulthantheoperatingsystemsnormaldeviceaccessname.Thissymbolicnameistypicallyderivedfromthearrayname. Doyouwanttosetuptheenclosure-basednamingscheme?y,n,q,?(n)y VeritasVolumeReplicator5.0InstallationProgram VeritasVolumeManagerdefaultdiskgroupnameconfiguration: ManyVeritasVolumeManagercommandsaffectthecontentsorconfigurationofadiskgroup.Suchcommandsrequirethattheuserspecifyadiskgroup.Thisisaccomplishedbyusingthe-goptionofacommandorsettingtheVXVM_DEFAULTDGenvironmentvariable.Analternativetothesetwomethodsforsomecommandsistoconfigurethenameofthedefaultdiskgroupofasystem. Note:ThedefaultdiskgroupfeatureisnotavailablewiththeDCLIvxadm(1M)andvxquery(1M)commands.Whenusingthesecommands,arequireddiskgroupmustbeexplicitlyidentifiedusingthe-goption. Doyouwanttosetupadefaultdiskgroupforeachsystem?y,n,q,?(y)n VeritasVolumeReplicator5.0InstallationProgram FollowingarethedefaultportsthatwillbeusedbyVVRonlxsfrac02: PortforVVRheartbeatcommunication:4145 Portforvradminddaemon:8199 Portforvxrsyncddaemon:8989 Portsfordatareplication:Anonymous-Ports TheportsindicatedforVVRheartbeatsandvradmindareIANAassigned. TheportsettingsshouldbeidenticalforsystemsthatwillbepartofthesameReplicatedDataSet.Theyshouldalsobeidenticalforallthesystemsinacluster. DoyouwanttochangeanyoftheVVRportsonlxsfrac02?y,n,q(n) VeritasVolumeReplicator5.0InstallationProgram VVRStatisticsCollectionTool TheVVRadministrativedaemonvradmindcancollectandmaintainvarious statisticswhicharehelpfulinsolvingVVRperformanceissues.This collectioncanbetunedusingafewtunableslikethefrequencyfor gatheringthestatisticsandthenumberofdaysforwhichthecollected statisticsshouldbepreserved,afterwhichtheearlierstatisticsare automaticallydeleted. ThefrequencyofVVRstatisticscollectiononlxsfrac02issettoper10seconds. DoyouwanttochangethefrequencyofVVRstatisticscollectiononlxsfrac02?y,n,q(n) ThemaximumnumberofdaysforwhichVVRstatisticscanberetainedissetto3onlxsfrac02 DoyouwanttochangethemaximumnumberofdaysforretainingVVRstatisticsonlxsfrac02?y,n,q(n) VeritasVolumeReplicator5.0InstallationProgram ConfigurationofVVRtunables(Fortheadvanceduser) DoyouwanttoviewormodifyVVRtunablesonlxsfrac02?y,n,q,?(n) VeritasVolumeReplicator5.0InstallationProgram VerifytheinstallsystemsFullyQualifiedHostnames. Queryingfullyqualifieddomainnameofhostlxsfrac02.fail PressReturntocontinue: UnabletofindFQHNforlxsfrac02! Enterthefullyqualifiedhostnameoflxsfrac02orQUITtoquitinstall. Enterthefullyqualifiedhostname:lxsfrac02 VeritasVolumeReplicator5.0InstallationProgram Choosehowthisinstallwillbemanaged. Thisproductcanconfiguredoneofthetwofollowingways: *StorageFoundationManagementServermanagedhost(Recommended) *Standalonehost Pre-requisitesforStorageFoundationManagementServermanagedhost: *AStorageFoundationManagementServer(SFMS)isconfigured *SFMSshouldbecurrentlyrunningandfullyoperational. *AuthenticationBrokerthatisusedbySFMSshouldberunning. Thefollowinginformationwouldberequestedduringconfiguration: *ThehostnameoftheSFMS *PreviouslysetSFMSagentaccountpassword Therearenopre-requisitesfordeployingasastandalonehost. EnablingStorageFoundationManagementServermanagementsimplifiesandimprovesmanagementofthecomplexdatacenter resources,reducingplannedandunplanneddowntime. EnableStorageFoundationManagementServerManagement?y,n,q(y)n VeritasVolumeReplicator5.0InstallationProgram VerifytheinstallsystemsFullyQualifiedHostnames. ConfiguringVEAinSTANDALONEmodeonlxsfrac02.ok Configuringgridnodeonlxsfrac02.ok Registeringgridnodeonlxsfrac02.ok Configuringactionagentonlxsfrac02.ok Registeringactionagentonlxsfrac02.ok RegisteringStorageAgentonlxsfrac02.ok DoyouwanttostartVeritasVolumeReplicatorprocessesnow?y,n,q(y) VeritasVolumeReplicator5.0InstallationProgram StartingVVR:100% Startupcompletedsuccessfullyonallsystems Youdeclinedtosetupthenameofthedefaultdiskgroupforlxsfrac02. Installationlogfiles,summaryfile,andresponsefilearesavedat: /opt/VRTS/install/logs/installvvr-mrk46Y ToenableDynamicMulti-Pathing(DMP),MPxIOmustbedisabled.RefertotheStorageFoundationReleaseNotesforfurtherdetailsondisablingMPxIO. 检查vradmindeamon: rootlxsfrac02#ps-ef|grepvrad|grep-vgrep root98081016:24:47?0:00/usr/sbin/vradmind 安装VeritasFileSystem:安装过程略 rootlxsfrac02#cdfile_system/ rootlxsfrac02#ls-l total22 -rw-r-r-1rootroot476Dec152006copyright drwxrwxr-x2rootroot512Jun2110:12docs -rwxr-xr-x1rootroot2283Apr142007installfs drwxrwxr-x3rootroot1024Jun2110:12pkgs drwxrwxr-x2rootroot512Jun2110:12release_notes drwxrwxr-x3rootroot512Jun2110:12scripts -rwxr-xr-x1rootroot2283Apr142007uninstallfs rootlxsfrac02#./installfslxsfrac02Veritas Volume Replicator VVR的配置 1. 两个节点上都需要做:修改两个节点的/etc/hosts10.198.90.122 lxsfrac0110.198.90.139 lxsfrac02192.168.0.122 lxsfrac01-priv192.168.0.139 lxsfrac02-priv分别创建私有网络(专有),建议数据复制使用专用网络。rootlxsfrac01 # ifconfig e1000g1 plumb 192.168.0.122 netmask 255.255.255.0 uprootlxsfrac02 # ifconfig e1000g1 plumb 192.168.0.139 netmask 255.255.255.0 uprootlxsfrac01 # ping 192.168.0.139192.168.0.139 is alive创建相同名称的磁盘组(含有最少两个磁盘),相同名称数据卷oravol,创建复制日志卷(SRL),分别在本地安装Oracle 10gR2.(安装Oracle过程略。)rootlxsfrac01 # vxdg init oradg AMS_WMS0_2 AMS_WMS0_3rootlxsfrac01 # vxassist -g oradg make oravol 10grootlxsfrac01 # vxedit -g oradg set user=oracle group=dba mode=644 oravolrootlxsfrac01 # vxassist -g oradg make srl 800m2.在备用节点上修改配置文件/etc/vx/vras/.rdg,让其包含主节点上的disk group ID(这里是1193985774.38.lxsfrac01)。当创建备用RVG时,这个文件用来对主节点的授权。可以通过vxprint l来得到disk group IDrootlxsfrac02 # vi /etc/vx/vras/.rdg1193985774.38.lxsfrac01/etc/vx/vras/.rdg 43 lines, 1544 characters3.在主节点上:创建vxfs文件系统mount -F vxfs -o largefiles /dev/vx/dsk/oradg/oravol /oraclechown oracle:dba /oracle切换到oracle用户使用dbca建库,并且所有数据文件选择/oracle目录创建Primary RVG:rootlxsfrac01 # vradmin -g oradg createpri ora_rvg oravol srl其中的oravol是要复制的数据卷列表,当多于一个时,用逗号隔开。创建Secondary RVG:rootlxsfrac01 # vradmin -g oradg addsec ora_rvg lxsfrac01-priv lxsfrac02-priv设置复制方式为异步:rootlxsfrac01 # vradmin -g oradg set ora_rvg lxsfrac02-priv synchronous=off开始复制: rootlxsfrac01#vradmin-goradg-astartrepora_rvg MessagefromPrimary: VxVMVVRvxrlinkWARNINGV-5-1-3359Attachingrlinktonon-emptyrvg.Autosyncwillbeperformed. VxVMVVRvxrlinkINFOV-5-1-3614Secondarydatavolumesdetectedwithrvgora_rvgasparent: VxVMVVRvxrlinkINFOV-5-1-6183oravol:len=20971520primary_datavol=oravol VxVMVVRvxrlinkINFOV-5-1-3365Autosyncoperationhasstarted rootlxsfrac01# rootlxsfrac01#vradmin-goradg-fstartrepora_rvg VxVMVVRvradminINFOV-5-52-1203ReplicationtoSecondaryhostlxsfrac02-privalreadystarted.检查相关信息和状态,显示数据复制过程,可以通过使用-i参数指定intervalrootlxsfrac01#vxrvg-goradggetrlinksora_rvg rlk_lxsfrac02-priv_ora_rvg rootlxsfrac01#vxrlink-goradgstatusrlk_lxsfrac02-priv_ora_rvg FriNov0217:01:222007 VxVMVVRvxrlinkINFOV-5-1-4464Rlinkrlk_lxsfrac02-priv_ora_rvgisinAUTOSYNC.9888256Kbytesremaining. rootlxsfrac01#vxrlink-goradgstatusrlk_lxsfrac02-priv_ora_rvg FriNov0217:02:082007 VxVMVVRvxrlinkINFOV-5-1-4464Rlinkrlk_lxsfrac02-priv_ora_rvgisinAUTOSYNC.9375488Kbytesremaining. rootlxsfrac01#vxrlink-goradgstatusrlk_lxsfrac02-priv_ora_rvg FriNov0217:13:262007 VxVMVVRvxrlinkINFOV-5-1-4464Rlinkrlk_lxsfrac02-priv_ora_rvgisinAUTOSYNC.1901824Kbytesremaining. rootlxsfrac01#vxrlink-goradgstatusrlk_lxsfrac02-priv_ora_rvg FriNov0217:19:162007 VxVMVVRvxrlinkINFOV-5-1-4467Rlinkrlk_lxsfrac02-priv_ora_rvgisuptodate可以手工进行gracefully切换rootlxsfrac01#umount/oracle rootlxsfrac01#vradmin-goradgmigrateora_rvglxsfrac02-priv VxVMVVRvradminWARNINGV-5-52-93MakesureapplicationsusingPrimarydatavolumesarestopped. vradmin:Continuewithmigrate(y/n)?y rootlxsfrac01#下面我们就在上面搭建好的VVR环境中对容灾数据进行切换测试: 注:在下面测试中,主节点
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 汽车焊装生产线操作工岗前实操知识考核试卷含答案
- 水生植物病害防治员岗前记录考核试卷含答案
- 口腔设备组装调试工安全知识宣贯能力考核试卷含答案
- 中药材种植员达标模拟考核试卷含答案
- 测量与控制系统(单元)装调工安全实操能力考核试卷含答案
- 危险品物流员成果竞赛考核试卷含答案
- 文物修复师岗中应急能力考核试卷含答案
- 油墨制造工基础综合测试考核试卷含答案
- 乒乓球拍制作工岗位实践评估考核试卷含答案
- 内燃机车钳工岗前安全宣传考核试卷含答案
- 2026北京市朝阳区卫生健康委员会所属事业单位第二批招聘241人笔试备考题库及答案解析
- 4.1妈妈教学设计
- 2026年内蒙古中考语文试卷及答案
- 神经内科诊疗新技术
- 成人术中外周静脉输液技术操作及管理指南
- 双侧前庭病诊断与治疗专家共识
- 110kV变电站电气调试实施方案
- 八年级物理第二学期期中考试质量分析
- 2026-2030中国化机浆市场竞争规划与未来前景发展趋势研究报告
- 2026年全国客运从业资格证考试模拟试题及答案
- 2026粉末冶金开发高速钢刀片脱模剂适用性分析报告
评论
0/150
提交评论