oracle非结构化数据管理方案交流

智慧油田是促油田企 的重要基

高效 云能 易于管业务与信息化发展给企业企业应对新考验的同时，之前的问题并 ，而且变得更加凸显和激化大集中部署应用系统以越来越大的压力

通过合并与实现与升级。并购备本地化服务能力

– 应用为 架构为关注应用的特异业务逻辑与技术紧耦每个应用建设均需考虑所有环需解决信息孤岛问需考虑标准化－－求成

满足应用&平台需

关注平台的整体业务逻辑与技术松耦初期规划任务重，后续部署简消除信息孤需注重差异化－－存成为业务增长和拓展提 选端到端的石油与天然气行 解决案，提供从硬件设备到领先的应用软为上中下游业务提供更快的创新能力撑更好的信息化性更低的总拥有成以下领域或产品在石油与天然气行业名第一数据应用服务器（中间件Primavera(P3orHyperion( 、合并Siebel(客户关系管理 – 智能油

资产全生命周建供

实时智能运

规商务智智能管

项目组合管

财务管理与控卓越服卓越供应

绩效，风险与贸管

客户关系管

健康安全环企业基础设 –Internal/Restricted/Highly

Image

SQLXML

15-Semi&50-*Gartner&IDC s,在一个典型的企业中，结构化数据是大约占半结构化、非结构化数据占有数据增长、膨胀迅

勘探工程设计文本文档，来自于工程设计

炼化工程设计文本文档，来自于工程设计实 数据，来自于传感器软

管 信息，来自于加管系统软件录入客户关系系统客 信息，来自于零管系统软件录入

内容管 ，来自于平 录非结构化+ +

结构 半结构 非结构 文件系统的简便性及其性能使得企业偏向于采用文件系统 半结构化或非结构化数据而将关系型数据 在数据库主流数据库支持将文件数 在数据库–性能是很多用户关心的问 两种数据类型的分开管理损害了对应用来说就太复杂了对应用来说就太复杂了 – NewinNewin Binary –Internal/Restricted/Highly –Internal/Restricted/Highly OracleSecureFiles是数据库的新特性，用于解决文件数据 SecureFiles功能实现在DB11g版本，在DB12C版本以及Exadata中得到 的功非关系型与关系型业务数据按相关 在数据库方SecureFileLOBs使得 支持高级文件管理特

Relational SecureFileCustomers –Internal/Restricted/Highly SecureFilesWriteSecureFilesWriteSecureFilesRead0 写可以达到每小时2亿个文件,读可以达到每小时7.8 文件:高带写能达到4GB/s8对比SecureFilesVs.NFS1

FileRead FileWrite1 FileSize

FileSize查询效率提升2～3倍

SecureFilesVs.0

Writes FileSize

0

Writes:Reused FileSize

0

Read FileSize 写的性能提升2倍左利用压缩功能，节省空间22倍左读的性能提升3倍左多份相同的SecureFiles拷贝 一对于一般文件能实现2到3通过减少IO、BufferCache的需求，redo为关系型和文件型数据提供了统一的安全 模极大地减 次透明数据加密(TDE)保证数据安全 为基于内容 提供细粒度的审安全有不同 限制策略级别(例如 统一的数OracleDatabase12cIn-MemoryLOB加速LOBstringconcatenate,append,substr,length,instr,compare,trim,like,replace,pad,nvlusingSQLfunctionsorDBMS_LOBpackageOracleDatabase12cLoad&Move5～17倍 MOVE操作 SecureFilesJDBC,ODBC,OCI,.NET,12C为SecureFiles文件系统客户端使用由ContentDBXDBSpatialIntermediaOLAP,ContentDBSecureFiles使用OnlineTableRedefinition可以轻松将LOB转换为SecureFilesSecureFilesReadableStandby,ConsistentBackup,PointinTime细粒度审计（FineGrained 安全（LabelXMLXMLRealApplicationAutomaticStorage –Internal/Restricted/Highly SecureFiles最佳实践-ExadataDBFS：DatabaseFileSystem基于数据库的文件系

支持DBFS共享文件系共享系统可以用于ETLStagging,Scripts,reportandapplicationfiles文件在Exadata数据库中可以以SecurefilesLOBs方与其他数据库数据一样得到保5～7GB/sec文件系统的I/O吞吐OracleDBFSDBFS:标准的数据库文件系字典信 在数据表非结构化数 在SecureFiles提供标准的Oracle数据库服提供统一的数据文件备份，ETL,容灾管DBFSETL

DBFSServerin

DBFSSecureFiles DBFSHSMStore分 管DBFSHSM允许将归档文件导入磁带库，降 通过应用迁移老旧文件到HSM一个DBFSLink替代一个LOB字段 是完全透明HSMstore:磁盘分 ，用 最近 文量少 文件可以迁移到磁带ss/Sales/Sales

DBFSProvidedCompression,Deduplication,CrashAtomictransactions,Mirroring,Stri,OnlineAddDisasterRecovery,ReadableRemoteDataConsistentRMAN,HotImpromptuConsistentRestoretoPointinFlashback,MediaRetention/Network使用ExadataDBFS将元数据和影像统一存放在Exadata以带来额外的优势，方便IT部门的管理和运维。包括： ，可以采用Exadata数据库的Partition等工具，进行海 压缩和加密，Exadata数据库提供了内容加密，压缩/去重等工具，提 海 ，不会发生文件系统inode节点用光的情况 –Internal/Restricted/Hig