精华内容
下载资源
问答
  • 非结构化数据存储

    千次阅读 2009-06-22 14:09:00
    很多数据库应用都必须面临非结构化数据存储的问题,这个问题对整个系统往往都是非常关键的。因此我们需要一个适合的方案,折中地考虑了性能、安全和稳定性等因素。本文简单地阐述了以SQL SERVER和ORACLE为数据库管理...

    很多数据库应用都必须面临非结构化数据存储的问题,这个问题对整个系统往往都是非常关键的。因此我们需要一个适合的方案,折中地考虑了性能、安全和稳定性等因素。本文简单地阐述了以SQL SERVER和ORACLE为数据库管理系统的应用系统的实现方案(注:仅是个人观点)。

    其实不外乎两种实现方式:
          1. 使用文件系统存储文件,而在数据库中存储访问路径。这种方式的优点是实现简单,不需要DBMS的高级功能,但是这种方式无法实现文件的事务性访问,不便于数据备份和恢复,不便于数据迁移等;
          2. 使用DBMS的文件存储功能。比较常见的方式,如SQL SERVER中的FILESTREAM/BLOB,ORACLE中的BFILE/BLOB。这种方式克服了实现方式一的缺点,但是需要DBMS提供支持,也就是说这种方式的实现方式的控制权在DBMS厂商手中,DBMS实现的好则好,坏则坏。这种方式需要考虑的最重要的一点就是通过DBMS直接或间接地操作非结构化数据会不会生成过多的undo/redo,会不会影响整个系统的性能,会不会降低系统的并发程度等等。
          我个人的观点是,实现方式1适合使用廉价存储、对事务访问以及备份等关注不多的或存储超大文件(几百M)的场景,其他的场景使用实现方式2会更合适一些。

    展开全文
  • 面向云存储的非结构化数据存储研究....
  • 非结构化数据存储管理的实用化方法.pdf
  • 非结构化数据包括文本、图像、音频、视频、PDF、电子表格等。非结构化数据存储通常有两种方式: 1. 将非结构化数据以文件的方式存储在文件系统中,同时将指向文件的链接...

    非结构化数据包括文本、图像、音频、视频、PDF、电子表格等。非结构化数据存储通常有两种方式:


    1. 将非结构化数据以文件的方式存储在文件系统中,同时将指向文件的链接或路径存储在数据库表中。这种方式数据读写的速度较快,但数据管理不方便,并需要额外考虑事务处理的一致性和数据的安全性。
    2. 将非结构化数据存储在传统的数据库表的大对象字段中。这种方式充分利用数据库的事务、管理和安全特性,但在数据查询和读写的性能不高。

    为解决上面两种方式的缺点,利用其所长,最新的非结构化数据存储技术在磁盘格式、网络协议、空间管理、重做和撤销格式、缓冲区缓存以及智能的I/O 子系统等方面发生重大转变,在保证了文件数据的性能的同时,还保留了数据库的优势。较有代表性的就是Oracle SecureFiles非结构化数据存储方式。

    来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/26129555/viewspace-1253440/,如需转载,请注明出处,否则将追究法律责任。

    转载于:http://blog.itpub.net/26129555/viewspace-1253440/

    展开全文
  • 油塔企业云盘宽带多媒体非结构化数据存储管理 随着云计算、大数据等技术的发展和媒介传播的变迁,打造专业的媒体云服务平台、推动媒体深度融合,对于当前媒体发展来说至关重要。 宽带多媒体业务根据业务内容大体有...

    油塔企业云盘宽带多媒体非结构化数据存储管理
    随着云计算、大数据等技术的发展和媒介传播的变迁,打造专业的媒体云服务平台、推动媒体深度融合,对于当前媒体发展来说至关重要。
    宽带多媒体业务根据业务内容大体有以下几类:互联网业务、移动消息类业务、基于位置类业务、移动商务类业务、多媒体类业务、视频类业务等。目前已经实现且应用较多的宽带多媒体业务主要有远程医疗、网上购物、网上投票、网上视频直播、VOD视频点播、网络电视、网上教学、宽带游戏、视频会议、视频聊天、多媒体邮件等业务。
    媒体行业的数据大多数都是以图象,视频,音频甚至是文本的形式存在的,这些都属于非结构化数据,需要做存储管理也是一件相当大且不容易的,针对这部分企业数据资产的管理和应用成为企业新的痛点。
    油塔企业云盘对媒体行业的企业数据资产的管理有相对应的措施:
    资料共享,智能管理
    Yotta企业云盘可以将不同部门的文件统一分类管理放置在固定位置,相关部门需要查看相应文件信息时直接登录云盘查看,不需要如以往那样寻找相关人员拿资料。对各种信息资料进行集中管理,以实现灵活的管理。
    协同办公,工作提高
    在Yotta企业云盘中同一个文件可以多人同时进行修改、编辑等操作,并且对源文档修改编辑后会生成历史版本,需要查看历史版本都可重回去查看。这样可以在协同办公环境中随时掌握项目进度。
    多端同步,方便预览
    Yotta企业云盘支持多端协同,存储到企业云盘后,自动同步到所有设备,也能看到正确更新后的版本,需要资料信息方便随时随地进行访问预览。
    媒体企业使用油塔企业云盘之后不仅仅只是解锁以上三点功能,更多功能了解直接找油塔企业云盘。

    展开全文
  • 存储和检索 NEF 的结构化数据存储和检索 NEF 的应用数据,供检测应用。 Storage and retrieval of subscription data by the UDM FE Storage and retrieval of policy data by the PCF. Storage and retr

    目录

    计算与存储分离

    增强网络执行效率

    在 4G EPC 中,用户签约信息被存储在 HSS 中,而用户会话信息则紧紧跟随着 MME、SGW、PGW 等网元的本地存储。可见,4G 核心网的业务网元除了负责进行业务处理外还承担会话信息的存储,大大降低了运算效率,因此,在 4G 时代就开始计算与存储分离的进程,实现了部分分离。

    在这里插入图片描述

    而到了 5G 时代,随着各种业务的丰富,会产生大量的数据,如果依旧使用现有的计算与存储分离的方式势必会影响工作的效率,无法满足 5G 高效、灵活、快速编排及业务处理的需求。所以 3GPP 在 5G 的 2350 标准中彻底将计算与存储分离。

    增强网元容灾冗余

    计算和存储分离不仅仅是为了解决效率问题,UDSF 也是为了实现软件设计中的无状态化而生。
    在这里插入图片描述
    5G 网络中任何会话信息和状态信息都将存入到 UDSF 中,使得所有计算类功能、网络功能无状态化,既可以随时实现弹性扩容、缩容、迁移、删减等操作,而业务处理不受任何影响,使得 5G 系统运行更具有恢复性和敏捷性,通俗的说就是,更快、更强、更灵活。

    在这里插入图片描述

    UDR 与 UDSF

    在移动通信网络中计算和存储体现在对终端用户信息的处理上:

    • 计算:表示对用户信息的运算和分发。
    • 存储:表示对用户信息的持久化。

    在核心网中,用户信息分为两大类:

    1. 用户签约信息(相对固定),与用户信息身份对应,单独存储在后端数据库中,我们称这类数据为结构化数据;
    2. 用户会话信息(相对多变),随着核心网业务网元进行业务处理而产生,并进行持久化存储,这类数据统称为非结构化数据。

    在这里插入图片描述

    计算和存储分离是云原生架构的一大特点。3GPP 定义了 Data Layer,实现了业务处理逻辑和状态数据的解耦,从 NF 中剥离出状态数据存放在 Data Layer 中,使得 NF 变得 Stateless(无状态)。但由于大部分 NF 的状态数据和设备厂商实现是强相关的,很难标准化,所以 3GPP 规范只定义了数据的类型,即:

    • 结构化数据:3GPP 中明确定义了结构的数据,存储在 UDR 中,例如:UE 的签约数据。
    • 非结构化数据:3GPP 没有明确定义结构的数据,存储在 UDSF 中,例如:UE 的会话上下文数据。

    在这里插入图片描述

    在这里插入图片描述

    在这里插入图片描述

    UDR

    UDR(Unified Data Repository,统一数据存储库):负责与 NEF(网络开放功能)、UDM(统一数据管理,从 UDR 中读取用户签约数据)、PCF(策略控制功能,从 UDR 中读取用户策略数据)进行交互,对结构化的数据进行读取与存储,如:用户的签约信息、用户的策略数据信息等。

    • 存储和检索 UDM 的签约数据。
    • 存储和检索 PCF 的策略数据。
    • 存储和检索 NEF 的结构化数据。
    • 存储和检索 NEF 的应用数据,供检测应用。
    • Storage and retrieval of subscription data by the UDM FE
    • Storage and retrieval of policy data by the PCF.
    • Storage and retrieval of structured data for exposure, and application data (including Packet Flow Descriptions (PFDs) for application detection, application request information for multiple UEs), by the NEF
    • Deployments can choose to collocate UDSF with UDR
    • Allows the UDM, PCF, NEF to store data in the UDR (Unified Data Repository)
    • UDR can be deployed in each PLMN. There can be multiple UDRs deployed in a network each accommodating different data sets/subsets. Deployments where a UDR serves a single NF and stores its data and thus can be integrated with this NF, can be possible, e.g. a UDM with build-in UDR

    在这里插入图片描述

    UDSF

    UDSF(Unstructured Data Storage network function,非结构化数据存储功能)::与所有的网络计算类功能 NEF、UDM、PCF、AMF、 SMF、 NRE 、NSSF、 UPF 等交互用于存储非结构化数据,如:用户会话信息、状态信息等。

    • 存储和检索任何 NF 的非结构化数据。
    • Storage and retrieval of information as unstructured data by any NF (e.g. context, state, session)
    • All network functions can interact with UDSF (via N18/Nudsf interface)
    • NFs may share a UDSF for storing their respective unstructured data or may each have their own UDSF
    • Deployments can choose to collocate UDSF with UDR
    • Allows any control plane NF to store and retrieve its unstructured data (session state) into/from a UDSF (Unstructured Data Storage Network Function)
    • UDSF belongs to the same PLMN where the NF is located
    • CP NFs may share a UDSF or may each have its own UDSF

    在这里插入图片描述

    展开全文
  • 申耀的科技观察读懂科技,赢取未来!一直在引领悠久的创新历史全球22个行业首选从未被超越连续4年Gartner魔力象限领导者遥遥领先非结构化数据存储标准再次刷新Dell EMC Power...
  • 最近想了解下图片等非结构化数据存储 在哪里更适合。 参考链接如下: https://baike.baidu.com/item/%E9%9D%9E%E7%BB%93%E6%9E%84%E5%8C%96%E6%95%B0%E6%8D%AE/309808?fr=aladdin 非结构化数据是数据结构不规则...
  • 关注我们牛年牛气冲天全世界80%的数据是非结构化的!(潜台词:非结构化数据非常重要)非结构化数据的增长非常迅速。IDC预测,截止2023年,全球文件和对象数据容量增长3倍。(潜台词:非结构...
  • 非结构化数据存储与查询小结

    千次阅读 2012-09-10 22:05:44
    暑假老师要写篇海量非结构化数据的存储和查询方面的综述,下面是自己参考几篇论文写得。写得不好,有的仅个人理解,有什么问题,希望指出.  当今信息化时代充斥着大量的数据。海量数据存储是一个必然的趋势。然而...
  • 非结构数据的特点就是没有预先定义好的数据模型,而传统关系型数据库的要求必然是定义好表结构,这就导致了传统关系型数据库在非结构化数据存储方面较为弱势的地位,从而给了其他NoSQL数据库机会。随着非结构化数据...
  • sqoop+HBase 总结1. sqoop 介绍2....作用 数据交换工具 可以实现 数据在mysql oracle<==> hdfs之间互相传递 原理 通过写sqoop 命令 把sqoop命令翻译成mapreduce 通过mapreduce连接各种数据

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 6,684
精华内容 2,673
关键字:

非结构化数据存储