精华内容
下载资源
问答
  • Atlas

    2019-10-25 03:56:55
    Atlas
  • atlas

    2019-07-13 16:05:34
    ajax,atlas,ajax。net迷糊鸟,到底该怎么学啊? 转载于:https://www.cnblogs.com/ocean2000/archive/2005/09/21/240825.html

    ajax,atlas,ajax。net迷糊鸟,到底该怎么学啊?

    转载于:https://www.cnblogs.com/ocean2000/archive/2005/09/21/240825.html

    展开全文
  • Atlas Solid

    2019-10-24 13:36:48
    Atlas Solid
  • Atlas字体

    2020-12-31 20:50:04
    以下是《Atlas字体》简单预览,如果需要完整的字体文件,请点击下载;下载解压后,直接将字体文件复制、...该文档为Atlas字体,是一份很不错的参考资料,具有较高参考价值,感兴趣的可以下载看看
  • atlas-middleware:ATLAS中间件代码
  • If You have new functional requirements about Atlas in the production environment, or find a bug in the process of using Atlas. Welcome to send a mail to g-atlas[at]360.cn, we will reply as soon as ...
  • Atlas A powerful Android Dynamic Component Framework. Atlas is an Android client-side containerization framework. we call it android dynamic component framework. Atlas provides decoupled, ...
  • Atlas网站实时
  • Master atlas

    2020-12-08 21:14:39
    Skeletons to be able to use assets from multiple atlas files Avoid duplication of assets by allowing skeletons that will be loaded at later stages to use assets from already loaded atlas files. <p>...
  • atlas buliding

    2020-12-28 00:34:22
    <div><p>I have an atlas file. But the new dataset is in a different dimension. How could I make the atlas suitable for the new data set? <p>Thanks!</p><p>该提问来源于开源项目:ANTsX/ANTs</p></...
  • Atlas craddock

    2021-01-01 12:37:15
    <div><p>The idea of reorganization of the atlases in order to standardize the parameters and outputs of the atlas fetcher was mentioned in issue #1489 . I started the modification with fetch_atlas_...
  • Atlas 介绍

    2021-01-05 11:29:04
    一、Atlas是什么? 在当今大数据的应用越来越广泛的情况下,数据治理一直是企业面临的巨大问题。 大部分公司只是单纯的对数据进行了处理,而数据的血缘,分类等等却很难实现,市场上也急需要一个专注于数据治理的...

    一、Atlas是什么?

    在当今大数据的应用越来越广泛的情况下,数据治理一直是企业面临的巨大问题。

    大部分公司只是单纯的对数据进行了处理,而数据的血缘,分类等等却很难实现,市场上也急需要一个专注于数据治理的技术框架,这时Atlas应运而生。

    Atlas官网地址:https://atlas.apache.org/

    Atlas是Hadoop的数据治理和元数据框架。

    Atlas是一组可扩展和可扩展的核心基础治理服务,使企业能够有效,高效地满足Hadoop中的合规性要求,并允许与整个企业数据生态系统集成。

    Apache Atlas为组织提供了开放的元数据管理和治理功能,以建立其数据资产的目录,对这些资产进行分类和治理,并为数据科学家,分析师和数据治理团队提供围绕这些数据资产的协作功能。

    file

    • Atlas支持各种Hadoop和非Hadoop元数据类型

    • 提供了丰富的REST API进行集成

    • 对数据血缘的追溯达到了字段级别,这种技术还没有其实类似框架可以实现

    • 对权限也有很好的控制

    二、架构原理

    file

    Atlas包括以下组件:

    • 采用Hbase存储元数据
    • 采用Solr实现索引
    • Ingest/Export 采集导出组件 Type System类型系统 Graph Engine图形引擎 共同构成Atlas的核心机制
    • 所有功能通过API向用户提供,也可以通过Kafka消息系统进行集成
    • Atlas支持各种源获取元数据:Hive,Sqoop,Storm。。。
    • 还有优秀的UI支持

    三、效果图

    file

    file

    展开全文
  • Atlas初学

    2021-02-02 18:59:32
    Atlas初学 1.Atlas是什么,应用于哪些场景? 2.Atlas整体架构及各组件 Core Type System: Atlas 允许用户为他们想要管理的元数据对象定义一个模型。该模型由称为 "类型" 的定义组成。"类型" 的 实例被称为...

    Atlas初学

    1.Atlas是什么,应用于哪些场景?

    Apache Atlas为组织提供开放式元数据管理和治理功能,用以构建其数据资产目录,对这些资产进行分类和管理,并为数据分析师和数据治理团队,提供围绕这些数据资产的协作功能,它为Hadoop集群提供了包括 数据分类、集中策略引擎、数据血缘、安全和生命周期管理在内的元数据治理核心能力。

    2.Atlas整体架构及各组件

    Core

    Type System: Atlas 允许用户为他们想要管理的元数据对象定义一个模型。该模型由称为 "类型" 的定义组成。"类型" 的 实例被称为 "实体" 表示被管理的实际元数据对象。类型系统是一个组件,允许用户定义和管理类型和实体。由 Atlas 管理的所有元数据对象(例如Hive表)都使用类型进行建模,并表示为实体。要在 Atlas 中存储新类型的元数据,需要了解类型系统组件的概念。

     Ingest/Export:Ingest 组件允许将元数据添加到 Atlas。类似地,Export 组件暴露由 Atlas 检测到的元数据更改,以作为事件引发,消费者可以使用这些更改事件来实时响应元数据更改。

     Graph Engine:在内部,Atlas 通过使用图形模型管理元数据对象。以实现元数据对象之间的巨大灵活性和丰富的关系。图形引擎是负责在类型系统的类型和实体之间进行转换的组件,以及基础图形模型。除了管理图形对象之外,图形引擎还为元数据对象创建适当的索引,以便有效地搜索它们。

     Titan:目前,Atlas 使用 Titan 图数据库来存储元数据对象。 Titan 使用两个存储:默认情况下元数据存储配置为 HBase ,索引存储配置为 Solr。也可以通过构建相应的配置文件使用BerkeleyDB存储元数据存储 和使用ElasticSearch存储 Index。元数据存储用于存储元数据对象本身,索引存储用于存储元数据属性的索引,其允许高效搜索。

    Integration

    用户可以使用两种方法管理 Atlas 中的元数据:

     API:Atlas 的所有功能都可以通过 REST API 提供给最终用户,允许创建,更新和删除类型和实体。它也是查询和发现通过 Atlas 管理的类型和实体的主要方法。

     Messaging:除了 API 之外,用户还可以选择使用基于 Kafka 的消息接口与 Atlas 集成。这对于将元数据对象传输到 Atlas 以及从 Atlas 使用可以构建应用程序的元数据更改事件都非常有用。如果希望使用与 Atlas 更松散耦合的集成,这可以允许更好的可扩展性,可靠性等,消息传递接口是特别有用的。Atlas 使用 Apache Kafka 作为通知服务器用于钩子和元数据通知事件的下游消费者之间的通信。事件由钩子(hook)和 Atlas 写到不同的 Kafka 主题:

    ATLAS_HOOK: 来自 各个组件的Hook 的元数据通知事件通过写入到名为 ATLAS_HOOK 的 Kafka topic 发送到 Atlas

    ATLAS_ENTITIES:从 Atlas 到其他集成组件(如Ranger)的事件写入到名为 ATLAS_ENTITIES 的 Kafka topic

     

    Metadata source

    Atlas 支持与许多元数据源的集成,将来还会添加更多集成。目前,Atlas 支持从以下数据源获取和管理元数据:

    Hive:通过hive bridge, atlas可以接入Hive的元数据,包括hive_db/hive_table/hive_column/hive_process

    Sqoop:通过sqoop bridge,atlas可以接入关系型数据库的元数据,包括sqoop_operation_type/ sqoop_dbstore_usage/sqoop_process/sqoop_dbdatastore

    Falcon:通过falcon bridge,atlas可以接入Falcon的元数据,包括falcon_cluster/falcon_feed/falcon_feed_creation/falcon_feed_replication/ falcon_process

    Storm:通过storm bridge,atlas可以接入流式处理的元数据,包括storm_topology/storm_spout/storm_bolt

    Atlas集成大数据组件的元数据源需要实现以下两点:

    首先,需要基于atlas的类型系统定义能够表达大数据组件元数据对象的元数据模型(例如Hive的元数据模型实现在org.apache.atlas.hive.model.HiveDataModelGenerator);

    然后,需要提供hook组件去从大数据组件的元数据源中提取元数据对象,实时侦听元数据的变更并反馈给atlas;

    Applications

    Atlas Admin UI: 该组件是一个基于 Web 的应用程序,允许数据管理员和科学家发现和注释元数据。Admin UI提供了搜索界面和 类SQL的查询语言,可以用来查询由 Atlas 管理的元数据类型和对象。Admin UI 使用 Atlas 的 REST API 来构建其功能。

    Tag Based Policies: Apache Ranger 是针对 Hadoop 生态系统的高级安全管理解决方案,与各种 Hadoop 组件具有广泛的集成。通过与 Atlas 集成,Ranger 允许安全管理员定义元数据驱动的安全策略,以实现有效的治理。 Ranger 是由 Atlas 通知的元数据更改事件的消费者。

     Business Taxonomy:从元数据源获取到 Atlas 的元数据对象主要是一种技术形式的元数据。为了增强可发现性和治理能力,Atlas 提供了一个业务分类界面,允许用户首先定义一组代表其业务域的业务术语,并将其与 Atlas 管理的元数据实体相关联。业务分类法是一种 Web 应用程序,目前是 Atlas Admin UI 的一部分,并且使用 REST API 与 Atlas 集成。

     在HDP2.5中,Business Taxonomy是提供了Technical Preview版本,需要在Atlas > Configs > Advanced > Custom application-properties中添加atlas.feature.taxonomy.enable=true并重启atlas服务来开启

    3.Atlas安装与编译

    https://blog.csdn.net/weixin_33167915/article/details/112448761

    展开全文
  • Atlas-开源

    2021-04-26 15:10:35
    Atlas旨在提供高质量的世界地图,供开源飞行模拟器FlightGear使用。
  • 在完成Atlas编译以后,就可以进行Atlas的安装了。Atlas的安装主要是安装Atlas的Server端,也就Atlas的管理页面,并确保Atlas与Kafka Hbase Solr等组件的集成。Atlas的系统架构如下,在确保 底层存储与UI界面正常后,...

    在完成Atlas编译以后,就可以进行Atlas的安装了。Atlas的安装主要是安装Atlas的Server端,也就Atlas的管理页面,并确保Atlas与Kafka Hbase Solr等组件的集成。

    Atlas的系统架构如下,在确保 底层存储与UI界面正常后,之后就可以进行与Hive等组件的集成调试了。

    一、环境准备

    安装之前 先要准备好

    JDK1.8

    Zookeeper

    Kafka

    Hbase

    Solr

    在启动Atlas时会配置这些环境变量的地址,所以一定要确保以上组件正常运行。

    由于在编译时可以选择内部集成,所以这些Atlas是可以自带的,但是JDK一定要安装好。

    在安装Altas中,需要Solr 预先创建好collection

    bin/solr create -c vertex_index -shards 3 -replicationFactor 2

    bin/solr create -c edge_index -shards 3 -replicationFactor 2

    bin/solr create -c fulltext_index -shards 3 -replicationFactor 2

    在solr中验证创建成功。

    二、安装Atlas

    到编译好的包的路径下 apache-atlas-sources-2.1.0/distro/target

    将生成好的安装包 apache-atlas-2.1.0-server.tar.gz 拷贝到目标路径下。

    解压:

    tar -zxvf apache-atlas-2.1.0-server.tar.gz

    三、修改配置

    进入conf目录下:

    vi atlas-env.sh

    在此指定JAVA_HOME和是否要用内嵌启动

    export JAVA_HOME=/opt/jdk1.8.0_191/

    export MANAGE_LOCAL_HBASE=true

    export MANAGE_LOCAL_SOLR=true

    如果使用内嵌,那么配置结束,直接去 启动Atlas

    但是大部分时候,需要使用已经有的组件进行集成,所以设置为false。

    export JAVA_HOME=/opt/jdk1.8.0_191/

    export MANAGE_LOCAL_HBASE=false

    export MANAGE_LOCAL_SOLR=false

    #注意修改Hbase配置文件路径

    export HBASE_CONF_DIR=/opt/hbase/conf

    修改其他配置

    vim atlas-application.properties

    这里就是设置Hbase Solr等配置

    #Hbase地址 就是Hbase配置的zookeeper地址

    atlas.graph.storage.hostname=slave01:2181,slave02:2181,slave03:2181

    atlas.audit.hbase.zookeeper.quorum=slave01:2181,slave02:2181,slave03:2181

    #solr服务器地址

    atlas.graph.index.search.solr.http-urls=http://slave01:8984/solr

    #kafka地址

    atlas.notification.embedded=false

    atlas.kafka.zookeeper.connect=slave01:2181,slave02:2181,slave03:2181

    atlas.kafka.bootstrap.servers=slave01:9092,slave02:9092,slave03:9092

    #atlas地址

    atlas.rest.address=http://slave01:21000

    四、启动Atlas

    bin/atlas_start.py

    启动成功后访问:

    http://slave01:21000

    admin/admin登录

    成功!!

    踩坑全纪录

    HBase: apache.zookeeper.KeeperException$NoNodeException: KeeperErrorCode = NoNode for /hbase/hbaseid

    hbase的问题 我的是因为没有指定对hbase的配置文件

    hbase配置文件的 zookeeper.znode.parent 并不是 /hbase/hbaseid

    could not instantiate implementation: org.janusgraph.diskstorage.solr.Solr6Index

    cannot connect to cluster at ... cluster not found /not ready

    提示无法找到solr,在填写atlas.graph.index.search.solr.zookeeper-url时需要添加znode,如2181/solr

    具体是什么去solr配置文件里,或者页面上找

    could not register new index field with index backend

    Solr有问题,检查Solr 确保Solr正常启动了

    Can not find the specified config set: vertex_index

    solr需要先建 三个索引 vertex_index, edge_index, fulltext_index

    了解大数据实时计算 感受数据流动之美 欢迎关注 实时流式计算

    展开全文
  • helm install --name < any> -f atlas-helm-chart/values.yaml atlas-helm-chart 这将运行Solr,Atlas,Cassandra和Zookeeper吊舱 solr版本:7.5 地图集版本:2.1.0 cassandra版本:3.11.3 zookeeper版本:3.4.x...
  • 自动分解多图片的atlas文件,支持同一atlas下多图片,支持拆分到子目录。
  • 在完成Atlas编译以后,就可以进行Atlas的安装了。Atlas的安装主要是安装Atlas的Server端,也就Atlas的管理页面,并确保Atlas与Kafka Hbase Solr等组件的集成。Atlas的系统架构如下,在确保 底层在完成Atlas编译以后...
  • UVAtlas-等距纹理贴图 版权所有(c)Microsoft Corporation。 2021年1月9日 该软件包包含UVAtlas,这是一个用于创建和打包等时线纹理图集的共享源库。 此代码旨在使用Visual Studio 2017( ),Visual Studio ...
  • Atlas插件excel

    2018-04-19 11:41:17
    Atlas插件excel,DynamicAX 2012 插件,Atlas插件excel,DynamicAX 2012 插件

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 13,297
精华内容 5,318
热门标签
关键字:

atlas