精华内容
下载资源
问答
  • R语言读取外部数据

    千次阅读 2019-01-10 20:45:16
    文章目录R语言读取外部数据读取文本数据读取spss数据读取.sas7bdat数据集 R语言读取外部数据 读取文本数据 #读取文本数据 getwd() setwd("D:/data/Section_1") csvdata<- ...

    R语言读取外部数据

    读取文本数据

    #读取文本数据
    getwd()
    setwd("D:/data/Section_1")
    csvdata<- read.csv("hs0.csv")
    names(csvdata)
    #或者使用read.table
    tabledata <- read.table("hs0.csv",header = T,sep = ',' )
    names(tabledata)
    
    

    使用read.table读取数据时,如果第一行是变量名,必须指定header = T

    If you are using the read.csv command, there is no need to write the header True and
    separator as comma, but if you are using the read.table command, it is mandatory to use.
    Otherwise, it will read the first variable from the dataset

    输出结果

    > names(csvdata)
     [1] "X0"      "X70"     "X4"      "X1"      "X1.1"    "general"
     [7] "X57"     "X52"     "X41"     "X47"     "X57.1"  
    

    读取spss数据

    #读取SPSS数据
    library(Hmisc)
    spssdata <- spss.get("wage.sav",use.value.label = TRUE)
    head(spssdata)
    

    输出结果

    > head(spssdata)
       HRS  RATE ERSP ERNO NEIN ASSET  AGE   DEP RACE SCHOOL
    1 2157 2.905 1121  291  380  7250 38.5 2.340 32.1   10.5
    2 2174 2.970 1128  301  398  7744 39.3 2.335 31.2   10.5
    3 2062 2.350 1214  326  185  3068 40.1 2.851   NA    8.9
    4 2111 2.511 1203   49  117  1632 22.4 1.159 27.5   11.5
    5 2134 2.791 1013  594  730 12710 57.7 1.229 32.5    8.8
    6 2185 3.040 1135  287  382  7706 38.6 2.602 31.4   10.7
    

    读取.sas7bdat数据集

    #读取SAS数据集
    install.packages("sas7bdat")
    library(sas7bdat)
    sasdata <- read.sas7bdat("sales.sas7bdat")
    head(sasdata)
    

    输出结果

    > head(sasdata)
      YEAR NET_SALES PROFIT
    1 1990       900    123
    2 1991       800    400
    3 1992       700    300
    4 1993       455     56
    5 1994       799    299
    6 1995       666    199
    

    《R Data Mining Projects》学习笔记

    展开全文
  • 导入外部数据使用echarts绘图

    千次阅读 多人点赞 2020-10-26 11:53:33
    导入外部数据使用echarts绘图使用d3包导入外部数据需要的包代码举例 使用d3包导入外部数据 echarts是一不错的可视化工具,大家在用echarts做可视化的时候,作为对Javascrpt比较陌生的新手来说,可能不太清楚怎么去...

    导入外部数据(.csv)使用echarts绘图

    使用d3导入外部数据

    echarts是一不错的可视化工具,大家在用echarts做可视化的时候,可能不太清楚怎么去导入外部数据(如.csv),尤其对Javascript比较陌生的小白来说(比如我),那么这里介绍一种方法,希望对你们有用。本人由于刚接触该语言,如果哪里写错了,还请大家见谅。

    需要的包

    1、绘图必备包:echarts
    2、数据导入包:d3(搜索相关网页免费下载,也可以直接使用我用的这个d3链接:https://d3js.org/d3.v4.min.js)

    代码

    1、相关包的导入:

    <head>
        <meta charset="UTF-8">
        <title>柱状图的绘制</title>   //图表标题
        <script src ="incubator-echarts-master/dist/echarts.js"></script>//引入echarts包
        <script src="https://d3js.org/d3.v4.min.js"></script>//引入d3包
    </head>
    

    那么这里的echarts包,我已经下载好了,只需要写此包的完整路径就可以了;d3包我没有下载,我是直接使用链接的。

    2、如何使用

    //获取csv对象
    d3.csv("333.csv",function(error,csvdata){  
        if(error){  
            console.log(error);  
        }else{
        for( var i=0; i<csvdata.length; i++ ){  
            nameset.push(csvdata[i].day);           //对象转数组
            numset1.push(parseFloat(csvdata[i].p50));
            numset2.push(parseFloat(csvdata[i].p80));
        }
    //这里插入需要画的echarts图代码,官网上有更多选择。
        }
        })
    

    这里是使用d3的一个基本格式,由于我导入的是我自己实验的.csv文件(333.csv),所以使用d3.csv,大家可以根据需要引用其它格式。

    举例

    这里我们以画一个折线图:

    1、数据

    在这里插入图片描述

    2、完整代码

    <!DOCTYPE html>
    <html lang="en">
    <head>
        <meta charset="UTF-8">
        <title>折线图的绘制</title>
        <script src ="incubator-echarts-master/dist/echarts.js"></script>
        <script src="https://d3js.org/d3.v4.min.js"></script>
    </head>
    <body>
    <div id="main" style="height: 600px;width:900px;"></div>
    <script>
    
    var nameset=[];//数组初始化
    var numset1=[];
    var numset2=[];
    //获取csv对象
    d3.csv("333.csv",function(error,csvdata){  
    
        if(error){  
            console.log(error);  
        }else{
        for( var i=0; i<csvdata.length; i++ ){  
            nameset.push(csvdata[i].day);           //对象转数组
            numset1.push(parseFloat(csvdata[i].p50));
            numset2.push(parseFloat(csvdata[i].p80));
        }
    
        var myChart = echarts.init(document.getElementById("main"));
    
        var option = {
        color: ['#003366', '#006699'],
        tooltip: {
            trigger: 'axis',
        },
    
        legend: {
            data: ['p50', 'p80']
        },
    
        toolbox: {
            show: true,
            feature: {
                mark: {show: true},
                dataView: {show: true, readOnly: false},
                magicType: {show: true, type: ['line', 'bar']},
                restore: {show: true},
                saveAsImage: {show: true}
            }
        },
        grid: {
            left: '3%',
            right: '4%',
            bottom: '3%',
            containLabel: true
        },
        calculable : true,
        xAxis: [
            {
                type: 'category',
                data: nameset,
                axisPointer: {
                    type: 'shadow'
                }
            }
        ],
        yAxis: [
            {
                type: 'value',
                min: 35,
                max: 60,
                interval: 5,
            }
        ],
        series: [
            {
                name: 'p50',
                type: 'bar',
                data: numset1,
                color:'#003366'
            },
            {
                name: 'p80',
                type: 'bar',
                data: numset2,
                color:'#006699'
            }
        ]
    };
    
        myChart.setOption(option);    
        }
    });  
    </script>
    </body>
    </html>
    

    3、效果
    这里选取的两列数据是:p50与p80,
    在这里插入图片描述

    虽然图做得有点不好看,但是大家不要质疑用echarts绘图,毕竟因为是我做的(嘻嘻)。总之,目的达到就行。这种方法供大家参考,当然大家如果有更好的方法可以一起分享。

    注意:近段时间我收到的大家遇到的一些问题,我在这里说一下,如果大家的编辑器是VSCode,则需要在其搜索LIve Service扩展,安装好后点击代码编辑界面右下角Go live,即可运行出结果。如果用的是webstorm直接运行即可。

    转载请注明原文链接:https://blog.csdn.net/qq_41390184/article/details/109275431

    展开全文
  • SAS导入外部数据

    万次阅读 2016-07-13 00:17:21
    SAS导入外部数据 成功导入外部数据是sas分析的第一步,也是最基础的一步,其重要性我就不累述。在常规工作中我们经常使用excel,access等建立数据,不管数据类型是什么,举一反三,一是百通。在本文中,我将用以下...

    SAS导入外部数据

    成功导入外部数据是sas分析的第一步,也是最基础的一步,其重要性我就不累述。在常规工作中我们经常使用excel,access等建立数据,不管数据类型是什么,举一反三,一是百通。在本文中,我将用以下方法实现外部数据导入。

    1.Infile;

    2.proc import;

    3.libname;

    4.improt wizard;

    5.Enterprise guide。

    有错请指正!

    外部数据库存储路径及名称:D:\mysas\import.csv

    1.infie导入可以用两种方法

    1.1 data步外:filename +infile

    filenamename1'D:\mysas\import.csv';/*name1为自主命名*/

    dataimport1;

    infilename1dlm=','firstobs=2;/*infile和filename名称对应,dlm定义分隔符,firstobs从第二行开始读取数*/

    inputID NAME:$10.math English;/*放入变量名称*/

    run;

    1.2data步内

    dataimport2;

    infile'D:\mysas\import.csv'dlm=','firstobs=2;

    inputID NAME:$10.math English;

    run;

    2.proc import

    该过程注意变量类型和变量长度,sas默认以原始数据库前八行定义变量类型和长度,若需要手动设置通过MIXED=20,以前20行来定义。具体细节查看帮助。

    procimportout=import3

    datafile="D:\mysas\import.csv"

    DBMS=CSV replace;/*指定数据库类型*/

    getnames=yes;/*以第一行为变量名称*/

    run;

    3.libname

    libnameimport4excel"D:\mysas\import.xlsx"; /*新建import4逻辑库,excel设置数据库引擎。*/

    procprintdata=import4.'import$'n;

    run;

    注意两点问题:

    1)csv为sas识别引擎;

    2)注意外部数据库导入新建逻辑库后原始数据库名称后加了$,引用该数据集应扩号并加‘n’。

    4.improt wizard

    1)import data

    2)select a data source from list(从下拉菜单中选择合适的数据库格式,注意sas与excel需兼容,sas32位的很难兼容64位的excel容易出错)-图1

    3)next,workbook选择需要导入的数据。图2

    4)Ok进入library选择逻辑库,如work,member命名被导入数据在逻辑库的数据集名称如import6图三

    5)finish




    5.Enterprise guide

    打开enterprise guide,文件-导入数据-选择需导入数据-确定

    双击“过程流”导入数据,可以查看代码,日志,和数据集。图4


    以上几种方法总有一种适合你,选择其中适合自己的一种方式轻松导入数据。谢谢,欢迎指正!

    作者:任丽
    编辑:乘物以游心
    发布范围:微信、简书、CSDN、天善智能
    微信号: sas应用分析
    原文链接:
    https://mp.weixin.qq.com/s?__biz=MzIyNTE2MzM3MA==&mid=401499597&idx=1&sn=ba37119004a804c9f5f46be869df8541&scene=4&pass_ticket=doFfR%2BW3XB7dkdDn2bx6tCgCfnlSq1fyrXZZ8kKz%2FmLinGtSIGprDQaCNb8h60R0


    展开全文
  • Postman 接口导入外部数据

    千次阅读 2019-08-17 00:15:12
    postman 支持导入 csv、json 外部数据 postman 支持导入外部数据(csv 格式或 json 格式),使用外部数据循环执行某一组 collection ,这对于自动化测试是十分方便的,以下以一个例子来说明步骤: 假设要对Download...

    postman 支持导入 csv、json 外部数据
    postman 支持导入外部数据(csv 格式或 json 格式),使用外部数据循环执行某一组 collection ,这对于自动化测试是十分方便的,以下以一个例子来说明步骤:
    假设要对Download接口进行测试,该接口的请求参数 TransType交易类型,响应的 json 类似如下:

    
        "TransType": "D01",
        "TransSerialNumber": "20190619112201686288",
        "TransBody": {
            "页码": 1,
            "尾页标志": "1",
            "本页返回条数": 5,
            "总记录数": 5,
            "总页数": 1,
            "OutPutList": [{
                "标准序号": "FC173573ADBE11E986BE1831BFB52329",
                "标准编码": "GB",
                "标准名称": "国标",
                "拼音简码": "GB",
                "五笔简码": "GB",
                "排序编号": 1,
                "备注": null,
                "有效状态": 1,
                "发布时间戳": 1565774995
            }, {
                "标准序号": "B9E4CF87BE7011E9A09E00FFAE042403",
                "标准编码": "MB",
                "标准名称": "美标",
                "拼音简码": "MB",
                "五笔简码": "MB",
                "排序编号": 2,
                "备注": null,
                "有效状态": 1,
                "发布时间戳": 1565688595
            }, {
                "标准序号": "F8C03A93BE7011E9A09E00FFAE042403",
                "标准编码": "YB",
                "标准名称": "英标",
                "拼音简码": "YB",
                "五笔简码": "YB",
                "排序编号": 2,
                "备注": null,
                "有效状态": 1,
                "发布时间戳": 1565602195
            }, {
                "标准序号": "19CA27D6BE7111E9A09E00FFAE042403",
                "标准编码": "EB",
                "标准名称": "俄罗斯标",
                "拼音简码": "EB",
                "五笔简码": "EB",
                "排序编号": 3,
                "备注": null,
                "有效状态": 1,
                "发布时间戳": 0
            }, {
                "标准序号": "2DC914E6BE7111E9A09E00FFAE042403",
                "标准编码": "RB",
                "标准名称": "瑞标",
                "拼音简码": "RB",
                "五笔简码": "RB",
                "排序编号": 4,
                "备注": null,
                "有效状态": 1,
                "发布时间戳": 0
            }]
        },
        "TransReturnCode": "0",
        "TransReturnMessage": ""
    }
    

    编写的外部数据 csv 文件类似如下:
    在这里插入图片描述
    假设 postman需要从上面 csv 文件中逐行读取TransType 值,然后执行请求,再执行响应断言,以此循环 csv 中的所有数据,步骤如下:
    1- 在 HTTP 请求中引用外部数据
    在 HTTP Request 的 Body、Headers 中引用外部数据,直接引用csv的 TransType值即可,如引用 csv 文件中的 TransType 数据列,可以通过{{TransType }} 来引用,类似如下:
    在这里插入图片描述
    2-在 HTTP Request 的 pre-request script,tests 引用外部数据,可以通过 data 对象来引用,如引用 csv 文件中的TransType数据列,可以分别通过 data.TransType来引用,类似如下:

    TransType = data.TransType;
    body = body.replace("{{TransType}}",TransType);
    

    3- 进行 collections runner 设置
    在这里插入图片描述
    4.- 运行结果类似如下,可以很方便地看到测试情况:
    在这里插入图片描述

    展开全文
  • Hive之导入外部数据

    千次阅读 2017-11-08 18:18:13
    Hive之导入外部数据 本地文件 hdfs端 MySQL数据库
  • greenplum使用PXF访问外部数据

    千次阅读 2019-10-10 11:22:41
    Greenplum平台扩展框架(PXF...这些连接器可以将外部数据源映射到Greenplum数据库表,通过外部表的形式查询外部数据源。 PXF可支持访问的外部数据源有HDFS,Hive和HBase。其中可以对HDFS数据进行读和写操作。 下面介...
  • PostMan导入 csv、json 外部数据

    千次阅读 2019-04-12 14:56:38
    PostMan导入 csv、json 外部数据 一、使用场景 postman 支持导入外部数据(csv 格式或 json 格式),使用外部数据循环执行某一组 collection ,实现了业务和测试数据分离。构造测试数据满足了一个接口边界值覆盖测试...
  • 利用Python读取外部数据文件

    千次阅读 2019-04-07 16:46:24
    不论是数据分析,数据可视化,还是数据挖掘,...在本期的Python学习中,我们将针对Python如何获取外部数据做一个详细的介绍,从中我们将会学习以下4个方面的数据获取: 1、读取文本文件的数据,如txt文件和csv文件 ...
  • Excel2010工作表不仅可以存储处理本机的数据,还可以导入来自网站的外部数据信息,由此可以看出它的功能多么的强大,下面对获取外部数据的整个过程以图文的形式进行介绍,相信不会的朋友可以快速理解。 简述 首先...
  • spark2.0中,提供了两种扩展外部数据源的接口, 第一种外部数据源为文件,第二种外部数据源为系统 spark内部调用外部数据源包的类是下面,包括解析BaseRelation,提取schema等 package org.apache.spark.sql....
  • Unity载入外部数据的方法

    千次阅读 2018-09-17 19:14:31
    Unity载入外部数据的方法Step1:新建一个储存数据的文件Step2:关联数据文件Step3:将数据载入游戏Step4:读取数据 Step1:新建一个储存数据的文件 用txt格式保存,注意保存为UTF-8格式,不然Unity会识别不了 每...
  • postman 导入 csv、json 外部数据   postman 支持导入外部数据(csv 格式或 json 格式),使用外部数据循环执行某一组 collection ,这对于自动化测试是十分方便的,以下以一个例子来说明步骤:   假设要对 ...
  • HAWQ技术解析(九) —— 外部数据

    千次阅读 2017-03-23 11:03:51
    大部分的外部数据是以HAWQ外部表的形式进行访问的,但对于Hive,除外部表方式,PXF还能够与HCatalog整合直接查询Hive表。PXF内建多个连接器,用户也可以按照PXF API,创建自己的连接器,访问其它并行数据存储或处理...
  • PostgreSQL的外部数据封装器fdw

    千次阅读 2018-11-21 14:02:40
    数据封装器fdw(Foreign Data Wrappers)在PostgreSQL...场景,在本地的test库中通过外部数据封装器fdw访问本地的testdb中的t2表 本地库test用户u1,远程库test用户dbuser 版本: postgres=# select version(); ...
  • Spark SQL之External DataSource外部数据

    千次阅读 2015-10-02 11:53:47
    http://blog.csdn.net/oopsoom/article/details/42061077一、Spark SQL External ...Spark SQL开放了一系列接入外部数据源的接口,来让开发者可以实现。 这使得Spark SQL支持了更多的类型数据源,如json, parquet,
  • 1.文件夹右箭头,出现详情页面 ...3.Collection Run中可以导入外部数据文件,支持CSV或JSON文件,从数据文件中使用values 步骤如下: ①准备你所需要运行的数据文件(JSON/CSV) ②CSV文件要...
  • SAS进阶《深入解析SAS》之Base SAS基础、读取外部数据到SAS数据集前言:在学习完《SAS编程与商业案例》后,虽然能够接手公司的基本工作,但是为了更深入的SAS学习,也为了站在更高的一个层次上去掌握和优化公司工作...
  • 首先我们需要配置外部数据源: 配置方法参考:http://blog.csdn.net/aaoxue/article/details/9013723 数据源配置完成后我们需要进行SQL Gateway Connections配置: Home->System Administration->Configuration->...
  • 小程序云函数调用http或https请求外部数据

    千次阅读 热门讨论 2019-09-23 19:28:06
    我们使用小程序云开发的时候,难免会遇到在云函数里做http获取https请求外部数据,然后再通过云函数返回给我们的小程序。今天就来教大家如何在云函数里做http和https请求。 老规矩,先看效果图 通过上图,可以看到...
  • 需要打包的文件引用了外部数据(target.csv)。 直接打包后并不能包含此csv文件。 打包的ljesf_analysis.py文件需要先从csv文件中读取数据,才能进行分析。 解决方案 方案一1 pyinstaller -F --add-data ...
  • RPC外部数据表示(XDR)

    千次阅读 2013-06-01 15:59:09
    RPC外部数据表示(XDR)    RPC的xdr(外部数据表示)是为了编码(解码)C语言定义的数据,从而使得RPC传输的数据平台无关性。  XDR对C语言常见的类型编码规则在之前已经说过了,具体请参考《unix网络编程...
  • 一、Spark SQL External DataSource简介 随着Spark1.2的发布,Spark SQL开始正式支持外部数据源。Spark SQL开放了一系列接入外部数据源的接口,来让开发者可以实现。 这使得Spark SQL支持了更多的类型数据源,如...
  • 外部数据采集到数据处理流程

    千次阅读 2018-04-21 14:49:29
    对于大型产线程序来说,很多人尤其是程序员很好奇,数据到底从哪里来,又是怎么处理的呢? 有没有你?反正我很好奇,那么接下来就简单两句话说下,至少心里有个概念! 首先要明确这个数据不是凭空造出来的,而是...
  • Foreign Data Wrappers是PostgreSQL取得外部数据比较方便的功能扩展。 可以取得关系数据库的数据,比如Oracle,MySQL,ODBC. 还可以取得NOSQL数据库的数据。比如CouchDB,Redis 还可以直接访问text文本文件,csv...
  • 如何用SQLyog导入外部数据

    千次阅读 2019-07-23 23:13:17
    1.打开SQLyog后 , 点击 root@localhost , 从sql 转储文件导入数据库 2.然后选择你要导入的数据库文件 ,点击执行即可;
  • unity 3d中怎么读取外部lua脚本中的表的数据 谢谢了
  • Spark连接外部数据源解读

    千次阅读 2016-10-21 12:51:45
    项目源码:https://github.com/hortonworks-spark/shc 注:由于某些原因,尚无充裕时间进行更深入的解读,本文先着重数据源注册和写入两个流程,后续文章会继续跟进。注册流程位置:org.apache.spark.sql.execution....
  • 1. External Data Source 外部数据源  1)每一个spark程序以加载数据开始,以输出数据结束  2)方便快速的从不同的数据源(json、parquet/rdbms),经过混合处理,在将处理结果以特定的格式,写回到指定的系统...
  • 在 Excel 中,有时会需要创建外部链接来引用其他工作簿的单元格内容,但是如果想要找出所有链接并且还要将这些外部数据链接列在一个工作簿当中是有点难度的。下面我会介绍一些快捷方法,不仅能够快速帮你找出这些...

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 1,245,819
精华内容 498,327
关键字:

外部数据