appname

Spark 系列（十一）—— Spark SQL 聚合函数 Aggregations

_valspark=SparkSession.builder().appName("aggregations").master("local[2]").getOrCreate()valempDF=spark.read.json
黑白影·2019-08-14 09:00

Spark 系列（九）—— Spark SQL 之 Structured API

示例如下：valspark=SparkSession.builder().appName("Spark-SQL").master(
黑白影·2019-08-13 07:00

Spark-SQL-Python编程

frompysparkimportRowfrompyspark.sqlimportSparkSessionfrompyspark.sql.typesimportStructField,StringType,StructTypeif__name__=="__main__":spark=SparkSession\.builder\.appName
dlphay·2019-08-11 16:28

Django根据数据库表反向生成Model

pythonmanage.pymigrate#此时数据库就会自动生成我们Model对应的数据表了上面两条命令都是作用于全局的，但是如果我们只想改动的app下面的Model或者某个文件中的Model，那就需要指定appname
硪就是硪·2019-08-04 18:04

Beego Conf 文件配置解析

app.conf里面的具体配置属性都是什么意思，接下来一一的进行解释：beege程序默认app.conf在beego程序中读取app.conf中的配置内容可以使用：beego.AppConfig.String("appname
chymingyan·2019-08-02 09:58

Spark读取Hive中的数据加载为DataFrame

valspark=SparkSession.builder().appName("hive").enableHiveSupport().getOrCreate()//创建student_infos和student_scores
墨玉浮白·2019-07-30 21:12

Spark读取MySQL中的数据为DataFrame

//聚合的时候默认分区是200，可以在此设置valspark=SparkSession.builder().master("local").appName("schema").config("spark.sql.shuffle.partitions
墨玉浮白·2019-07-30 21:06

Spark读取json格式文件

一、普通json格式valsession=SparkSession.builder().appName("sql").master("local").getOrCreate()valdf=session.read.format
墨玉浮白·2019-07-30 19:50

Spark Sql 处理groupby 的数据倾斜问题

importjava.util.Randomimportorg.apache.spark.sql.SparkSessionobjectTestUDF{defmain(args:Array[String]):Unit={valspark=SparkSession.builder().appName
ZhuangYQ丶·2019-07-29 21:26

【NGINX】使用带通配符的虚拟主机

.+)\.note\.loc$;root/var/www/app-$appname;location/{try_files$uri$uri//index.html/index.php$is_args$args
990653058·2019-07-28 10:58

react-navigation报错

/app.json';AppRegistry.registerComponent(appName,()=>App);后来修改为constA=crea
罗毅豪·2019-07-23 22:00

数据算法——Spark的TopN实现

并移动位置来重新排序*/objectTopN{defmain(args:Array[String]):Unit={valsession=SparkSession.builder().master("local").appName
墨玉浮白·2019-07-23 20:50

Spark 读写数据、抽象转换 拾遗

SparkSession}/***@authorAdministrator*2019/7/22-17:09**/objectTestReadData{valspark=SparkSession.builder().appName
lillcol·2019-07-22 22:00

sparkSQL实现对hive动态分区

1.开始hive动态分区参数valspark=SparkSession.builder().appName(“test”).enableHiveSupport().config(“spark.sql.adaptive.enabled
weixin_42412645·2019-07-19 18:28

jinjia2 本地渲染文本文件核心代码（可以渲染html,xml,txt等等）

importjinja2importjsondefrender_without_request(template_name,appname='tools',**context):"""用法同flask.render_template
晚风拂柳颜·2019-07-19 16:29

QT防止程序多次启动

：最近在linux下作的一个项目，设置了crontab自启动，但是经常出现启动多个进程的原因，针对这种情况，我做了如下处理：QLockFile*lockFile=newQLockFile("temp/appName.app.lock
徐沛东·2019-07-08 18:00

React学习(二)：React-router学习笔记

React-router学习笔记简单实例create-react-appname创建React脚手架，方便简单应用。设想简单页面，左侧为导航，右侧是网页的头部、内容区域、尾部。
Stella-Chen·2019-07-03 14:38

pm2启动ssr失败的解决方法

────────┬────┬─────────┬──────┬─────┬─────────┬─────────┬────────┬─────┬────────┬──────┬──────────┐│Appname
海底苍鹰·2019-06-29 10:26

PySaprk 将 DataFrame 数据保存为 Hive 分区表

Hive分区表创建SparkSessionfrompyspark.sqlimportSparkSessionspark=SparkSession.builder.enableHiveSupport().appName
XnCSD·2019-06-28 18:48

django修改数据库表名

前提数据库的表名自动生成，按照APPname+表名生成的，但是由于接口需要，表名不可以是这样的构造，只能是表名称自己，不可以加前缀，以下记录一下修改过程以及命令。
沈弋·2019-06-27 00:00

spark RDD编程实践例子

sparksession的方法来声明sparkconf和context：是spark早期版本的数据生成RDD和配置RDD的方法//SamplevalsparkSession=SparkSession.builder().appName
jacobwe·2019-06-25 14:28

spark dataframe/dataset解析json字符串的字段

Logger.getLogger("org.apache.spark").setLevel(Level.ERROR)valspark=SparkSession.builder().master("local[*]").appName
master.zZ·2019-06-23 11:03

logback-spring.xml 日志配置文件

yyyy-MM-ddHH:mm:ss}%highlight(%-5level)%boldCyan([%thread])%boldGreen(%logger{50})-%msg%nUTF-8${logPath}/${appName
巅疯时刻·2019-06-21 12:56

Spark读写MySQL

.Spark读取MySQL数据1.spark.read.jdbc()defmain(args:Array[String]):Unit={valspark=SparkSession.builder().appName
心有余力·2019-06-18 16:37

【仙女】Android手机信息获取很难？

mobilehardware:{latest-version}'数据信息App信息获取代码示例PackageHelper.getPackageInfo(getApplicationContext())数据格式{"appName
爱尔兰真是太好了·2019-06-14 09:38

笔记15：Django提升篇

打包时候建议使用django-appname1在你的Django项目目录外创建一个名为django-polls的文件夹，用于盛放polls。2将polls目录移入django-polls目录。
weixin_30628801·2019-06-13 17:00

Spark 系列（十二）—— Spark SQL JOIN操作

分别创建员工和部门的Datafame，并注册为临时视图，代码如下：valspark=SparkSession.builder().appName("aggregations").master("local
hei bai ying·2019-06-08 08:08

Spark 系列（十一）—— Spark SQL 聚合函数 Aggregations

_valspark=SparkSession.builder().appName("aggregations").master("local[2]").getOrCreate()valempDF=spark.read.json
hei bai ying·2019-06-08 08:04

java-app-cpu及内存占用分析[非log用户]

在不存在内存溢出的情况下，是不需要分析内存使用情况的cpu占用过高说明应用的某一个处理过程占用cpu的时间比较长，最常见的情况是长时间的循环造成的存在循环的逻辑尽量抽离出来作为单独的方法比较方便定位长循环1.查询appname
enderwsp·2019-06-05 11:35

pyspark：k均值

frompysparkimportSparkConffrompyspark.sqlimportSparkSessionfrompyspark.ml.linalgimportVectorsfrompyspark.ml.clusteringimportKMeansimportpandasaspdif__name__=="__main__":appname
阳望·2019-06-04 14:24

spark动态更新hive表的分区数据

使用spark操作hive的时候，当需要对hive的分区表进行动态更新分区内容时，可在SparkSession中进行如下设置SparkSession.builder().master("yarn").appName
Alex.liu·2019-05-31 17:08

SparkSQL访问Hive遇到的问题及解决方法

hive-site.xml拷贝到project中测试代码defmain(args:Array[String]):Unit={valspark:SparkSession=SparkSession.builder().appName
小朋友2D·2019-05-30 12:52

基于HTML5转换PDF的电子书阅读插件

插件功能强大，缩略图，鼠标翻页，放大缩小都可以，部分配置代码config.js如下varbookConfig={appName:'f
晕晕大作战·2019-05-22 00:00

基于Spark2.X系列的累加器和Streaming基础

Spark2.0系列引入了一个更加简单和更高性能的累加器API，如在1.X版本中可以这样使用累加器：valsparkSession=SparkSession.builder().master("local").appName
|旧市拾荒|·2019-05-21 21:00

Spark SQL有关broadcast join的不生效问题2

今天同事反应他的广播不生效，看了一下代码，它的代码样子如下： defmain(args:Array[String]):Unit={ valspark=SparkSession.builder().appName
javartisan·2019-05-21 00:00

javascript判断IE浏览器版本和Edge代码

+[1,]){alert('-1){alert('IsEdge');}6、判断是否为指定版本IE，比如判断是否为IE8或者IE10：if(navigator.appName=="MicrosoftInternetExplorer
华贺·2019-05-16 21:24

安卓基础－安卓底层针对不同APP做不同处理

下面以设置vidoe的比特率为例介绍具体实现方法:方法一.在native层获取APPname然后做不同处理1.包含头文件#include#include#ifndef__ANDROID
cheriyou_·2019-05-12 12:12

SparkSQL DataFrame和Dataset基本操作

1.正常打印输出1）创建SparkSessionvalspark=SparkSession.builder().appName("dfdemo").master("local[*]").getOrCreate
猫君之上·2019-04-29 21:50

利用函数式编程转换对象实战（一）

编程就是不同格式对象的转换上周有同事提出对象转换的问题，觉得难以解决，让我帮忙看下，需求很清晰vara=[{"appId":1,"appName":"分组1","ip":"172.0.0.1"},{"appId
yqfang·2019-04-27 23:16

Spring Boot 自定义日志配置

logback.xml内容如下：%d{yyyy-MM-ddHH:mm:ss.SSS}-[%thread]-%-5level-%logger{50}-%msg%n${LOG_HOME}/${appName
Michean·2019-04-23 20:52

日志总结

监控系统运行状况：可以结合系统性能分析工具，查看不同时间里，系统的运行情况，结合日志，进行调优3、回溯系统故障：系统出错的可以通过日志，看看出错的时候执行了什么操作，处于什么状态推荐的系统日志命名格式：appName_logType_logName.log
一心憧憬·2019-04-16 15:34

Elasticsearch 5.x date range 查询

{"size":0,"query":{"match":{"appName":"zis-search-za-search-service.prd.za-tech.net"}},"aggs":{"range
逗逼程序员·2019-04-12 13:48

springCloud基于slf4j+logback+Linux 实现日志管理 指定日志输出目录 日志分类

这里就不多说了，文件内容如下：ERRORDENYACCEPT%d{yyyy-MM-ddHH:mm:ss.SSS}%-5level[%thread]%logger{50}:%msg%n${LOG_INFO}/${appName
BigHippo1121·2019-04-09 11:07

pyspark离线多表合并

在统计中通常需要聚合多表信息到宽表，一般采用crontab+pyspark脚本1.创建sessionspark=SparkSession.builder.master("local").appName(
StonyBlue·2019-04-06 21:48

springcloud 一些小坑

属性spring.application.name与eureka.instance.appname区别在eureka界面显示的是eureka.instance.appname，而消费者向访问服务提供者时用到的应用名是
hgqxjj·2019-03-26 17:15

pyspark 连接mysql读取数据

frompysparkimportSparkConffrompysparkimportSparkContextconf=SparkConf().setAppName(“miniProject”).setMaster(“local[*]”)sc=SparkContext(appName
huangkang1995·2019-03-25 13:15

Windows环境下使用pyspark创建和使用DataFrame出现Py4JJavaError错误

pyspark创建和使用DataFrame出现Py4JJavaError错误测试代码frompyspark.sqlimportSparkSessionspark=SparkSession.builder.appName
qwq_up·2019-03-22 20:42

js修改数组对象的属性（key）名

例如：把如下data1的key名称修改成data2中的key名称data1:[{appName:'应用1',capacity:233456},{title:'应用2',key:124535}]data2
李瑞清New·2019-03-15 15:40

eureka(三) eureka配置文件

eureka.instance.hostname=localhost#注册在Eureka服务中的应用组名eureka.instance.app-group-name=#注册在的Eureka服务中的应用名称eureka.instance.appname
做个皮皮虾多好·2019-03-14 16:08

将Web应用部署到Tomcat根目录的三种方法

将应用部署到Tomcat根目录的三种方法将应用部署到Tomcat根目录的目的是可以通过“http://[ip]:[port]”直接访问应用，而不是使用“http://[ip]:[port]/[appName
luckykapok918·2019-03-13 16:17
上一页 17 18 19 20 21 22 23 24 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他