- java导出/解析excel
深圳厨神
javaexcel开发语言
本文有三个方法:1,导出excel模板,只有表头2,导出excel,将数据导出为excel3,解析excelpackagecom.hebi.util;importorg.apache.poi.hssf.usermodel.HSSFCell;importorg.apache.poi.hssf.usermodel.HSSFCellStyle;importorg.apache.poi.hssf.user
- 大数据必学免费、开源分布式数据库——Apache Hive
遇码
大数据数据仓库开源hivehadoopsql数据库ApacheHive
Hive是大数据开发、分析领域无法绕开的一个话题。我将分认识Hive、快速部署、快速入门等几个模块为同学们详细地介绍Hive,期望可以为刚刚接触大数据领域的同学们建立一个初步的认知。Hive是什么Hive,又称ApacheHive,由Facebook开源用于解决海量结构化日志的数据统计工具。Hive是基于ApacheHadoop的一个数据仓库工具,用来进行数据提取、转化、加载,这是一种可以存储、查
- MyBatis打印SQL日志的配置
zrhsmile
Mybatismybatis数据库
配置MyBatis打印日志的步骤如下,支持多种日志框架(如Logback、Log4j2等):一、选择日志框架并添加依赖(以常见组合为例)1.Logback(推荐)ch.qos.logbacklogback-classic1.4.142.Log4j2org.apache.logging.log4jlog4j-core2.23.1org.apache.logging.log4jlog4j-slf4j2
- Spark2 之 Expression/Functions
zhixingheyi_tian
sparkspark
ExpressionConvertersrc/main/scala/org/apache/gluten/expression/ExpressionConverter.scalaTopNTransformersrc/main/scala/org/apache/gluten/execution/TopNTransformer.scala
- Spark2 之 FallBack
zhixingheyi_tian
sparkspark
newValidatorsrc/main/scala/org/apache/gluten/extension/columnar/validator/Validators.scala/***Avalidatorthatdoesn'tinvolvenativevalidation.**ThisistypicallyRASplannerthatdoesnativevalidationinlinewith
- 【自学笔记】Spark基础知识点总览-持续更新
Long_poem
笔记spark大数据
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录ApacheSpark基础知识点总览目录简介核心组件SparkSQLDataFrame与DatasetAPIRDD(弹性分布式数据集)SparkStreamingMLlib(机器学习库)GraphX(图处理框架)部署模式示例代码创建SparkContext创建RDD并执行操作使用DataFrameAPI使用SparkSQL总结
- 【监控系列】ELK
yunqi1215
Monitorelk
ELKStack,现常称为ElasticStack,是一个功能强大的开源工具组合,专为实时数据采集、存储、分析和可视化设计。以下是对其核心组件、工作流程、应用场景及挑战的详细解析:一、核心组件Elasticsearch角色:分布式搜索和分析引擎,基于ApacheLucene构建。功能:存储大规模数据,支持近实时搜索。提供倒排索引、结构化查询、全文检索和聚合分析。分布式架构支持水平扩展和高可用性。L
- 使用Kafka 3.2.3内置的Zookeeper
喝醉酒的小白
DBA大数据
目录标题Kafka3.2.3内置ZooKeeper使用步骤1.下载与解压2.配置ZooKeeper3.配置Kafka4.启动ZooKeeper5.启动Kafka注意事项环境检查1.连接ZooKeeper并查看BrokerID2.尝试查看KafkaBrokerAPI版本Kafka3.2.3内置ZooKeeper使用步骤1.下载与解压从Kafka官网(http://kafka.apache.org/d
- 手把手教你:将OpenStack私有云平台从HTTP升级到HTTPS访问(附完整配置流程)
冯·诺依曼的
httpopenstackhttps云计算运维
前言在私有云平台中,将HTTP协议升级为HTTPS是提升安全性的重要步骤。本文以OpenStack私有云为例,详细讲解如何通过配置Apache、SSL证书及Horizon参数,实现HTTPS强制访问,保障数据传输安全。环境准备系统:CentOS7角色:OpenStack控制节点(controller)目标:启用HTTPS访问Dashboard(Horizon)完整操作流程1.配置本地YUM仓库(可
- Elasticsearch 基础篇【ES】
码农爱java
elasticsearch大数据搜索引擎esJava后端全文检索
前言:Elasticsearch是一个分布式、RESTful风格的搜索和数据分析引擎,它的用途非常广泛,主要用于全文检索、结构化搜索、数据分析以及将这三者混合使用,本篇我们来初步认识一下ELasticsearch,分享一些ELasticsearch的基本概念。什么是Elasticsearch?Elasticsearch是一个分布式的、开源的、实时的搜索和分析引擎。它是基于ApacheLucene构
- flink-connector-jdbc扩展国产达梦数据库
炸地瓜
flink数据库大数据
下载flink-connector-jdbc源码gitclonehttps://github.com/apache/flink-connector-jdbc.git增加达梦数据库支持在org.apache.flink.connector.jdbc.databases创建dm包在dm.dialect中创建DmDialect、DmDialectFactory、DmRowConverterDmDiale
- Flink介绍与安装
叶域
大数据flinkflink大数据
ApacheFlink是一个在有界数据流和无界数据流上进行有状态计算分布式处理引擎和框架。Flink设计旨在所有常见的集群环境中运行,以任意规模和内存级速度执行计算。一、主要特点和功能1.实时流处理:低延迟:Flink能够以亚秒级的延迟处理数据流,非常适合对时间敏感的应用,如实时分析、监控和告警系统。状态管理:Flink提供了对状态的内置支持,使得开发有状态的流式处理应用变得容易,如窗口操作、复杂
- kafka_exporter服务安装并启动
风中凌乱
监控服务kafkaprometheus
kafka_exporter服务安装并启动1、介绍2、下载kafka_exporter3、解压缩文件4、启动kafka_exporter服务1、介绍kafka_exporter是一个用于监控ApacheKafka集群的开源工具,它是由Prometheus社区维护的一个官方Exporter。该工具通过连接到Kafka集群并执行各种查询来收集关于Kafka集群的指标,并将这些指标暴露给Promethe
- Windows PC上创建大数据职业技能竞赛实验环境之六--Flume、Kafka和Flink编程
liu9ang
大数据平台hadoopkafkaflinkredis
1Flume参看日志采集工具Flume的安装与使用方法_厦大数据库实验室博客(xmu.edu.cn)。查看Flume安装root@client1:~#flume-ngversionFlume1.7.0Sourcecoderepository:https://git-wip-us.apache.org/repos/asf/flume.gitRevision:511d868555dd4d16e6ce4
- Windows下载安装测试 Kafka ,并在SpringBoot上集成,一步到位简单Demo
Kashinhu
kafkaspringbootkafka
Windows下载安装Kafka并在SpringBoot上集成一:下载并安装Kafka1,下载kafka安装包ApacheKafka正在上传…重新上传取消注意:kafka的运行需要依赖zookeeper,但是2.8.0以后的版本内置了zookeeper.jar文件,不需要单独安装zookeeper。2,解压并安装配置解压到D:\kafka_2.12-3.2.3解压完成后打开D:\kafka_2.1
- 【Kafka】Kafka4.0在windows上启动
丑过三八线
kafkawindows分布式
Kafka4.0在windows上启动单机版Windows上安装Kafka4.0安装JDK启动格式化日志目录启动服务测试创建topic启动一个消费端启动一个生产端测试生产端的操作消费端的操作Windows上安装Kafka4.0首先下载安装编译好的安装包,下载地址:https://kafka.apache.org/downloads。这里之所以称他为4.0,是因为网站上那样写的。安装包的版本标注好像
- Django 生产环境静态文件处理
换个网名有点难
pythondjango
`pythonmanage.pycollectstatic`是Django提供的一个非常重要的管理命令,用于将项目中的静态文件收集到一个指定的目录中。这在部署Django项目时尤其重要,因为静态文件需要被Web服务器(如Nginx或Apache)提供服务,而不是通过Django提供。命令详解1.基本功能`collectstatic`命令的主要功能是将项目中所有应用的静态文件以及`STATICFIL
- Buffer overFolw---Kryo序列化出现缓冲区溢出的问题解决
Matrix70
#spark大数据分布式
问题:由于我的数据量太大,我设置批次为10000万,50w数据大概有400M左右,然后进行spark数据处理时候报错为org.apache.spark.SparkException:Kryoserializationfailed:BufferoverFolw.Available:0,rquired58900977,Toavoidthis,increasespark.kryoserializer.b
- Spring AOP面向切面编程实现日志功能
PXM的算法星球
Java后端spring单元测试java
首先我们引入日志slf4j相关依赖org.slf4jslf4j-api2.0.9org.apache.logging.log4jlog4j-slf4j2-impl2.20.0org.apache.logging.log4jlog4j-core2.20.0再引入spring-aop依赖org.springframeworkspring-aop5.3.23为了方便编码,lombok也是必不可少的org
- 中间件漏洞--tomcat
夜行者~
安全tomcat中间件java
1.后台地址泄露解决办法:1).删除TOMCAT_HOME/webapps/docs、examples、manager、ROOT、host-manager2).编辑TOMCAT_HOME/web.xml,修改org.apache.catalina.servlets.DefaultServlet下的初始化参数listings的默认值,改成(或增加)为:false2.中间件及版本信息泄露解决办法进入a
- SpringBoot3 集成 Shiro
Sweet锦
Javaspringboot后端java
ApacheShiro是一个强大且易用的Java安全框架,提供了身份验证、授权、密码学和会话管理等功能。它被广泛用于保护各种类型的应用程序,包括Web应用、桌面应用、RESTful服务、移动应用和大型企业级应用。ApacheShiro没有SpringSecurity那么多晦涩的概念和术语,其原理非常清晰易懂,也非常容易集成到自己的项目中。SpringBoot2.x已于去年底Endoflife,升级
- Apache Flink 2.0.0: 实时数据处理的新纪元
flink大数据
昨天天,Flink开发团队骄傲地宣布ApacheFlink2.0.0正式发布!这是Flink2.x系列的首个版本,也是自九年前Flink1.0发布以来的首次重大更新。这个版本凝聚了社区两年来精心筹备与协作的成果,标志着Flink发展开启了新篇章。在这个版本中,165位贡献者齐聚一堂,完成了25项Flink改进提案(FLIP),解决了367个问题。我们衷心感谢所有贡献者为这个里程碑版本付出的宝贵努力
- flink之SQL入门
panxuej_shenx
SQL部分学习TableAPI的特点TableAPI和SQL都是ApacheFlink中高等级的分析API,SQL所具备的特点TableAPI也都具有,如下:声明式-用户只关心做什么,不用关心怎么做;高性能-支持查询优化,可以获取最好的执行性能;流批统一-相同的统计逻辑,既可以流模式运行,也可以批模式运行;标准稳定-语义遵循SQL标准,语法语义明确,不易变动。当然除了SQL的特性,因为TableA
- 记录使用Python从RocketMQ中实现数据消费及推送
搬运工-
rocketmq
背景:工作需要使用Python3从rocketmq的队列里读取数据,相关文档也比较少,找到rocketmqpython库在GitHub地址:https://github.com/apache/rocketmq-client-python官网表示基于rocketmq-client-cpp,支持Linux和macOS系统系统环境:1、centos72、python33、RocketMQ4.9.1安装R
- 数据湖和Apache Iceberg,Apache Hudi,Delta Lake
西土城计划
apachebigdata大数据
1什么是数据湖?数据湖这个词目前已经流行开来,逐步被数据相关的从业者接受,可能还有很多人不太清楚它和Hadoop,Hive,Spark这些大数据系统的区别,简单说数据湖是个业务概念,主要是为了区别传统数仓这个概念的(传统数仓的定义:datawarehouse,是用于报告和数据分析的系统,被认为是商业智能的核心组件)。为什么说是“传统数仓”,因为Hadoop于2006年诞生至今已有10多年了,在这期
- Apache Iceberg 解析,一文了解Iceberg定义、应用及未来发展
镜舟科技
apacheIcebergStarRocks元数据数据湖湖仓一体数据分析
什么是Iceberg?ApacheIceberg是一种开源的表格式(TableFormat),专为超大规模数据分析场景设计,通过标准化数据存储规范与访问协议,解决了传统数据湖在元数据管理、事务控制、查询性能等方面的核心痛点。以下从六个维度全面解析其技术原理、应用场景与最佳实践。一、为什么需要新的表格式?传统数据湖面临的痛点数据治理与管理能力不足:传统数据湖在数据治理和管理方面存在明显短板,缺乏严格
- Shiro
qq_41701460
java
Shiro简介Shiro概述ApacheShiro是一种功能强大且易于使用的Java安全框架,它执行身份验证、授权、加密和会话管理,可用于保护任何应用程序的安全。Shiro提供了应用程序安全性API来执行以下方面:1)身份验证:证明用户身份,通常称为用户"登录";2)授权:访问控制;3)密码术:保护或隐藏数据以防窥视;4)会话管理:每个用户的时间敏感状态。上述四个方面也被称为应用程序安全性的四个基
- Java动态生成Word终极指南:poi-tl与Aspose.Words性能对比及选型建议
天机️灵韵
开源项目编程语言vscodeJavaword模板
在Java中实现复杂文档生成(如合同、报表)时,poi-tl、Aspose.Words和docx4j是三个主流的模板技术方案。以下是它们的核心对比和选型建议:1.poi-tl(基于ApachePOI的模板引擎)定位:轻量级开源库,基于ApachePOI封装,简化模板操作。核心优势:模板语法灵活:通过{{@var}}、{{?section}}等标签实现文本、表格、列表、图片的动态插入。代码简洁:相比
- springmvc配置dubbo两种方式
饿饿好饿
javadubbojava-zookeeperzookeeperlinuxredis
springmvc配置dubbo两种方式dubbo+zookeeper在读本文前建议先掌握dubbo的基本知识dubbo官网地址:http://dubbo.apache.org/zh/主要步骤:将服务提供者注册到注册中心,暴露服务,消费者引用准备1、在服务器或者本地搭建好zookeeper,启动zoookeeper2、在服务器或者本地搭建好dubbo-admin,启动dubboXML方式配置配置提
- WX小程序
Angelyb
Java后端小程序
下载packagecom.sky.utils;importcom.alibaba.fastjson.JSONObject;importorg.apache.http.NameValuePair;importorg.apache.http.client.config.RequestConfig;importorg.apache.http.client.entity.UrlEncodedFormEnt
- Algorithm
香水浓
javaAlgorithm
冒泡排序
public static void sort(Integer[] param) {
for (int i = param.length - 1; i > 0; i--) {
for (int j = 0; j < i; j++) {
int current = param[j];
int next = param[j + 1];
- mongoDB 复杂查询表达式
开窍的石头
mongodb
1:count
Pg: db.user.find().count();
统计多少条数据
2:不等于$ne
Pg: db.user.find({_id:{$ne:3}},{name:1,sex:1,_id:0});
查询id不等于3的数据。
3:大于$gt $gte(大于等于)
&n
- Jboss Java heap space异常解决方法, jboss OutOfMemoryError : PermGen space
0624chenhong
jvmjboss
转自
http://blog.csdn.net/zou274/article/details/5552630
解决办法:
window->preferences->java->installed jres->edit jre
把default vm arguments 的参数设为-Xms64m -Xmx512m
----------------
- 文件上传 下载 解析 相对路径
不懂事的小屁孩
文件上传
有点坑吧,弄这么一个简单的东西弄了一天多,身边还有大神指导着,网上各种百度着。
下面总结一下遇到的问题:
文件上传,在页面上传的时候,不要想着去操作绝对路径,浏览器会对客户端的信息进行保护,避免用户信息收到攻击。
在上传图片,或者文件时,使用form表单来操作。
前台通过form表单传输一个流到后台,而不是ajax传递参数到后台,代码如下:
<form action=&
- 怎么实现qq空间批量点赞
换个号韩国红果果
qq
纯粹为了好玩!!
逻辑很简单
1 打开浏览器console;输入以下代码。
先上添加赞的代码
var tools={};
//添加所有赞
function init(){
document.body.scrollTop=10000;
setTimeout(function(){document.body.scrollTop=0;},2000);//加
- 判断是否为中文
灵静志远
中文
方法一:
public class Zhidao {
public static void main(String args[]) {
String s = "sdf灭礌 kjl d{';\fdsjlk是";
int n=0;
for(int i=0; i<s.length(); i++) {
n = (int)s.charAt(i);
if((
- 一个电话面试后总结
a-john
面试
今天,接了一个电话面试,对于还是初学者的我来说,紧张了半天。
面试的问题分了层次,对于一类问题,由简到难。自己觉得回答不好的地方作了一下总结:
在谈到集合类的时候,举几个常用的集合类,想都没想,直接说了list,map。
然后对list和map分别举几个类型:
list方面:ArrayList,LinkedList。在谈到他们的区别时,愣住了
- MSSQL中Escape转义的使用
aijuans
MSSQL
IF OBJECT_ID('tempdb..#ABC') is not null
drop table tempdb..#ABC
create table #ABC
(
PATHNAME NVARCHAR(50)
)
insert into #ABC
SELECT N'/ABCDEFGHI'
UNION ALL SELECT N'/ABCDGAFGASASSDFA'
UNION ALL
- 一个简单的存储过程
asialee
mysql存储过程构造数据批量插入
今天要批量的生成一批测试数据,其中中间有部分数据是变化的,本来想写个程序来生成的,后来想到存储过程就可以搞定,所以随手写了一个,记录在此:
DELIMITER $$
DROP PROCEDURE IF EXISTS inse
- annot convert from HomeFragment_1 to Fragment
百合不是茶
android导包错误
创建了几个类继承Fragment, 需要将创建的类存储在ArrayList<Fragment>中; 出现不能将new 出来的对象放到队列中,原因很简单;
创建类时引入包是:import android.app.Fragment;
创建队列和对象时使用的包是:import android.support.v4.ap
- Weblogic10两种修改端口的方法
bijian1013
weblogic端口号配置管理config.xml
一.进入控制台进行修改 1.进入控制台: http://127.0.0.1:7001/console 2.展开左边树菜单 域结构->环境->服务器-->点击AdminServer(管理) &
- mysql 操作指令
征客丶
mysql
一、连接mysql
进入 mysql 的安装目录;
$ bin/mysql -p [host IP 如果是登录本地的mysql 可以不写 -p 直接 -u] -u [userName] -p
输入密码,回车,接连;
二、权限操作[如果你很了解mysql数据库后,你可以直接去修改系统表,然后用 mysql> flush privileges; 指令让权限生效]
1、赋权
mys
- 【Hive一】Hive入门
bit1129
hive
Hive安装与配置
Hive的运行需要依赖于Hadoop,因此需要首先安装Hadoop2.5.2,并且Hive的启动前需要首先启动Hadoop。
Hive安装和配置的步骤
1. 从如下地址下载Hive0.14.0
http://mirror.bit.edu.cn/apache/hive/
2.解压hive,在系统变
- ajax 三种提交请求的方法
BlueSkator
Ajaxjqery
1、ajax 提交请求
$.ajax({
type:"post",
url : "${ctx}/front/Hotel/getAllHotelByAjax.do",
dataType : "json",
success : function(result) {
try {
for(v
- mongodb开发环境下的搭建入门
braveCS
运维
linux下安装mongodb
1)官网下载mongodb-linux-x86_64-rhel62-3.0.4.gz
2)linux 解压
gzip -d mongodb-linux-x86_64-rhel62-3.0.4.gz;
mv mongodb-linux-x86_64-rhel62-3.0.4 mongodb-linux-x86_64-rhel62-
- 编程之美-最短摘要的生成
bylijinnan
java数据结构算法编程之美
import java.util.HashMap;
import java.util.Map;
import java.util.Map.Entry;
public class ShortestAbstract {
/**
* 编程之美 最短摘要的生成
* 扫描过程始终保持一个[pBegin,pEnd]的range,初始化确保[pBegin,pEnd]的ran
- json数据解析及typeof
chengxuyuancsdn
jstypeofjson解析
// json格式
var people='{"authors": [{"firstName": "AAA","lastName": "BBB"},'
+' {"firstName": "CCC&
- 流程系统设计的层次和目标
comsci
设计模式数据结构sql框架脚本
流程系统设计的层次和目标
- RMAN List和report 命令
daizj
oraclelistreportrman
LIST 命令
使用RMAN LIST 命令显示有关资料档案库中记录的备份集、代理副本和映像副本的
信息。使用此命令可列出:
• RMAN 资料档案库中状态不是AVAILABLE 的备份和副本
• 可用的且可以用于还原操作的数据文件备份和副本
• 备份集和副本,其中包含指定数据文件列表或指定表空间的备份
• 包含指定名称或范围的所有归档日志备份的备份集和副本
• 由标记、完成时间、可
- 二叉树:红黑树
dieslrae
二叉树
红黑树是一种自平衡的二叉树,它的查找,插入,删除操作时间复杂度皆为O(logN),不会出现普通二叉搜索树在最差情况时时间复杂度会变为O(N)的问题.
红黑树必须遵循红黑规则,规则如下
1、每个节点不是红就是黑。 2、根总是黑的 &
- C语言homework3,7个小题目的代码
dcj3sjt126com
c
1、打印100以内的所有奇数。
# include <stdio.h>
int main(void)
{
int i;
for (i=1; i<=100; i++)
{
if (i%2 != 0)
printf("%d ", i);
}
return 0;
}
2、从键盘上输入10个整数,
- 自定义按钮, 图片在上, 文字在下, 居中显示
dcj3sjt126com
自定义
#import <UIKit/UIKit.h>
@interface MyButton : UIButton
-(void)setFrame:(CGRect)frame ImageName:(NSString*)imageName Target:(id)target Action:(SEL)action Title:(NSString*)title Font:(CGFloa
- MySQL查询语句练习题,测试足够用了
flyvszhb
sqlmysql
http://blog.sina.com.cn/s/blog_767d65530101861c.html
1.创建student和score表
CREATE TABLE student (
id INT(10) NOT NULL UNIQUE PRIMARY KEY ,
name VARCHAR
- 转:MyBatis Generator 详解
happyqing
mybatis
MyBatis Generator 详解
http://blog.csdn.net/isea533/article/details/42102297
MyBatis Generator详解
http://git.oschina.net/free/Mybatis_Utils/blob/master/MybatisGeneator/MybatisGeneator.
- 让程序员少走弯路的14个忠告
jingjing0907
工作计划学习
无论是谁,在刚进入某个领域之时,有再大的雄心壮志也敌不过眼前的迷茫:不知道应该怎么做,不知道应该做什么。下面是一名软件开发人员所学到的经验,希望能对大家有所帮助
1.不要害怕在工作中学习。
只要有电脑,就可以通过电子阅读器阅读报纸和大多数书籍。如果你只是做好自己的本职工作以及分配的任务,那是学不到很多东西的。如果你盲目地要求更多的工作,也是不可能提升自己的。放
- nginx和NetScaler区别
流浪鱼
nginx
NetScaler是一个完整的包含操作系统和应用交付功能的产品,Nginx并不包含操作系统,在处理连接方面,需要依赖于操作系统,所以在并发连接数方面和防DoS攻击方面,Nginx不具备优势。
2.易用性方面差别也比较大。Nginx对管理员的水平要求比较高,参数比较多,不确定性给运营带来隐患。在NetScaler常见的配置如健康检查,HA等,在Nginx上的配置的实现相对复杂。
3.策略灵活度方
- 第11章 动画效果(下)
onestopweb
动画
index.html
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">
<html xmlns="http://www.w3.org/
- FAQ - SAP BW BO roadmap
blueoxygen
BOBW
http://www.sdn.sap.com/irj/boc/business-objects-for-sap-faq
Besides, I care that how to integrate tightly.
By the way, for BW consultants, please just focus on Query Designer which i
- 关于java堆内存溢出的几种情况
tomcat_oracle
javajvmjdkthread
【情况一】:
java.lang.OutOfMemoryError: Java heap space:这种是java堆内存不够,一个原因是真不够,另一个原因是程序中有死循环; 如果是java堆内存不够的话,可以通过调整JVM下面的配置来解决: <jvm-arg>-Xms3062m</jvm-arg> <jvm-arg>-Xmx
- Manifest.permission_group权限组
阿尔萨斯
Permission
结构
继承关系
public static final class Manifest.permission_group extends Object
java.lang.Object
android. Manifest.permission_group 常量
ACCOUNTS 直接通过统计管理器访问管理的统计
COST_MONEY可以用来让用户花钱但不需要通过与他们直接牵涉的权限
D