- OpenResty+Lua实现灰度发布
他爱向着欢乐
Luaopenresty灰度发布luaopenresty开发语言
OpenResty+Lua实现灰度发布业务场景用户通过浏览器发送一个请求给openresty,openresty调用lua脚本获取用户id地址,并查看该ip地址是否存在redis中,如果存在则让用户访问v2.0版本,否则让用户访问v1.0版本。如图所示:实现方案配置文件nginx.confhttp.confapp1.confapp2.confLua脚本abtest.lua实现流程请求先进入open
- 使用OpenResty+Lua实现灰度测试(金丝雀)
imorta
luaopenresty开发语言
openresty.org/en/下载地址如何安装部署不是本节内容在实际项目中遇到重构或者新版本发布,新老系统如何高效的切换,现目前的答案就是Gateway网关,有很多开源的网关KongApisix但是这里来教如何自己实现一个api网关介绍openresty基于Nginx开发使用Lua让程序更加灵活,Lua基于C开发,脚本语言拥有原生协程,性能强自己简单看一下lua的语法我们就开始上手了思路网关实
- APISIX入门使用
郝南过
apisix网关Adminapi
关于apisix的安装不过多介绍,网上有很多相关示例,也可以参照官方给出的示例进行安装(官方地址:Architecture|ApacheAPISIX),dashboard使用也不过多介绍这里主要介绍一下apisix的AdminAPI控制使用。一、APISIX简介ApacheAPISIX是基于Nginx/OpenResty+Lua方案打造的一款动态、实时、高性能的云原生API网关,提供了负载均衡、动
- 1.学习Nginx 详细介绍(负载均衡、全局异常、跨域、封禁IP、路径匹配、地址重定向、Websocket反向代理、缓存、压缩)
江湖树
玩转Nginx分布式架构学习nginx负载均衡ipwebsocket
玩转Nginx分布式架构:1.学习Nginx详细介绍(负载均衡、全局异常、跨域、封禁IP、路径匹配、地址重定向、Websocket反向代理、缓存、压缩)2.使用Nginx配置域名3.使用Nginx配置HTTPS传输协议4.Nginx整合OpenResty+Lua(黑名单控制、内网访问限制、资源下载限速、日志分析、漏桶原理、令牌桶原理)5.Nginx高可用解决方案LVS+KeepAlived6.Ng
- OpenResty+Lua实现WAF防火墙
他爱向着欢乐
openrestyLualuaopenresty开发语言
OpenResty+Lua实现WAF防火墙WAF功能白名单黑名单防止SQL注入防止CC攻击若服务器收到CC攻击,一分钟内请求数大于60,则会将对方ip封进黑名单文件结构waf项目文件夹init.lua初始化函数access.lua请求入口处lab.lua工具方法如获取客户端ip,防止GET/POST请求的SQL注入等。config.lua配置文件white_ip.txt白名单black_ip.tx
- 在ubuntu上使用Openresty+lua实现WAF----折腾笔记
weixin_30595035
luaphpjava
1.1参考loveshell的waf实现思路,再此感谢下面其中一部分是转载1.2WAF的功能支持IP白名单和黑名单功能,直接将黑名单的IP访问拒绝。支持URL白名单,将不需要过滤的URL进行定义。支持User-Agent的过滤,匹配自定义规则中的条目,然后进行处理(返回403)。支持CC攻击防护,单个URL指定时间的访问次数,超过设定值,直接返回403。支持Cookie过滤,匹配自定义规则中的条目
- IDEA搭建openresty+Lua开发环境笔记
山塘小鱼儿
demonginxopenrestyLuanginx
1.openresty-1.21.4.1-win64.zip包的下载openresty-1.21.4.1-win64.zip包下载-C文档类资源-CSDN下载2.Idea插件添加如图:配置openresty-1.21.4.1-win64.zip解压后的目录地址nginx服务就配置到Idea运行环境中去了ant文件配置,选择项目中的build.xml,需要jdk环境3.编写build.xml,主要是
- OpenResty+Lua限流实战
代码狂魔v
代码狂魔nginxlinux
OpenResty+Lua限流实战当业务量越来越大的时候,为了能保证服务的运行,限流是必不可少的!OpenResty是一个高性能网关OpenResty®isadynamicwebplatformbasedonNGINXandLuaJIT.OpenResty=Nginx+Lua,Lua是高性能脚本语言,有着C语言的执行效率但是又比C简单,能很方便的扩展OpenResty的功能。Lua是由巴西里约热内
- lua 遍历linux文件夹,【Lua】Lua + openresty遍历文件目录
weixin_39618730
lua遍历linux文件夹
OpenResty(也称为ngx_openresty)是一个全功能的Web应用服务器,它打包了标准的Nginx核心,很多的常用的第三方模块,以及它们的大多数依赖项。今天用OpenResty+lua来遍历指定目录,返回json字符串我们用Lua来遍历文件目录,并用nginx来访问lua文件,使其返回这个目录的json字符串。Lua代码:1locallfs=require("lfs")23functi
- Nginx/OpenResty+Lua实战
shanchahua123456
OpenResty集成了Nginx,在支持Nginx所有的功能前提下,整合了Lua、Mysql、Redis、Memcached等插件,使Nginx功能更强大。做7层负载均衡,做web开发,缓存,流控、waf、网关。推荐张开涛的《亿级流量网站架构核心技术》。里边有很多解决高并发问题的思路和方案,其中包含OpenResty的使用。LUA第三方库存放在openresty\lualib\resty目录下,
- openresty+lua实现WAF应用防火墙
C1G
Nginxlua_wafopenresty
1.#基础包安装yum-yinstallreadline-develpcre-develzlibzlib-develgcc2.升级openssl#yum-yopenssl-developensslversionOpenSSL1.0.1e-fips11Feb2013wget–no-check-certificatehttps://www.openssl.org/source/openssl-1.1.
- 使用OpenResty+Lua实现灰度测试(金丝雀)
php
https://openresty.org/en/下载地址如何安装部署不是本节内容在实际项目中遇到重构或者新版本发布,新老系统如何高效的切换,现目前的答案就是Gateway网关,有很多开源的网关KongApisix但是这里来教如何自己实现一个api网关介绍openresty基于Nginx开发使用Lua让程序更加灵活,Lua基于C开发,脚本语言拥有原生协程,性能强自己简单看一下lua的语法我们就开始
- Openresty+lua 演示(可用于后续网关开发)
肃毅
linux
OpenResty简介一款基于NGINX和LuaJIT的Web平台https://openresty.org/en/OpenResty是什么?OpenResty(也称为ngx_openresty)是一个全功能的Web应用服务器。它打包了雅虎中国的一个公司项目,起步于2007年10月。它通过揉和众多设计良好的Nginx模块,OpenResty有效地把Nginx服务器转变为一个强大的Web应用服务器。
- openresty+lua在反向代理服务中的玩法
weixin_34377065
openresty+lua在反向代理服务中的玩法phith0n·2015/06/0210:350x01起因几天前学弟给我介绍他用nginx搭建的反代,代理了谷歌和维基百科。由此我想到了一些邪恶的东西:反代既然是所有流量走我的服务器,那我是不是能够在中途做些手脚,达到一些有趣的目的。openresty是一款结合了nginx和lua的全功能web服务器,我感觉其角色和tornado类似,既是一个中间件
- openresty+lua劫持请求,有点意思
weixin_33827590
0x01起因几天前学弟给我介绍他用nginx搭建的反代,代理了谷歌和维基百科。由此我想到了一些邪恶的东西:反代既然是所有流量走我的服务器,那我是不是能够在中途做些手脚,达到一些有趣的目的。openresty是一款结合了nginx和lua的全功能web服务器,我感觉其角色和tornado类似,既是一个中间件,也结合了一个后端解释器。所以,我们可以在nginx上用lua开发很多“有趣”的东西。所以,这
- openresty+lua 动态更新upstram里的server (上)----配置upstream和health_check
going_han
openresty
环境描述:192.168.0.16启动一个Apache,访问80端口返回192.168.0.16esbrunning192.168.0.17启动一个Apache,访问80端口返回192.168.0.17esbrunning启动一个openresty,访问8000端口轮询转发到192.168.016和192.168.0.17的80端口步骤一:(1)192.168.0.16和192.168.0.17启
- openresty 中mime.types 文件缺失问题,无法展示图片
weixin_34122810
看技术群有人问这个:“图片不展示了,直接下载了,怎么设置nginx“,之前刚开始学习nginx时遇到过,然后使用openresty+lua在做网关时遇到过,这里还是记录下吧。原因解释:“想要nginx自动处理静态资源,然后图片是自动下载了,而不是展示在网页中”,这是因为nginx的配置不对,少了MIME配置文件,导致服务器不知该如何设置HTTPResponse的Content-Type,从而浏览器
- 微服务API网关框架-顾加春-专题视频课程
老顾聊技术
视频教程
微服务API网关框架—283人已学习课程介绍API网关是一个服务器,是系统的唯一入口。从面向对象设计的角度看,它与外观模式类似。API网关封装了系统内部架构,为每个客户端提供一个定制的API。它可能还具有其它职责,如身份验证、监控、负载均衡、缓存、请求分片与管理、静态响应处理。课程收益本课程讲解是基于openresty+lua的网关框架的讲解,从零到有的整体思路的讲解。重点讲解lua脚本语言,op
- nginx小技巧-动态域名(微信,小程序80端口)
weixin_33785972
如果公司有微信开发需求的话,得有备案了的域名和80端口员工开发调试是个问题,如果每次都找运维修改,维护,会被K的。交换机设置DMZ到一台固定服务器,在上面部署nginx/openresty可以gitlab(svn)+jenkins/ansible等运维方式实现每次修改配置文件后,提交到gitlab触发CI/CD推送到nginx服务器,执行reload当然变通的也有,比如,openresty+lua
- openresty+lua实现流量百分比分配
赶路人儿
#nginx
1、安装openresty:#!/bin/bash#NGINX_SERVER_IP="10.153.167.190"SOURCE_DIR="/data/jenkins_data"TARGET_DIR="/usr/local"NGINX_SOURCE_FILE="openresty-1.9.7.3.tar.gz"NGINX_TARGET_FILE="openresty-1.9.7.3"INSTALL
- Openresty+Lua 读写文件
8e744d4a988c
Talkischeap.Showmethecode.因为lua写读写操作比较麻烦,所以大致封装了一下。读文件:--读文件--参数:需要读取的文件路径--返回值:读出的内容,读取错误。--如果没有读出内容,第一个参数为nil,否则第二个参数为nillocalfunctionread_file(file_name)ifnotfile_namethenreturnnil,"missingfile_nam
- Openresty+Lua Redis连接池实现
8e744d4a988c
Talkischeap.Showmethecode.localredis_c=require"resty.redis"localok,new_tab=pcall(require,"table.new")ifnotokortype(new_tab)~="function"thennew_tab=function(narr,nrec)return{}endendlocal_M=new_tab(0,15
- 基于OpenResty 使用lua 实现在后端服务挂掉时 返回托底数据
上重楼
最初是在开发者头条看到一篇文章:京东老司机:巧用Nginx+Lua解决数据托底大痛点uri:http://dbaplus.cn/news-21-678-1.html?hmsr=toutiao.io&utm_medium=toutiao.io&utm_source=toutiao.io受到了很大启发,但是作者并没有开源其实现。所以我就决定学习下OpenResty+lua自己实现试试看主要的实现流程是
- SpringCloud + Vue 前后端分离微服务项目(一)
Steven
springbootjavavue.jsspringclouddocker
一、简介开发工具使用:IDEA、Nodejs、VisualStudioCode、MySQL5.5、JDK1.8前端使用技术:VUE+EL后台使用到的技术:OAuth2、Gateway、Zuul2.0、OpenResty+lua、Sentinel、OpenFeign、FastDFS、Elastic-Job(xxl-job)、Zipkin、HystrixTurbineGitHub地址:代码还未完全从业
- API接口访问频次限制 / 网站恶意爬虫限制 / 网站恶意访问限制 方案
流水理鱼
云计算
API接口访问频次限制/网站恶意爬虫限制/网站恶意访问限制方案采用多级拦截,后置拦截的方式体系化解决1分层拦截1.1第一层商业web应用防火墙(WAF)直接用商业服务传统的F5硬件,不过现在用的很少了云时代就用云时代的产品,典型代表阿里云web应用防火墙1.2第二层API网关(APIGateway)层API网关(APIGateway)kong为代表的开源API网关实现openresty+lua自实
- API接口访问频次限制 / 网站恶意爬虫限制 / 网站恶意访问限制 方案
流水理鱼
API接口访问频次限制/网站恶意爬虫限制/网站恶意访问限制方案采用多级拦截,后置拦截的方式体系化解决1分层拦截1.1第一层商业web应用防火墙(WAF)直接用商业服务传统的F5硬件,不过现在用的很少了云时代就用云时代的产品,典型代表阿里云web应用防火墙1.2第二层API网关(APIGateway)层API网关(APIGateway)kong为代表的开源API网关实现openresty+lua自实
- 我把宝塔bt的waf破解了
程序员Hani
“天王盖地虎,宝塔镇河妖”里面的“宝塔”在程序员的世界里面是-------宝塔面板-简单好用的Linux/Windows服务器管理面板。作为宝塔里面众多收费插件中一个------网站防火墙waf,对于网站的安全加固,sql注入防范,xss攻击防范有着十分重要的作用。waf也有很多开源的方案,比如用的最多的openresty+lua做waf,据说很多大厂也是拿了github上的代码改改。宝塔也是利用
- 灰度发布-Openresty+lua实现动态upstream
老夫刘某
动态的负载均衡控制;平滑上下线服务,升级服务;高可能保证–自动踢离线服务下线;具体思路利用lua中"lua_shared_dict"指令开辟一个共享内存空间;通过API动态根据key值&参数修改upstream(这里使用host作为key);利用proxy_pass可使用变量特性及lua指令"set_by_lua"动态修改当前upstream变量即可;配置:worker_processes1;pi
- openresty+lua 实现简单的灰度发布
gochenguowei
nginx
openresty是在nginx之上集成了lua模块的第三方服务器,我们很容易基于lua对openresy进行简单的二次开发。下面就是一个简单的openresty+lua的灰度发布的测试demo,简单地来说就是通过client的ip来访问不同的服务器。nginx.conf配置文件如下:upstreamclient1{server127.0.0.1:8080;}upstreamclient2{ser
- openresty + lua 入口
llaiwwan
openrestylua
这几天开始接触openresty+lua,在看代码和资料的时候,脑子里一直在想,代码的入口在哪里。自C语言之后,每个语言的第一个样例程序几乎都是“Hello,world”,就像一个标志牌:“从此进入”。openresty+lua的入口在nginx的配置文件中:两个关键字,也就是两个入口方式:content_by_lua指定lua代码content_by_lua_file指定lua代码文件这两个关键
- mondb入手
木zi_鸣
mongodb
windows 启动mongodb 编写bat文件,
mongod --dbpath D:\software\MongoDBDATA
mongod --help 查询各种配置
配置在mongob
打开批处理,即可启动,27017原生端口,shell操作监控端口 扩展28017,web端操作端口
启动配置文件配置,
数据更灵活 
- 大型高并发高负载网站的系统架构
bijian1013
高并发负载均衡
扩展Web应用程序
一.概念
简单的来说,如果一个系统可扩展,那么你可以通过扩展来提供系统的性能。这代表着系统能够容纳更高的负载、更大的数据集,并且系统是可维护的。扩展和语言、某项具体的技术都是无关的。扩展可以分为两种:
1.
- DISPLAY变量和xhost(原创)
czmmiao
display
DISPLAY
在Linux/Unix类操作系统上, DISPLAY用来设置将图形显示到何处. 直接登陆图形界面或者登陆命令行界面后使用startx启动图形, DISPLAY环境变量将自动设置为:0:0, 此时可以打开终端, 输出图形程序的名称(比如xclock)来启动程序, 图形将显示在本地窗口上, 在终端上输入printenv查看当前环境变量, 输出结果中有如下内容:DISPLAY=:0.0
- 获取B/S客户端IP
周凡杨
java编程jspWeb浏览器
最近想写个B/S架构的聊天系统,因为以前做过C/S架构的QQ聊天系统,所以对于Socket通信编程只是一个巩固。对于C/S架构的聊天系统,由于存在客户端Java应用,所以直接在代码中获取客户端的IP,应用的方法为:
String ip = InetAddress.getLocalHost().getHostAddress();
然而对于WEB
- 浅谈类和对象
朱辉辉33
编程
类是对一类事物的总称,对象是描述一个物体的特征,类是对象的抽象。简单来说,类是抽象的,不占用内存,对象是具体的,
占用存储空间。
类是由属性和方法构成的,基本格式是public class 类名{
//定义属性
private/public 数据类型 属性名;
//定义方法
publ
- android activity与viewpager+fragment的生命周期问题
肆无忌惮_
viewpager
有一个Activity里面是ViewPager,ViewPager里面放了两个Fragment。
第一次进入这个Activity。开启了服务,并在onResume方法中绑定服务后,对Service进行了一定的初始化,其中调用了Fragment中的一个属性。
super.onResume();
bindService(intent, conn, BIND_AUTO_CREATE);
- base64Encode对图片进行编码
843977358
base64图片encoder
/**
* 对图片进行base64encoder编码
*
* @author mrZhang
* @param path
* @return
*/
public static String encodeImage(String path) {
BASE64Encoder encoder = null;
byte[] b = null;
I
- Request Header简介
aigo
servlet
当一个客户端(通常是浏览器)向Web服务器发送一个请求是,它要发送一个请求的命令行,一般是GET或POST命令,当发送POST命令时,它还必须向服务器发送一个叫“Content-Length”的请求头(Request Header) 用以指明请求数据的长度,除了Content-Length之外,它还可以向服务器发送其它一些Headers,如:
- HttpClient4.3 创建SSL协议的HttpClient对象
alleni123
httpclient爬虫ssl
public class HttpClientUtils
{
public static CloseableHttpClient createSSLClientDefault(CookieStore cookies){
SSLContext sslContext=null;
try
{
sslContext=new SSLContextBuilder().l
- java取反 -右移-左移-无符号右移的探讨
百合不是茶
位运算符 位移
取反:
在二进制中第一位,1表示符数,0表示正数
byte a = -1;
原码:10000001
反码:11111110
补码:11111111
//异或: 00000000
byte b = -2;
原码:10000010
反码:11111101
补码:11111110
//异或: 00000001
- java多线程join的作用与用法
bijian1013
java多线程
对于JAVA的join,JDK 是这样说的:join public final void join (long millis )throws InterruptedException Waits at most millis milliseconds for this thread to die. A timeout of 0 means t
- Java发送http请求(get 与post方法请求)
bijian1013
javaspring
PostRequest.java
package com.bijian.study;
import java.io.BufferedReader;
import java.io.DataOutputStream;
import java.io.IOException;
import java.io.InputStreamReader;
import java.net.HttpURL
- 【Struts2二】struts.xml中package下的action配置项默认值
bit1129
struts.xml
在第一部份,定义了struts.xml文件,如下所示:
<!DOCTYPE struts PUBLIC
"-//Apache Software Foundation//DTD Struts Configuration 2.3//EN"
"http://struts.apache.org/dtds/struts
- 【Kafka十三】Kafka Simple Consumer
bit1129
simple
代码中关于Host和Port是割裂开的,这会导致单机环境下的伪分布式Kafka集群环境下,这个例子没法运行。
实际情况是需要将host和port绑定到一起,
package kafka.examples.lowlevel;
import kafka.api.FetchRequest;
import kafka.api.FetchRequestBuilder;
impo
- nodejs学习api
ronin47
nodejs api
NodeJS基础 什么是NodeJS
JS是脚本语言,脚本语言都需要一个解析器才能运行。对于写在HTML页面里的JS,浏览器充当了解析器的角色。而对于需要独立运行的JS,NodeJS就是一个解析器。
每一种解析器都是一个运行环境,不但允许JS定义各种数据结构,进行各种计算,还允许JS使用运行环境提供的内置对象和方法做一些事情。例如运行在浏览器中的JS的用途是操作DOM,浏览器就提供了docum
- java-64.寻找第N个丑数
bylijinnan
java
public class UglyNumber {
/**
* 64.查找第N个丑数
具体思路可参考 [url] http://zhedahht.blog.163.com/blog/static/2541117420094245366965/[/url]
*
题目:我们把只包含因子
2、3和5的数称作丑数(Ugly Number)。例如6、8都是丑数,但14
- 二维数组(矩阵)对角线输出
bylijinnan
二维数组
/**
二维数组 对角线输出 两个方向
例如对于数组:
{ 1, 2, 3, 4 },
{ 5, 6, 7, 8 },
{ 9, 10, 11, 12 },
{ 13, 14, 15, 16 },
slash方向输出:
1
5 2
9 6 3
13 10 7 4
14 11 8
15 12
16
backslash输出:
4
3
- [JWFD开源工作流设计]工作流跳跃模式开发关键点(今日更新)
comsci
工作流
既然是做开源软件的,我们的宗旨就是给大家分享设计和代码,那么现在我就用很简单扼要的语言来透露这个跳跃模式的设计原理
大家如果用过JWFD的ARC-自动运行控制器,或者看过代码,应该知道在ARC算法模块中有一个函数叫做SAN(),这个函数就是ARC的核心控制器,要实现跳跃模式,在SAN函数中一定要对LN链表数据结构进行操作,首先写一段代码,把
- redis常见使用
cuityang
redis常见使用
redis 通常被认为是一个数据结构服务器,主要是因为其有着丰富的数据结构 strings、map、 list、sets、 sorted sets
引入jar包 jedis-2.1.0.jar (本文下方提供下载)
package redistest;
import redis.clients.jedis.Jedis;
public class Listtest
- 配置多个redis
dalan_123
redis
配置多个redis客户端
<?xml version="1.0" encoding="UTF-8"?><beans xmlns="http://www.springframework.org/schema/beans" xmlns:xsi=&quo
- attrib命令
dcj3sjt126com
attr
attrib指令用于修改文件的属性.文件的常见属性有:只读.存档.隐藏和系统.
只读属性是指文件只可以做读的操作.不能对文件进行写的操作.就是文件的写保护.
存档属性是用来标记文件改动的.即在上一次备份后文件有所改动.一些备份软件在备份的时候会只去备份带有存档属性的文件.
- Yii使用公共函数
dcj3sjt126com
yii
在网站项目中,没必要把公用的函数写成一个工具类,有时候面向过程其实更方便。 在入口文件index.php里添加 require_once('protected/function.php'); 即可对其引用,成为公用的函数集合。 function.php如下:
<?php /** * This is the shortcut to D
- linux 系统资源的查看(free、uname、uptime、netstat)
eksliang
netstatlinux unamelinux uptimelinux free
linux 系统资源的查看
转载请出自出处:http://eksliang.iteye.com/blog/2167081
http://eksliang.iteye.com 一、free查看内存的使用情况
语法如下:
free [-b][-k][-m][-g] [-t]
参数含义
-b:直接输入free时,显示的单位是kb我们可以使用b(bytes),m
- JAVA的位操作符
greemranqq
位运算JAVA位移<<>>>
最近几种进制,加上各种位操作符,发现都比较模糊,不能完全掌握,这里就再熟悉熟悉。
1.按位操作符 :
按位操作符是用来操作基本数据类型中的单个bit,即二进制位,会对两个参数执行布尔代数运算,获得结果。
与(&)运算:
1&1 = 1, 1&0 = 0, 0&0 &
- Web前段学习网站
ihuning
Web
Web前段学习网站
菜鸟学习:http://www.w3cschool.cc/
JQuery中文网:http://www.jquerycn.cn/
内存溢出:http://outofmemory.cn/#csdn.blog
http://www.icoolxue.com/
http://www.jikexue
- 强强联合:FluxBB 作者加盟 Flarum
justjavac
r
原文:FluxBB Joins Forces With Flarum作者:Toby Zerner译文:强强联合:FluxBB 作者加盟 Flarum译者:justjavac
FluxBB 是一个快速、轻量级论坛软件,它的开发者是一名德国的 PHP 天才 Franz Liedke。FluxBB 的下一个版本(2.0)将被完全重写,并已经开发了一段时间。FluxBB 看起来非常有前途的,
- java统计在线人数(session存储信息的)
macroli
javaWeb
这篇日志是我写的第三次了 前两次都发布失败!郁闷极了!
由于在web开发中常常用到这一部分所以在此记录一下,呵呵,就到备忘录了!
我对于登录信息时使用session存储的,所以我这里是通过实现HttpSessionAttributeListener这个接口完成的。
1、实现接口类,在web.xml文件中配置监听类,从而可以使该类完成其工作。
public class Ses
- bootstrp carousel初体验 快速构建图片播放
qiaolevip
每天进步一点点学习永无止境bootstrap纵观千象
img{
border: 1px solid white;
box-shadow: 2px 2px 12px #333;
_width: expression(this.width > 600 ? "600px" : this.width + "px");
_height: expression(this.width &
- SparkSQL读取HBase数据,通过自定义外部数据源
superlxw1234
sparksparksqlsparksql读取hbasesparksql外部数据源
关键字:SparkSQL读取HBase、SparkSQL自定义外部数据源
前面文章介绍了SparSQL通过Hive操作HBase表。
SparkSQL从1.2开始支持自定义外部数据源(External DataSource),这样就可以通过API接口来实现自己的外部数据源。这里基于Spark1.4.0,简单介绍SparkSQL自定义外部数据源,访
- Spring Boot 1.3.0.M1发布
wiselyman
spring boot
Spring Boot 1.3.0.M1于6.12日发布,现在可以从Spring milestone repository下载。这个版本是基于Spring Framework 4.2.0.RC1,并在Spring Boot 1.2之上提供了大量的新特性improvements and new features。主要包含以下:
1.提供一个新的sprin