32_分库分表概述 配置mycat

版本：5.7.28

1.搭建mycat 分片服务器
 
数据库主机 192.168.4.54 使用db1库存储数据
数据库主机 192.168.4.55 使用db2库存储数据
主机 192.168.4.56 运行mycat服务，逻辑库名称为test，连接用户名为admin，密码123456
主机 192.168.4.53 访问测试配置

1.1 在54（主机c1）和55（主机c2）上面分别创建db1和db2库
mysql> create database db1;   //c1上面创建db1库
mysql> create database db2;   //c2上面创建db2库
 
1.2 54 55 都授权
mysql> grant all on *.* to admin@"%" identified by "123456";
 
1.3 修改数据库的配置文件（54 55）
注意：1代表不区分表名的大小写，0为区分大小写
]# vim /etc/my.cnf
[mysqld]
lower_case_table_names=1      //表名忽略大小写
]# systemctl restart mysqld
 
1.4 在56主机上面安装JDK
]# rpm -qa | grep -i jdk //安装自带的即可
]# yum -y install java-1.8.0-openjdk
 
1.5 在56主机上面安装mycat
]# tar -xvf Mycat-server-1.6-RELEASE-20161028204710-linux.tar.gz
]# mv mycat /usr/local/
]# ls /usr/local/mycat/
bin  catlet  conf  lib  logs  version.txt
]# cd /usr/local/mycat/
]# ./bin/mycat --help
Usage: ./bin/mycat { console | start | stop | restart | status | dump }
 
1.6 修改配置文件
目录结构说明：
bin    mycat命令，如 启动 停止 等
catlet 扩展功能
conf   配置文件
lib    mycat使用的jar
log    mycat启动日志和运行日志
wrapper.log mycat服务启动日志
mycat.log 记录SQL脚本执行后的报错内容

重要配置文件说明：
server.xml 设置连mycat的账号信息
schema.xml 配置mycat的真实库表
rule.xml 定义mycat分片规则

配置标签说明
.. .. 定义连mycat用户信息
.. .. 指定数据节点
.. .. 指定数据库地址及用户信息

查看server.xml配置文件
]# cd conf/
conf]# vim server.xml
       
                //连接mycat服务时使用的用户名 test
                test        
//使用test用户连接mycat用户时使用的密码
                TESTDB    
//连接上mycat服务后，可以看到的库名多个时，使用逗号分隔 （是逻辑上的库名,服务器上没有这个库名，随便取，但要记住）
       
       
                user
                TESTDB
                true        
//定义只读权限，使用定义的user用户连接mycat服务后只有读记录的权限,不写这一行则是可读可写
       
 
修改schema.xml配置文件
conf]# vim schema.xml

auto-sharding-long" />
//travelrecord（逻辑上的，名字不能随便写，一般不动）表分片到数据节点dn1和dn2，dn1和dn2随便取的名字
dn1,dn2" />
mod-long" />

...

//数据节点对应的服务器 name="dn1"名称要与上面的对应 dataHost="c1"写本机主机名，database="db1"存在的数据库名,定义分片使用的库，所在的物理主机，真正存储数据的db1库在物理主机mysql54上

//定义分片使用的库，所在的物理主机，真正存储数据的db2库在物理主机mysql55上

指定c1名称主机对应的ip地址
name="c1" maxCon="1000" minCon="10" balance="0"
                writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">
                        select user()
               
                ="c1" url="192.168.4.54:3306" user="admin"        
                        password="123456">
//访问数据库时，mycat服务连接数据库服务器时使用的用户名和密码
                       
               


指定c2名称主机对应的ip地址(完整复制一对datahost)
                         writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">
                        select user()
               
                                         password="123456">
//访问数据库时，mycat服务连接数据库服务器时使用的用户名和密码
                       
               
       

注意：
rang-long 算法默认需要 3个 dotanode,测试拓扑只有两个dotanode,所以需要修改 autopartition-long.txt文件
#查看 rule.xml 中配置,找到 rang-long 算法的函数对应配置 autopartition-long.txt
        class="io.mycat.route.function.AutoPartitionByLong">
        autopartition-long.txt


编辑配置 注释掉最后一个 datanode
conf]# vim conf/autopartition-long.txt
#默认是三个，我们需要删除最后一个，不然就会报错，说节点少了
#K=1000条记录，M=10000条记录，那么下面三个配置就是0~500万的记录会存在数据库节点1的表中，500万~1000万会存在节点2的表中
0-500M=0
500M-1000M=1
#1000M-1500M=2

mod-long 算法默认需要 3个 dotanode,测试拓扑只有两个dotanode,需要修改 rule.xml 文件,修改count数为2即可
conf]# vim rule.xml

               
                2
       

添加PATH路径
conf]# export PATH=/usr/local/mycat/bin:$PATH
conf]# echo "PATH=/usr/local/mycat/bin:$PATH" >> /etc/profile
conf]# source /etc/profile
conf]# echo $PATH
conf]# which mycat
/usr/local/mycat/bin/mycat
 
启动服务并查看端口
conf]# mycat start
conf]# netstat -antup | grep :8066
tcp6   0   0 :::8066    :::*  LISTEN  29998/java           
conf]# ps -C java
  PID TTY          TIME CMD
29998 ?        00:00:01 java
 
53登陆：
]# mysql -h192.168.4.54 -uadmin -p123456
mysql> show processlist;
+----+-------+---------------+------+---------+------+----------+------------------+
| Id | User  | Host          | db   | Command | Time | State    | Info             |
+----+-------+---------------+------+---------+------+----------+------------------+
|  4 | root  | localhost     | NULL | Sleep   | 3935 |          | NULL             |
|  5 | admin | mysql56:59206 | db1  | Sleep   |   61 |          | NULL             |
|  6 | admin | mysql56:59218 | db1  | Sleep   |    1 |          | NULL             |
|  7 | admin | mysql56:59220 | db1  | Sleep   |   71 |          | NULL             |
|  8 | admin | mysql56:59210 | db1  | Sleep   |   11 |          | NULL             |
|  9 | admin | mysql56:59212 | db1  | Sleep   |   71 |          | NULL             |
| 10 | admin | mysql56:59214 | db1  | Sleep   |   31 |          | NULL             |
| 11 | admin | mysql56:59222 | db1  | Sleep   |   71 |          | NULL             |
| 12 | admin | mysql56:59224 | db1  | Sleep   |   41 |          | NULL             |
| 13 | admin | mysql56:59216 | db1  | Sleep   |   51 |          | NULL             |
| 14 | admin | mysql56:59208 | db1  | Sleep   |   21 |          | NULL             |
| 15 | admin | mysql53:50960 | NULL | Query   |    0 | starting | show processlist |
+----+-------+---------------+------+---------+------+----------+------------------+
 
]# mysql -h192.168.4.55 -uadmin -p123456
mysql> show processlist;
+----+-------+---------------+------+---------+------+----------+------------------+
| Id | User  | Host          | db   | Command | Time | State    | Info             |
+----+-------+---------------+------+---------+------+----------+------------------+
|  4 | root  | localhost     | NULL | Sleep   | 4016 |          | NULL             |
|  5 | admin | mysql56:41962 | db2  | Sleep   |   67 |          | NULL             |
|  6 | admin | mysql56:41964 | db2  | Sleep   |   17 |          | NULL             |
|  7 | admin | mysql56:41954 | db2  | Sleep   |   37 |          | NULL             |
|  8 | admin | mysql56:41956 | db2  | Sleep   |   27 |          | NULL             |
|  9 | admin | mysql56:41958 | db2  | Sleep   |   87 |          | NULL             |
| 10 | admin | mysql56:41966 | db2  | Sleep   |   47 |          | NULL             |
| 11 | admin | mysql56:41968 | db2  | Sleep   |    7 |          | NULL             |
| 12 | admin | mysql56:41950 | db2  | Sleep   |   57 |          | NULL             |
| 13 | admin | mysql56:41960 | db2  | Sleep   |   97 |          | NULL             |
| 14 | admin | mysql56:41952 | db2  | Sleep   |   77 |          | NULL             |
| 15 | admin | mysql53:32892 | NULL | Query   |    0 | starting | show processlist |
+----+-------+---------------+------+---------+------+----------+------------------+
 
56上
conf]# ls /usr/local/mycat/logs/
mycat.log  mycat.pid  wrapper.log    //wrapper.log为错误日志
conf]# ldconfig -v                              //更新加载的模块

1.7 客户端访(53)
命令： mysql -hmycat主机的IP -P端口号 -u用户 -p密码
]# mysql -h192.168.4.56 -P8066 -utest -ptest
mysql> show databases;
+----------+
| DATABASE |
+----------+
| TESTDB   |
+----------+
 
mysql> USE TESTDB;
mysql> show tables;
+------------------+
| Tables in TESTDB |
+------------------+
| company          |
| customer         |
| employee         |
| goods            |
| hotnews          |
| travelrecord     |
+------------------+
 
1.8 客户端测试：
mysql> create table employee(id int not null primary key,name varchar(100),sharding_id int not null);
mysql> DESC employee;
+-------------+--------------+------+-----+---------+-------+
| Field       | Type         | Null | Key | Default | Extra |
+-------------+--------------+------+-----+---------+-------+
| id          | int(11)      | NO   | PRI | NULL    |       |
| name        | varchar(100) | YES  |     | NULL    |       |
| sharding_id | int(11)      | NO   |     | NULL    |       |
+-------------+--------------+------+-----+---------+-------+

mysql> insert into employee(id,name,sharding_id) values(1,"bob",10000);
mysql> insert into employee(id,name,sharding_id) values(1,"lucy",10010);
mysql> select * from  employee;
+----+------+-------------+
| id | name | sharding_id |
+----+------+-------------+
|  1 | bob  |       10000 |
|  1 | lucy |       10010 |
+----+------+-------------+
 
在c1上面查看结果
mysql> use db1;
mysql> show tables;
+---------------+
| Tables_in_db1 |
+---------------+
| employee      |
+---------------+
 
mysql> select * from employee;   //查看结果
+----+------+-------------+
| id | name | sharding_id |
+----+------+-------------+
|  1 | bob  |       10000 |
+----+------+-------------+
 
在c2上面查看结果
mysql> use db2;
mysql> show tables;
+---------------+
| Tables_in_db2 |
+---------------+
| employee      |
+---------------+
 
mysql> select * from employee;   //查看结果
+----+------+-------------+
| id | name | sharding_id |
+----+------+-------------+
|  1 | lucy |       10010 |
+----+------+-------------+

即从53登陆56的数据库将数据写到了54和55.

MyCat支持的10种分片规则

你可能感兴趣的:(32_分库分表概述 配置mycat)

• 大前端|如何突破动态化容器的天花板? 思维导图-java架构 用心去追梦 前端java架构
  突破动态化容器的天花板是现代Web开发和移动应用开发中一个重要的挑战，尤其是在大前端（包括Web端和移动端）领域。动态化容器允许内容在不同设备、屏幕尺寸和网络条件下自适应地显示。为了帮助理解如何克服这一挑战，我们可以构建一个思维导图，该思维导图从Java架构师的角度出发，涵盖了关键技术点和策略。突破动态化容器的天花板│├───概述│├───定义与重要性││└───动态化容器的意义及其对用户体验的影
• 复杂查询导致clickhouse宕机 null.equals() 数据库
  背景最近在研究clickhouse，发现了不少坑，有些坑是官方的无法解决，有些是配置的问题。配置问题及优化的问题就需要我们不断的调整配置以及优化sql。优化sql最主要是理解clickhouse是如何查询的，我们才能找到瓶颈点，找到优化方法。问题在8G内存4核CPU的机器上，单节点的默认配置的clickhouse，保存数据8000W+，一个复杂的多表关联的查询，每次查询到98%的时候，clickh
• Java创建型设计模式-原型模式 程风破～ Java设计模式实战java设计模式原型模式
  提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录1.前言2.原型模式的主要角色2.1原型接口或抽象类2.2具体原型类2.3客户端2.4克隆方法3.原型模式使用场景3.1创建对象是昂贵的3.2对象的变化3.3动态配置3.4减少初始化开销4.原型模式的代码示例4.1原型接口：Shape4.2具体原型（）：Circle4.3客户端（）：ShapeClient4.4上述示例的完整代
• AI编程助手ScriptEcho：革新你的编程学习之旅 前端
  在当今数字时代，编程技能已成为一项越来越重要的技能，无论是想成为专业的软件工程师，还是想提升自身竞争力，学习编程都至关重要。然而，编程学习之路并非一帆风顺，陡峭的学习曲线和大量的实践项目常常让初学者望而却步。许多人卡在繁琐的配置和基础代码搭建上，难以将精力集中在核心业务逻辑的学习和项目实践中。为了解决这一问题，越来越多的人开始寻找更高效的学习工具，而AI写代码工具ScriptEcho正是其中之一，
• php 面试题总结 php面试
  1.phpfpm是什么？fpm是fastcgi进程管理器处理web服务器的请求。优点1.动态进程管理根据负载自动调整进程数量，自动监控回收2.资源利用高效，通过进程池的方式，避免频繁的创建和销毁进程。节约资源，灵活配置，动态静态配置2.cgi和fastcgi区别cgi和fastcgi都是web服务器和php进行通信的协议fastcgi是持久化的进程池处理多个请求，不需要为每个请求单独创建新的进程，
• 2024中国CRM排行榜 数据库算法
  市场概述：随着数字化转型的深入推进，中国CRM（客户关系管理）市场在2024年呈现出蓬勃发展的态势。企业对于提升客户服务质量、优化运营效率的需求持续增长，推动了CRM解决方案的快速发展和创新。评估标准：本次排名主要基于以下几个核心维度进行综合评估：产品功能完整性和创新性技术架构先进性客户满意度和市场口碑本地化服务能力解决方案成熟度生态系统建设情况2024年中国CRM系统排行榜第一梯队：市场领导者1
• 【GIC400】——GIC 简介 tyustyu ARM体系结构与编程GICPPISGISPICPUinterface
  文章目录GIC简介控制器总览GIC中断分类SPIPPISGI中断IDGIC逻辑分块分发器端（distributor）CPU接口端（CPUinterface）寄存器定义参考系列文章【ARMv7-A】——异常与中断【ARMv7-A】——异常中断处理概述【ARMv7-A】——进入和退出异常中断的过程【GIC400】——PLIC，NVIC和GIC中断对比【GIC400】——GIC简介【GIC400】——G
• Windows不用anaconda安装labelImg及bug解决 欢天喜地小姐姐 解决bug技巧bug
  1.Windows不用anaconda安装labelImg：安装labelImg所需环境–打开#安装labelImg所需环pipinstllpyqt5lxml#打开labelImgpythonlabelImg.py2.Windows:‘pip’不是内部或外部命令,也不是可运行的程序或批处理文件2.1原因分析系统环境变量没配置好2.2解决方法1.控制面板\系统和安全\系统”→“高级系统设置”→“高级
• 记录一次RPC服务有损上线的分析过程 京东云开发者 rpcjavasql
  作者：京东零售郭宏宇1.问题背景某应用在启动完提供JSF服务后，短时间内出现了大量的空指针异常。分析日志，发现是服务依赖的藏经阁配置数据未加载完成导致。即所谓的有损上线或者是直接发布，当****应用启动时，service还没加载完，就开始对外提供服务，导致失败调用。关键代码如下数据的初始化加载是通过实现CommandLineRunner接口完成的@ComponentpublicclassLoadS
• RocketMQ源码分析之事务消息分析 小虾米 ~ RocketMQjava-rocketmqrocketmqjava
  rocketMQ事务消息原理概述RocketMQ采用两阶段提交（2PC）的思想来实现事务消息，当事务消息失败或者超时，同时采用补偿的方式处理这个问题。这两个阶段分别为正常事务消息的发送与提交以及事务消息的补偿。我们看看官方文档给的事务消息的流程图：1、事务消息的发送与提交MQProducer将事务消息发送给MQServer（Broker服务器），这时的消息称为半消息，半消息是不能被消费者消费的。当
• 深度学习环境配置指南！（Windows、Mac、Ubuntu全讲解） Charmve #AI学习指导：从入门到进阶软件安装环境配置计算机视觉实战文档详细开放源码cudalinuxgpuanacondaubuntu
  关注“迈微AI研习社”，内容首发于公众号作者：伍天舟、马曾欧、陈信达入门深度学习，很多人经历了从入门到放弃的心酸历程，且千军万马倒在了入门第一道关卡：环境配置问题。俗话说，环境配不对，学习两行泪。如果你正在面临配置环境的痛苦，不管你是Windows用户、Ubuntu用户还是苹果死忠粉，这篇文章都是为你量身定制的。接下来就依次讲下Windows、Mac和Ubuntu的深度学习环境配置问题。一、Win
• Ubuntu 完整卸载 WPS Office (deb包安装版) 小白也有IT梦 ubuntuwpslinux
  1.主程序卸载#使用dpkg卸载WPSOfficesudodpkg-rwps-office#完全清理包括配置文件sudodpkg--purgewps-office2.删除用户配置文件#删除用户目录下的配置文件和缓存rm-rf~/.config/Kingsoftrm-rf~/.cache/Kingsoft3.清理系统残留文件#删除系统中的WPS相关文件sudorm-rf/usr/share/font
• 思科 Packet Tracert 无线简单配置 仓鼠OO 网络配置(思科)网络思科无线
  目录1.网络拓扑2.实验说明3.配置步骤3.1网络基础配置3.2无线AP配置3.3移动终端配置3.3.1.移除移动终端自带的有线网卡，并装上无线网卡3.3.2.移动终端连接无线4.移动终端连接验证1.网络拓扑2.实验说明出口路由器作为dhcp服务器，通过LAN口给内网终端设备下发ip地址；LAN口地址:192.168.10.254/24移动终端可以连接无线AP并且到出口路由器LAN口的网络连通性正
• archlinux安裝手记（Win10+Arch、GPT+UEFI、lvm） weixin_30481087 操作系统运维php
  目录准备工作工具和必要技能分区和挂载分区建立和格式化分区挂载基础安装配置镜像源连接网络安装基础系统建立fstab文件进入系统激活lvm2钩子用户管理设置时区主机名网络配置系统引导系统配置图形界面显卡驱动桌面环境/窗口管理器字体中文本地化声音软件包管理器pacmanAUR和yaourt设备连接触摸板蓝牙NTFS分区U盘和MTP设备其他配置(问题解决)选择grub为第一启动项无法启动图形界面非root
• snmp_exporter组件监控H3c交换机 会飞的土拨鼠呀 ChatGPT实践运维学习笔记运维prometheus网络
  使用snmp_exporter监控H3C交换机是一个常见的场景。snmp_exporter是Prometheus的一个组件，用于通过SNMP协议收集网络设备的指标。以下是配置和使用的详细步骤：1.安装snmp_exporter下载并安装snmp_exporter：从Prometheus官方GitHub仓库下载最新版本的snmp_exporter。解压并安装：tar-xzfsnmp_exporter
• 几个导致DeepFaceLab训练速度较慢的原因 AlphaFinance 多媒体AI技术人工智能python机器学习
  可能有几个原因导致DeepFaceLab训练速度较慢：复杂度：DeepFaceLab的算法和模型较为复杂，需要处理大量数据和计算复杂的数学运算，这可能导致训练速度较慢。硬件配置：DeepFaceLab需要较高的计算机配置才能运行，包括较大的内存、高性能的GPU、快速的存储器等。如果你的计算机配置不够高，可能会导致训练速度较慢。数据量：DeepFaceLab需要大量的训练数据来训练模型，如果你的数据
• JNI Android Bitmap 和 cv::Mat 互相转换安卓手机运行Opencv动态库或普通c++函数配置指南 chezabo6116 android
  JNIAndroidBitmap和cv::Mat互相转换https://blog.csdn.net/tyfwin/article/details/140714946安卓手机运行Opencv动态库或普通c++函数配置指南https://blog.csdn.net/snjs000111/article/details/135067493
• Ruby语言的Web开发 沈霁晨 包罗万象golang开发语言后端
  Ruby语言的Web开发引言随着互联网技术的迅猛发展，Web开发已经成为软件开发领域的重要组成部分。在众多编程语言中，Ruby凭借其简洁优雅的语法、强大的社区支持以及丰富的框架，逐渐在Web开发领域占据了一席之地。本文将探讨Ruby语言在Web开发中的应用，重点介绍RubyonRails框架的特性、优势以及实际案例，帮助读者了解如何使用Ruby进行高效的Web开发。Ruby语言概述Ruby是一种动
• JavaWeb，会话管理的学习 曦月落雨 javaWebjavaweb
  会话管理概述无状态协议无状态就是不保存状态，HTTP就是无状态协议，HTTP协议自身不会对请求和响应之间的通信状态进行保存，也就是说，在HTTP协议这个级别，协议对于发送过的请求或者响应都不做持久化处理。会话管理实现的手段cookie是在客户端保留少量数据的技术，主要通过响应头向客户端响应一些客户端要保留的信息session是在服务器端保留更多的数据的技术，主要通过HttpSession对象保存一
• TiDB系列之：TiDB数据库账号权限，创建TiDB账号，创建数据库，创建表，插入数据 快乐骑行^_^ 数据库TiDB系列TiDB数据库账号权限创建TiDB账号创建数据库创建表插入数据
  TiDB系列之：TiDB数据库账号权限，创建TiDB账号，创建数据库，创建表，插入数据一、TiDB账号权限二、创建TiDB账号三、创建数据库，创建表，插入数据一、TiDB账号权限TiDB账号权限可以分为系统级权限和对象级权限两种，具体如下：系统级权限：ALLPRIVILEGES：拥有所有权限。CREATEUSER：创建用户。DROPUSER：删除用户。RELOAD：重新加载系统配置。SUPER：超
• e9000刀片服务器文档,华为E9000融合架构刀片服务器介绍.pdf 大苏牙 e9000刀片服务器文档
  华为E9000融合架构刀片服务器培训Luoweitao@H201502目录ClicktoaddTitle1市场概述及定位ClicktoaddTitle2产品规格及亮点3产品对比4成功案例ClicktoaddTitle5订购指南ClicktoaddTitle6如何获取资源ClicktoaddTitle12014Q4连续6个季度全球第四2014Q4全球服务器发货量TOP1070100%万台6080%5
• 华为e9000服务器pxe安装系统,E9000安装与配置.ppt 独角瘦
  E9000安装与配置资料本节主要介绍URP8100产品的市场定位，组成部分及业务能力、组网能力、集成度、可靠性、安全性、可维护性等特点。如果CX910安装在E1/E2槽位，Base平面将会失效*******本节主要介绍URP8100产品的市场定位，组成部分及业务能力、组网能力、集成度、可靠性、安全性、可维护性等特点。3.4查看Base/Fabric平面端口对应关系displayport-conne
• Node.js 模块化编程实践：管理大型项目和依赖 AI天才研究院 计算AI大模型企业级应用开发实战大数据AI人工智能javapythonjavascriptkotlingolang架构人工智能大厂程序员硅基计算碳基计算认知计算生物计算深度学习神经网络大数据AIGCAGILLM系统架构设计软件哲学Agent程序员实现财富自由
  《Node.js模块化编程实践：管理大型项目和依赖》关键词：Node.js、模块化编程、大型项目、依赖管理、包管理工具、性能优化、测试与调试、实战项目摘要：本文将深入探讨Node.js模块化编程实践，从基础知识和模块化概述开始，逐步讲解如何管理大型项目和依赖。我们将详细介绍Node.js的模块加载机制、包管理工具、大型项目构建与优化、测试与调试等关键点。通过一系列实战项目案例，读者将掌握Node.
• 文档图像矫正任务的前沿进展：引入Transformer框架、极坐标的思路
  在《文档数字化采集与智能处理：图像弯曲矫正技术概述》一文中，我们介绍了文档图像矫正技术的发展沿革与代表性方案。随着文档智能处理的需求逐步升级，文档图像去畸变技术也在不断探索新的可能性。今天，我们将讨论近年来文档图像矫正任务的前沿进展，分享一些我们正在关注的方向，欢迎与我们共同探讨、交流进步。Transformer架构下的文档矫正探索代表性工作DocTr:DocumentImageTransform
• 【YashanDB知识库】重装新库及元数据和数据导出导入指导 数据库
  本文内容来自YashanDB官网，原文内容请见https://www.yashandb.com/newsinfo/7253741.html?templateId=171...开始本文操作之前默认已经部署有3mn3cn3-3dn的yashan分布式数据库，并且已经配置好环境变量，开始操作之前请先停止所有业务。从旧库导出数据创建目录$cd~$mkdir-p/data/yashan/save\_data
• Apache DolphinScheduler 限制秒级别的定时调度 数据库
  背景ApacheDolphinScheduler定时任务配置采用的7位Crontab表达式，分别对应秒、分、时、月天、月、周天、年。在团队日常开发工作中，工作流的定时调度一般不会细化到秒级别。但历史上出现过因配置的疏忽大意而产生故障时间，如应该配置每分钟执行的工作流被配置长了每秒执行，造成短时间内产生大量工作流实例，对ApacheDolphinScheduler服务可用性和提交任务的Hadoop集
• logback-spring.xml配置 Mr.4567 logbackspringxml
  -->logbackdebug${CONSOLE_LOG_PATTERN}UTF-8${log.path}/log_debug.log%d{yyyy-MM-ddHH:mm:ss.SSS}[%thread]%-5level%logger{50}-%msg%nUTF-8-->-->-->${log.path}/debug/log-debug-%d{yyyy-MM-dd}.%i.log100MB72GB
• 自动化测试框架：DrissionPage 研创通之逍遥峰 开源工具自动化爬虫
  一、工具概述DrissionPage是一个基于python的网页自动化工具。它既能控制浏览器，也能收发数据包，还能把两者合而为一。可兼顾浏览器自动化的便利性和requests的高效率。它功能强大，内置无数人性化设计和便捷功能。它的语法简洁而优雅，代码量少，对新手友好。支持Windows、Linux和Mac系统，满足不同用户的需求；需要Python3.6或更高版本，确保了代码的现代性和兼容性；支持所
• 基于飞腾平台的Sqoop的安装配置
  【写在前面】飞腾开发者平台是基于飞腾自身强大的技术基础和开放能力，聚合行业内优秀资源而打造的。该平台覆盖了操作系统、算法、数据库、安全、平台工具、虚拟化、存储、网络、固件等多个前沿技术领域，包含了应用使能套件、软件仓库、软件支持、软件适配认证四大板块，旨在共享尖端技术，为开发者提供一个涵盖多领域的开发平台和工具套件。点击这里开始你的技术升级之旅吧本文分享至飞腾开发者平台《飞腾平台Sqoop1.99
• 基于飞腾平台的Hive的安装配置 后端hive大数据数据库运维
  【写在前面】飞腾开发者平台是基于飞腾自身强大的技术基础和开放能力，聚合行业内优秀资源而打造的。该平台覆盖了操作系统、算法、数据库、安全、平台工具、虚拟化、存储、网络、固件等多个前沿技术领域，包含了应用使能套件、软件仓库、软件支持、软件适配认证四大板块，旨在共享尖端技术，为开发者提供一个涵盖多领域的开发平台和工具套件。点击这里开始你的技术升级之旅吧本文分享至飞腾开发者平台《飞腾平台Hive3.1.2
• Java 并发包之线程池和原子计数 lijingyao8206 Java计数ThreadPool并发包java线程池
  对于大数据量关联的业务处理逻辑，比较直接的想法就是用JDK提供的并发包去解决多线程情况下的业务数据处理。线程池可以提供很好的管理线程的方式，并且可以提高线程利用率，并发包中的原子计数在多线程的情况下可以让我们避免去写一些同步代码。     这里就先把jdk并发包中的线程池处理器ThreadPoolExecutor 以原子计数类AomicInteger 和倒数计时锁C
• java编程思想 抽象类和接口 百合不是茶 java抽象类接口
  接口c++对接口和内部类只有简介的支持,但在java中有队这些类的直接支持   1 ,抽象类 :  如果一个类包含一个或多个抽象方法,该类必须限定为抽象类(否者编译器报错)   抽象方法 : 在方法中仅有声明而没有方法体    package com.wj.Interface;
• [房地产与大数据]房地产数据挖掘系统 comsci 数据挖掘
         随着一个关键核心技术的突破,我们已经是独立自主的开发某些先进模块,但是要完全实现,还需要一定的时间...        所以,除了代码工作以外,我们还需要关心一下非技术领域的事件..比如说房地产     &nb
• 数组队列总结 沐刃青蛟 数组队列
        数组队列是一种大小可以改变，类型没有定死的类似数组的工具。不过与数组相比，它更具有灵活性。因为它不但不用担心越界问题，而且因为泛型（类似c++中模板的东西）的存在而支持各种类型。      以下是数组队列的功能实现代码：   import List.Student; public class
• Oracle存储过程无法编译的解决方法 IT独行者 oracle存储过程　
  今天同事修改Oracle存储过程又导致2个过程无法被编译，流程规范上的东西，Dave 这里不多说，看看怎么解决问题。   1.     查看无效对象 XEZF@xezf(qs-xezf-db1)> select object_name,object_type,status from all_objects where status='IN
• 重装系统之后oracle恢复 文强chu oracle
  前几天正在使用电脑，没有暂停oracle的各种服务。 突然win8.1系统奔溃，无法修复，开机时系统 提示正在搜集错误信息，然后再开机，再提示的无限循环中。 无耐我拿出系统u盘 准备重装系统，没想到竟然无法从u盘引导成功。 晚上到外面早了一家修电脑店，让人家给装了个系统，并且那哥们在我没反应过来的时候， 直接把我的c盘给格式化了 并且清理了注册表，再装系统。 然后的结果就是我的oracl
• python学习二（ 一些基础语法） 小桔子 pthon基础语法
  紧接着把！昨天没看继续看django 官方教程，学了下python的基本语法 与c类语言还是有些小差别： 1.ptyhon的源文件以UTF-8编码格式 2. /   除 结果浮点型 //  除 结果整形 %   除 取余数 *   乘 **  乘方 eg 5**2 结果是5的2次方25 _&
• svn 常用命令 aichenglong SVN版本回退
  1 svn回退版本   1)在window中选择log,根据想要回退的内容,选择revert this version或revert chanages from this version 两者的区别:   revert this version:表示回退到当前版本(该版本后的版本全部作废)   revert chanages from this versio
• 某小公司面试归来 alafqq 面试
  先填单子，还要写笔试题，我以时间为急，拒绝了它。。时间宝贵。 老拿这些对付毕业生的东东来吓唬我。。 面试官很刁难，问了几个问题，记录下； 1，包的范围。。。public,private,protect. --悲剧了 2，hashcode方法和equals方法的区别。谁覆盖谁.结果，他说我说反了。 3，最恶心的一道题，抽象类继承抽象类吗？（察，一般它都是被继承的啊） 4，stru
• 动态数组的存储速度比较 集合框架 百合不是茶 集合框架
  集合框架： 自定义数据结构(增删改查等) package 数组; /** * 创建动态数组 * @author 百合 * */ public class ArrayDemo{ //定义一个数组来存放数据 String[] src = new String[0]; /** * 增加元素加入容器 * @param s要加入容器
• 用JS实现一个JS对象，对象里有两个属性一个方法 bijian1013 js对象
  <html> <head> </head> <body> 用js代码实现一个js对象，对象里有两个属性，一个方法 </body> <script> var obj={a:'1234567',b:'bbbbbbbbbb',c:function(x){
• 探索JUnit4扩展：使用Rule bijian1013 java单元测试JUnitRule
          在上一篇文章中，讨论了使用Runner扩展JUnit4的方式，即直接修改Test Runner的实现(BlockJUnit4ClassRunner)。但这种方法显然不便于灵活地添加或删除扩展功能。下面将使用JUnit4.7才开始引入的扩展方式——Rule来实现相同的扩展功能。 1. Rule       &n
• [Gson一]非泛型POJO对象的反序列化 bit1129 POJO
  当要将JSON数据串反序列化自身为非泛型的POJO时，使用Gson.fromJson(String, Class)方法。自身为非泛型的POJO的包括两种： 1. POJO对象不包含任何泛型的字段 2. POJO对象包含泛型字段，例如泛型集合或者泛型类 Data类 a.不是泛型类， b.Data中的集合List和Map都是泛型的 c.Data中不包含其它的POJO    
• 【Kakfa五】Kafka Producer和Consumer基本使用 bit1129 kafka
  0.Kafka服务器的配置 一个Broker， 一个Topic Topic中只有一个Partition（）   1. Producer： package kafka.examples.producers; import kafka.producer.KeyedMessage; import kafka.javaapi.producer.Producer; impor
• lsyncd实时同步搭建指南——取代rsync+inotify ronin47
  1. 几大实时同步工具比较 1.1 inotify + rsync 最近一直在寻求生产服务服务器上的同步替代方案，原先使用的是 inotify + rsync，但随着文件数量的增大到100W+，目录下的文件列表就达20M，在网络状况不佳或者限速的情况下，变更的文件可能10来个才几M，却因此要发送的文件列表就达20M，严重减低的带宽的使用效率以及同步效率；更为要紧的是，加入inotify
• java-9. 判断整数序列是不是二元查找树的后序遍历结果 bylijinnan java
  public class IsBinTreePostTraverse{ static boolean isBSTPostOrder(int[] a){ if(a==null){ return false; } /*1.只有一个结点时，肯定是查找树 *2.只有两个结点时，肯定是查找树。例如{5,6}对应的BST是 6 {6,5}对应的BST是
• MySQL的sum函数返回的类型 bylijinnan javaspringsqlmysqljdbc
  今天项目切换数据库时，出错 访问数据库的代码大概是这样： String sql = "select sum(number) as sumNumberOfOneDay from tableName"; List<Map> rows = getJdbcTemplate().queryForList(sql); for (Map row : rows
• java设计模式之单例模式 chicony java设计模式
  在阎宏博士的《JAVA与模式》一书中开头是这样描述单例模式的： 　　作为对象的创建模式，单例模式确保某一个类只有一个实例，而且自行实例化并向整个系统提供这个实例。这个类称为单例类。 单例模式的结构 　　单例模式的特点： 单例类只能有一个实例。 单例类必须自己创建自己的唯一实例。 单例类必须给所有其他对象提供这一实例。 　　饿汉式单例类   publ
• javascript取当月最后一天 ctrain JavaScript
  <!--javascript取当月最后一天--> <script language=javascript> var current = new Date(); var year = current.getYear(); var month = current.getMonth(); showMonthLastDay(year, mont
• linux tune2fs命令详解 daizj linuxtune2fs查看系统文件块信息
  一.简介： tune2fs是调整和查看ext2/ext3文件系统的文件系统参数，Windows下面如果出现意外断电死机情况，下次开机一般都会出现系统自检。Linux系统下面也有文件系统自检，而且是可以通过tune2fs命令，自行定义自检周期及方式。 二.用法： Usage: tune2fs [-c max_mounts_count] [-e errors_behavior] [-g grou
• 做有中国特色的程序员 dcj3sjt126com 程序员
    从出版业说起 网络作品排到靠前的，都不会太难看，一般人不爱看某部作品也是因为不喜欢这个类型，而此人也不会全不喜欢这些网络作品。究其原因，是因为网络作品都是让人先白看的，看的好了才出了头。而纸质作品就不一定了，排行榜靠前的，有好作品，也有垃圾。 许多大牛都是写了博客，后来出了书。这些书也都不次，可能有人让为不好，是因为技术书不像小说，小说在读故事，技术书是在学知识或温习知识，有
• Android：TextView属性大全 dcj3sjt126com textview
  android:autoLink    设置是否当文本为URL链接/email/电话号码/map时，文本显示为可点击的链接。可选值(none/web/email/phone/map/all)  android:autoText    如果设置，将自动执行输入值的拼写纠正。此处无效果，在显示输入法并输
• tomcat虚拟目录安装及其配置 eksliang tomcat配置说明tomca部署web应用tomcat虚拟目录安装
  转载请出自出处：http://eksliang.iteye.com/blog/2097184 1.-------------------------------------------tomcat  目录结构 config：存放tomcat的配置文件 temp  ：存放tomcat跑起来后存放临时文件用的 work   ： 当第一次访问应用中的jsp
• 浅谈：APP有哪些常被黑客利用的安全漏洞 gg163 APP
  首先，说到APP的安全漏洞，身为程序猿的大家应该不陌生；如果抛开安卓自身开源的问题的话，其主要产生的原因就是开发过程中疏忽或者代码不严谨引起的。但这些责任也不能怪在程序猿头上，有时会因为BOSS时间催得紧等很多可观原因。由国内移动应用安全检测团队爱内测（ineice.com）的CTO给我们浅谈关于Android 系统的开源设计以及生态环境。 1. 应用反编译漏洞：APK 包非常容易被反编译成可读
• C#根据网址生成静态页面 hvt Web.netC#asp.nethovertree
  HoverTree开源项目中HoverTreeWeb.HVTPanel的Index.aspx文件是后台管理的首页。包含生成留言板首页，以及显示用户名，退出等功能。根据网址生成页面的方法：   bool CreateHtmlFile(string url, string path) { //http://keleyi.com/a/bjae/3d10wfax.htm stri
• SVG 教程 （一） 天梯梦 svg
  SVG 简介 SVG 是使用 XML 来描述二维图形和绘图程序的语言。 学习之前应具备的基础知识： 继续学习之前，你应该对以下内容有基本的了解： HTML XML 基础 如果希望首先学习这些内容，请在本站的首页选择相应的教程。 什么是SVG？ SVG 指可伸缩矢量图形 (Scalable Vector Graphics) SVG 用来定义用于网络的基于矢量
• 一个简单的java栈 luyulong java数据结构栈
  public class MyStack { private long[] arr; private int top; public MyStack() { arr = new long[10]; top = -1; } public MyStack(int maxsize) { arr = new long[maxsize]; top
• 基础数据结构和算法八：Binary search sunwinner AlgorithmBinary search
  Binary search needs an ordered array so that it can use array indexing to dramatically reduce the number of compares required for each search, using the classic and venerable binary search algori
• 12个C语言面试题，涉及指针、进程、运算、结构体、函数、内存，看看你能做出几个！ 刘星宇 c面试
  12个C语言面试题，涉及指针、进程、运算、结构体、函数、内存，看看你能做出几个！ 1.gets()函数 问：请找出下面代码里的问题： #include<stdio.h> int main(void) {     char buff[10];     memset(buff,0,sizeof(buff));
• ITeye 7月技术图书有奖试读获奖名单公布 ITeye管理员 活动ITeye试读
  ITeye携手人民邮电出版社图灵教育共同举办的7月技术图书有奖试读活动已圆满结束，非常感谢广大用户对本次活动的关注与参与。 7月试读活动回顾： http://webmaster.iteye.com/blog/2092746 本次技术图书试读活动的优秀奖获奖名单及相应作品如下（优秀文章有很多，但名额有限，没获奖并不代表不优秀）： 《Java性能优化权威指南》

按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他

首页 - 关于我们 - 站内搜索 - Sitemap - 侵权投诉

版权所有 IT知识库 CopyRight © 2000-2050 E-COM-NET.COM , All Rights Reserved.