hehuang139
hehuang139

mycat-概述

特性

能做什么不能做什么？

  • 语法支持
    • 不支持DUAL虚拟表
      • mycat会认为是一个实际表
    • 函数/存储过程支持程度
      • 内置函数支持
      • 自定义函数支持有限，不建议使用
        • 结论尽量不要使用，和实际结果差异比较大，需要考虑很多场景才能使用正确
        • 执行效果说明
          • 函数内部定义的sql只会本数据节点中执行，不会经过数据库中间件进行路由
            • 对于count这种语句，执行出来的结果必定是错误的
          • 如果使用select self_func();可以执行，但是从执行的效果上看是随机分配到一个数据分片上执行，是错误的
          • select self_func() from single_table 这种是可以使用，只要函数存在单片表所在的数据库中
          • select self_func() from sharding_table 这种情况
            • 如果函数都存在执行不会有问题，只是执行不会问题，但是执行的结果，要看具体的函数执行的结果
            • 如果函数没有都存在，则执行会报错
    • join支持
      • 全局表
        • 数据同步
          • 对全局表的操作，会到具体的数据节点上执行
          • 单独对单一库操作不会同步到其他库，但是如果每个库都有数据会在全局表查询中也会体现，否则不体现
        • 支持分片表join 最后会合并结果集
        • 支持单库表join
      • 分片表
        • 指定一个冗余的、相同的分片键
          • 这样rule规则只需要一个，否则每个表都需要配置一个rule规则
            • rule需要指定column，sharding_id相同，就能保证数据落到相同分片上
        • 分片键设置方式
          • 通过业务代码自己指定分片键，业务代码需要注意分片键设置
          • 通过平台自动设置 不建议，因为如果分片策略有很多中的情况，不是很好设置
        • 支持分片表join 但必须在相同分片策略，关联查询可以正常查询，从结果上看是做了结果集的合并
        • 不支持笛卡尔积
          • 不会做跨库笛卡尔积
          • 各自笛卡尔然后合并
        • 不支持单片表join,只会查询到部分数据，所以查询需要
      • e-r关系表
        • 目前看不太需要e-r分片表
        • 只需要一般的分片表即可
        • 优点，只需要设置主表的分片键，而对应子表的分片键只需要通过关联关系来配置
      • 拆分策略
        • in的方式还是？
    • 存储过程支持
    • 聚合运算
    • insert into … select 支持有限，不建议使用
      • 部分支持，通过hint，但是支持select的结果都在一个分片内
      • /!mycat: sql=select * from test where test_id = 2/insert into test select * from test_temp ;
      • 同时要求了解分片的原则
  • 全局索引
  • 分库分表
  • 注释
    • 解决不支持的sql如insert into …select
    • 存储过程调用
    • 同一个实例内的跨库关联查询，如用户库和平台库内的表关联
  • 分布式事务
  • 不支持语法
    • 复杂子查询 不建议使用，建议拆分sql
    • 跨库join
      • 分片表笛卡尔积
      • 单片表和分片表
      • 不同分片的分片表关联查询
      • 不同分片单片表
    • 自定义函数 部分支持，不建议使用，只有部分场景支持
    • 不支持from dual
    • insert
      • insert into …select 部分支持，不建议使用
      • 分片表必须insert字段中包含分片键
      • 多行插入 insert into tab_a(c1,c2) values(v1,v2),(v11,v21)… ##针对的是ER分表的从表无法批量插入
    • update
      • 不能更新分片字段，只能删除后新增
      • 多表更新，一般用不到

最佳实践

  • 分片策略
    • 大表分片
      • 数据量操作2000w为准
      • 管理紧密的表需要一起分片，即使数据不大
        • 这个联系讲的是业务层面的联系
      • 多个关联
        • 通过一个外部的sharding_id
        • 手动设置sharding_id
    • 单片表
      • 小表不分片，且和分片表关联不大，且不符合全局表场景
        • 关系指业务层面的关系
    • 全局表
      • 变化不大的配置表，
      • 常规意义上的配置表规格表，如区域，主数据之类
    • e-r表
      • 目前看并没有实际使用的意义
      • 如果要用就是可以以配置替换分片策略
  • 数据库创建
    • 物理数据库
      • schema也携带上分片信息和dn一致
    • dataHost
      • 数据库名使用ip和端口命名
        • dh_ip_port
    • dataNode
      • 表达物理概念
        • dn_ip_port_schema
      • 表达中心概念 推荐
        • center01

方案

  • 使用er表还是分片表？

运维监控

部署集成

  • 数据扩容方案
    • 分片算法
      • 一致性hash
        • 有现成的数据迁移方案
          • io.mycat.util.rehasher.RehashLauncher
      • 无序迁移方案

未完待续…

你可能感兴趣的:(mycat)

  • 从入门到精通：Spring MVC的矩阵参数、数据预处理与HTTP缓存实战 Solomon_肖哥弹架构 springmvcjavaSpringMVC
    肖哥弹架构跟大家“弹弹”SpringMVC设计与实战应用，需要代码关注欢迎点赞，点赞，点赞。关注公号Solomon肖哥弹架构获取更多精彩内容历史热点文章MyCat应用实战：分布式数据库中间件的实践与优化（篇幅一）图解深度剖析：MyCat架构设计与组件协同（篇幅二）一个项目代码讲清楚DO/PO/BO/AO/E/DTO/DAO/POJO/VO写代码总被Dis：5个项目案例带你掌握SOLID技巧,代码有
  • MySql读写分离部署（一主一从,双主双从,Mycat） PH = 7 mysql数据库
    参考资料：参考视频参考博客视频参考资料及安装包：https://pan.baidu.com/s/1xT_WokN_xlRv0h06b6F3yg提取码:aag3Mysql主从复制部署指南（一主一从）NotePad++编辑Linux服务器文档Mysql高版本（8.0及以后）Linux安装Mysql分库分表（基于Mycat）的基本部署MySQL垂直分库（基于MyCat）
  • mysql分区表 咸鱼爱吃橙子 mysql数据库
    背景最近遇到一个接口查询很慢超时了，界面数据无法显示出来。分析后，发现是因为MySQL中有张表的数据量很大（1500万）导致查询很慢。除了优化索引（如联合索引、覆盖索引）、归档历史数据、引入缓存、垂直拆分（将大表中的字段按访问频率拆分成多个小表，例如：高频访问的字段放在主表中，不常访问的大字段（如JSON、TEXT类型）放在辅助表中）、水平拆分（使用Sharding-JDBC或MyCat等中间件实
  • Mysql水平分表（基于Mycat）及常用分片规则 PH = 7 mysql数据库
    参考资料：参考视频参考博客视频资料:链接:https://pan.baidu.com/s/1xT_WokN_xlRv0h06b6F3yg提取码:aag3Mysql分库分表（基于Mycat）的基本部署MySQL垂直分库（基于MyCat）概述：本例是在垂直分库的基础上，又作的水平分库，参照前文也可以单独拿出来做水平分库水平分表：水平分表相对于垂直分库，就多了个分片规则，即按什么规则进行分表如上，要对t
  • NotePad++编辑Linux服务器文档 PH = 7 服务器运维
    参考资料：参考文章相关插件链接：链接:https://pan.baidu.com/s/1PBX9NY0pPz0sBqtfNxngXA提取码:r3t7概要：通常简单的文件编辑，可以直接在Linux服务器，或客户端利用VIM命令编辑，编辑即可但是过于复杂的文件，比如Mycat的XML编辑，就很不方便，需要利用Notepad++的远程编辑功能插件的离线安装使用：因为Notepad++的插件，在线安装很容
  • 实战！用Redisson来实现分布式锁，真香！ 公众号-芋道源码 分布式中间件java数据库redis
    点击上方“芋道源码”，选择“设为星标”管她前浪，还是后浪？能浪的浪，才是好浪！每天10:33更新文章，每天掉亿点点头发...源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT源码解析作业调度中间件Elastic-Job源码解析分布式事务
  • MySQL高可用 2501_91112123 adb
    目录一、引言二、MySQL高可用核心技术2.1数据复制（Replication）2.2故障检测与自动切换（Failover）三、主流高可用方案对比与选型3.1主从复制（Master-Slave）3.2主主复制（Master-Master）3.3多节点集群（GroupReplication）3.4分布式中间件方案（如MyCat、ProxySQL）四、实战案例：基于MHA的主从高可用搭建4.1环境准备
  • Mycat中间件 只会copy的搬运工 中间件数据库
    一、案例目标（1）了解Mycat提供的读写分离功能。（2）了解MySQL数据库的主从架构。（3）构建以Mycat为中间件的读写分离数据库集群。二、案例分析1.规划节点使用Mycat作为数据库中间件服务构建读写分离的数据库集群。IP主机名节点192.168.200.70mycatMycat中间件服务节点192.168.200.80db1MariaDB数据库集群主节点192.168.200.90db2
  • 大文件上传：秒传、断点续传、分片上传 公众号-芋道源码 中间件java分布式androidredis
    点击上方“芋道源码”，选择“设为星标”管她前浪，还是后浪？能浪的浪，才是好浪！每天10:33更新文章，每天掉亿点点头发...源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT源码解析作业调度中间件Elastic-Job源码解析分布式事务
  • 分库分表实战-- Mycat实战 Captain Leo MySQL数据库分布式方案学习笔记学习Mycat分库分表架构MySQL
    Mycat实战Mycat简介Mycat是一个实现了MySQL协议的Server，前端用户可以把它看作是一个数据库代理，用MySQL客户端工具和命令行访问，而其后端可以用MySQL原生协议或JDBC协议与多个MySQL服务器通信，其核心功能是分库分表和读写分离，即将一个大表水平分割为N个小表，存储在后端MySQL服务器里或者其他数据库里。对于DBA来说，可以这么理解MycatMycat就是MySQL
  • SpringBoot和微服务学习记录Day1 小斌的Debug日记 springboot微服务学习
    分布式架构为了解决大量的用户请求，需要多台服务器，为处理某些请求将一些服务器划分为一个集群，通过一种技术来处理集群的请求典型应用：nginx：Tomcat集群Redis：哨兵模式MySQL：mycat微服务微小的服务，是针对于某一个功能或模块的小功能，单独部署微服务架构原来写的是项目都是单体架构，在架构设计中，如果用户请求量很大，某些功能频繁使用建议将功能拆分为不同模块，也就是不同的微服务Spri
  • Mycat与Sharding-JDBC的区别：深入对比与分析 一碗黄焖鸡三碗米饭 Java知识全面解析javajvm分库分表mycatSharding-JDBCMySQL
    目录Mycat与Sharding-JDBC的区别：深入对比与分析1.Mycat和Sharding-JDBC概述1.1什么是Mycat？1.2什么是Sharding-JDBC？2.设计理念的区别2.1Mycat的架构设计2.2Sharding-JDBC的架构设计3.功能对比3.1支持的分库分表策略Mycat的分库分表策略Sharding-JDBC的分库分表策略对比：3.2读写分离Mycat的读写分离
  • go mysql 中间件_GitHub - wushilong/go-sharding: Mysql 分库分表中间件 网络安全技术联盟 gomysql中间件
    Go-Sharding简介数据库分库分表中间件，尽可能兼容ShardingSphere的golang实现，基于小米Gaea魔改，但是路由算法支持ShardingSphere的inline表达式风格，而不是Mycat/kingshard这类晦涩而又不灵活的配置，移除多租户功能(配置太复杂了，部署多套即可)为什么造这个轮子尝试了ShardingSphereProxy,其有着糟糕的insert性能和CP
  • Mycat 与分布式 ID 生成方案 今天你慧了码码码码码码码码码码 分布式
    Mycat与分布式ID生成方案1.Mycat简介Mycat是一个开源的分布式数据库中间件，主要用于解决数据库分库分表、读写分离、负载均衡等问题。它支持MySQL协议，可以像使用单机数据库一样使用分布式数据库。主要功能：分库分表：将数据分散到多个数据库实例中。读写分离：将读操作和写操作分发到不同的数据库节点。负载均衡：均衡分配数据库请求，提高系统性能。分布式事务：支持分布式事务管理。2.分布式ID生
  • Sharding-Sphere vs Mycat vs TiDB 木一番 分库分表TiDB
    强烈推荐TiDB，这是未来大中型公司的数据库，一定的NewSQL优点：传统数据库面向磁盘设计，基于内存的存储管理及并发控制，NewSQL数据库那般高效利用中间件模式SQL解析、执行计划优化等在中间件与数据库中重复工作，效率相比较低分布式事务相比于XA进行了优化，性能更高基于paxos（或Raft）协议的多副本，实现了真正的高可用、高可靠天生支持数据分片，数据的迁移、扩容都是自动化的，大大减轻了DB
  • 数据库必知必会系列：数据库分片与分布式事务 AI天才研究院 AI大模型企业级应用开发实战大数据人工智能语言模型JavaPython架构设计
    文章目录1.背景介绍分库分表分片集群分布式事务数据迁移2.核心概念与联系主从复制活动复制CAP原则BASE理论3.核心算法原理和具体操作步骤以及数学模型公式详细讲解分库分表水平分表垂直分库分片集群垂直拆分水平切分垂直切分水平拆分根据主键范围根据业务字段划分分布式事务两阶段提交协议三阶段提交协议可靠消息最终一致性ACID四要素4.具体代码实例和详细解释说明MyCat配置文件server.xml文件s
  • mycat 分布式mysql_MySQL 部署分布式架构 MyCAT (五) weixin_39782573 mycat分布式mysql
    分片(水平拆分)4.全局表业务使用场景：如果你的业务中有些数据类似于数据字典，比如配置文件的配置，常用业务的配置或者数据量不大很少变动的表，这些表往往不是特别大，而且大部分的业务场景都会用到，那么这种表适合于Mycat全局表，无须对数据进行切分，要在所有的分片上保存一份数据即可，Mycat在Join操作中，业务表与全局表进行Join聚合会优先选择相同分片内的全局表join，避免跨库Join，在进行
  • MySQL的集群配置和读写分离配置 lqg_zone 数据库相关mysql数据库
    MySQL重点概念介绍分布式集群方案主从节点复制分库分表mycat读写分离参数配置MySQL主节点MySQL从节点实例讲演分布式部署性能演示独立mysql对比主从复制+读写分离参考资料：浅谈mysql集群浅谈mysql集群_mysql不同集群连接-CSDN博客MySQLReplication主从复制全方位解决方案MySQLReplication主从复制全方位解决方案-惨绿少年-博客园MySQL主从
  • 使用mycat实现mysql的分表功能 qiaosaifei mysql数据库
    需求：项目中需要对用户的操作日志进行记录，现在数据库中日志量过大（超过1000W），导致数据查询速度过慢，根据客户需求将日志表进行拆分。一、mycat安装及主从同步配置参考博客：https://blog.csdn.net/qiaosaifei/article/details/121424494?spm=1001.2014.3001.5502二、mycat实现单库分表参考博客:https://blo
  • centos8 stream 部署mycat2.0实现读写分离主从(多主)自动切换 kylin-运维 centos8streammycat2.0运维
    内容有时间整理上传读写分离参考http://blog.ws.baby/posts/msb/mysql/mysql-read-write-separation/#mycat-2-主从自动切换需修改内容vim/usr/local/mycat/conf/clusters/master_slave.cluster.json改18“switchType”:“NOT_SWITCH”为“switchType”:
  • mycat和mysql 沐漜 Java学习zookeeper
    MyCat是数据库中间件，支持数据库集群，提供高可用性的数据分片集群。可以管理多个机器上的数据库组成的集群。MyCat分片：海量数据存储的解决方案。由该中间件将不同的逻辑分片(逻辑分片对应不同的数据库)进行组装。MyCat分片：什么是分片：简单的说，就是指通过某种特定的条件，将我们存放在同一个数据库中的数据分散存放到多个数据库（主机）上面，以达到分散单台设备负载的效果。数据的切片（sharding
  • Mycat2使用教程 晨晨OvO 工具使用教程mycat2
    运行环境框架包下载地址：mycat2-install-template-1.20.zip运行包下载地址：mycat2-1.21-release-jar-with-dependencies.jar说明解压运行环境框架包，将运行包放到mycat的lib目录下配置数据源打开conf/datasources/prototypeDs.datasource.json，修改password和url{"dbTyp
  • mycat配置双主双从实现mysql读写分离 Zozzoooz mycat读写分离mysql数据库javadocker
    docker容器下mysql主从配置mycat配置双主双从实现mysql读写分离拉取mysql5.7dockerpullmysql:5.7运行mysql镜像mysqlM1主容器：dockerrun-p3301:3306--namemysql-master1-v/usr/local/mysql-master1/conf:/etc/mysql/conf.d-v/usr/local/mysql-mast
  • MHA+MYCAT 高可用架构 第九系艾文 linuxLinuxtools服务器数据库mycatmhalinux
    架构图如下：本次是4服务器架构如下环境：centos7.2x64mariadb10.4MHA5.7MyCat1.6.7IP规划IP功能10.1.41.166VIP10.1.41.167master,mycat,mha.node10.1.41.168slave(master),mha.node10.1.41.165slave,mycat,keepalived10.1.41.169slave,myca
  • mycat双主高可用架构部署-MySQL5.7环境部署第一台 龙哥·三年风水 MySQL5.7.36分布式高可用架构mysql分布式
    MySQL5.7服务器IP是192.168.31.209及192.168.31.2101、192.168.31.209:3307实例部署a、配置文件mkdir-p/data/mysql/mysql3307/{data,logs}#创建MySQL数据及日志目录vi/data/mysql/mysql3307/my3307.cnf#配置文件整理[client]#password=your_passwor
  • 中间件的学习理解总结 DCDDDDcccc 中间件学习
    目录一、定义与作用二、主要类型数据库中间件远程过程调用中间件面向消息的中间件事务处理中间件三、特点与优势独立性高效性可扩展性可靠性四、应用场景企业应用集成分布式系统电子商务移动应用开发五、数据库中间件功能细节：应用优势：六、远程过程调用中间件功能细节：应用优势：七、面向消息的中间件功能细节：应用优势：八、事务处理中间件功能细节：应用优势：数据库中间件MyCat：ShardingSphere：远程过
  • 32次8.21（学习playbook-roles，脚本创建数据库和表，mycat读写分离） 祎安139 运维数据库
    1.roles目录介绍files：⽤来存放由copy模块或script模块调⽤的⽂件。tasks：⾄少有⼀个main.yml⽂件，定义各tasks。handlers:有⼀个main.yml⽂件，定义各handlers。templates：⽤来存放jinjia2模板。vars：有⼀个main.yml⽂件，定义变量。meta：有⼀个main.yml⽂件，定义此⻆⾊的特殊设定及其依赖关系。注意:在每个⻆
  • 云计算33------学习playbook-roles，脚本创建数据库和表，mycat读写分离 是小梅吖~ 云计算学习数据库
    上午1、roles（角色）介绍roles(⻆⾊):就是通过分别将variables,tasks及handlers等放置于单独的⽬录中,并可以便捷地调⽤它们的⼀种机制。假设我们要写⼀个playbook来安装管理lamp环境，那么这个playbook就会写很⻓。所以我们希望把这个很⼤的⽂件分成多个功能拆分,分成apache管理,php管理,mysql管理，然后在需要使⽤的时候直接调⽤就可以了，以免重复
  • Mycat2.0实战2：mycat2.0安装和启动 baiyeooo Mycat2.0实战运维dbamysql
    以下操作均为windows下，Linux以后看情况再补充1、在哪里下载最新版本①进入官网：MyCat2②点击下载文件服务：Indexof/2.0/(mycat.org.cn)③选择最新的版本，下载我下载的是1.22的最新版本Indexof/2.0/1.22-release/(mycat.org.cn)下载安装模板：Indexof/2.0/install-template/(mycat.org.cn
  • MyCat实现单库分表+代理所有表 爱笑的人、 数据库
    MyCAT支持水平分片与垂直分片：水平分片：一个表格的数据分割到多个节点上，按照行分隔。垂直分片：一个数据库中多个表格A，B，C，A存储到节点1上，B存储到节点2上，C存储到节点3上。MyCat通过定义表的分片规则来实现分片，每个表格可以绑定一个分片规则，每个分片规则指定一个分片字段并绑定一个函数，来实现动态分配算法。安装mycat后解压tar-zxvfMycat-server-1.6.7.4-r
  • java的(PO,VO,TO,BO,DAO,POJO) Cb123456 VOTOBOPOJODAO
    转: http://www.cnblogs.com/yxnchinahlj/archive/2012/02/24/2366110.html   -------------------------------------------------------------------  O/R Mapping 是 Object Relational Mapping（对象关系映
  • spring ioc原理（看完后大家可以自己写一个spring） aijuans spring
             最近，买了本Spring入门书：spring In Action 。大致浏览了下感觉还不错。就是入门了点。Manning的书还是不错的，我虽然不像哪些只看Manning书的人那样专注于Manning,但怀着崇敬 的心情和激情通览了一遍。又一次接受了IOC 、DI、AOP等Spring核心概念。 先就IOC和DI谈一点我的看法。IO
  • MyEclipse 2014中Customize Persperctive设置无效的解决方法 Kai_Ge MyEclipse2014
    高高兴兴下载个MyEclipse2014，发现工具条上多了个手机开发的按钮，心生不爽就想弄掉他！ 结果发现Customize Persperctive失效！！ 有说更新下就好了，可是国内Myeclipse访问不了，何谈更新... so~这里提供了更新后的一下jar包，给大家使用！ 1、将9个jar复制到myeclipse安装目录\plugins中 2、删除和这9个jar同包名但是版本号较
  • SpringMvc上传 120153216 springMVC
      @RequestMapping(value = WebUrlConstant.UPLOADFILE) @ResponseBody public Map<String, Object> uploadFile(HttpServletRequest request,HttpServletResponse httpresponse) { try { //
  • Javascript----HTML DOM 事件 何必如此 JavaScripthtmlWeb
    HTML DOM 事件允许Javascript在HTML文档元素中注册不同事件处理程序。 事件通常与函数结合使用，函数不会在事件发生前被执行！ 注：DOM： 指明使用的 DOM 属性级别。 1.鼠标事件 属性               
  • 动态绑定和删除onclick事件 357029540 JavaScriptjquery
    因为对JQUERY和JS的动态绑定事件的不熟悉，今天花了好久的时间才把动态绑定和删除onclick事件搞定!现在分享下我的过程。      在我的查询页面，我将我的onclick事件绑定到了tr标签上同时传入当前行(this值)参数，这样可以在点击行上的任意地方时可以选中checkbox，但是在我的某一列上也有一个onclick事件是用于下载附件的，当
  • HttpClient|HttpClient请求详解 7454103 apache应用服务器网络协议网络应用Security
    HttpClient 是 Apache Jakarta Common 下的子项目，可以用来提供高效的、最新的、功能丰富的支持 HTTP 协议的客户端编程工具包，并且它支持 HTTP 协议最新的版本和建议。本文首先介绍 HTTPClient，然后根据作者实际工作经验给出了一些常见问题的解决方法。HTTP 协议可能是现在 Internet 上使用得最多、最重要的协议了，越来越多的 Java 应用程序需
  • 递归 逐层统计树形结构数据 darkranger 数据结构
    将集合递归获取树形结构: /** * * 递归获取数据 * @param alist:所有分类 * @param subjname:对应统计的项目名称 * @param pk:对应项目主键 * @param reportList: 最后统计的结果集 * @param count:项目级别 */ public void getReportVO(Arr
  • 访问WEB-INF下使用frameset标签页面出错的原因 aijuans struts2
    <frameset rows="61,*,24" cols="*" framespacing="0" frameborder="no" border="0">        
  • MAVEN常用命令 avords
    Maven库： http://repo2.maven.org/maven2/ Maven依赖查询： http://mvnrepository.com/ Maven常用命令： 1. 创建Maven的普通java项目：    mvn archetype:create    -DgroupId=packageName 
  • PHP如果自带一个小型的web服务器就好了 houxinyou apache应用服务器WebPHP脚本
    最近单位用PHP做网站，感觉PHP挺好的，不过有一些地方不太习惯，比如，环境搭建。PHP本身就是一个网站后台脚本，但用PHP做程序时还要下载apache，配置起来也不太很方便，虽然有好多配置好的apache+php+mysq的环境，但用起来总是心里不太舒服，因为我要的只是一个开发环境，如果是真实的运行环境，下个apahe也无所谓，但只是一个开发环境，总有一种杀鸡用牛刀的感觉。如果php自己的程序中
  • NoSQL数据库之Redis数据库管理(list类型) bijian1013 redis数据库NoSQL
    3.list类型及操作         List是一个链表结构，主要功能是push、pop、获取一个范围的所有值等等，操作key理解为链表的名字。Redis的list类型其实就是一个每个子元素都是string类型的双向链表。我们可以通过push、pop操作从链表的头部或者尾部添加删除元素，这样list既可以作为栈，又可以作为队列。   &nbs
  • 谁在用Hadoop？ bingyingao hadoop数据挖掘公司应用场景
    Hadoop技术的应用已经十分广泛了，而我是最近才开始对它有所了解，它在大数据领域的出色表现也让我产生了兴趣。浏览了他的官网，其中有一个页面专门介绍目前世界上有哪些公司在用Hadoop，这些公司涵盖各行各业，不乏一些大公司如alibaba,ebay,amazon,google,facebook,adobe等，主要用于日志分析、数据挖掘、机器学习、构建索引、业务报表等场景,这更加激发了学习它的热情。
  • 【Spark七十六】Spark计算结果存到MySQL bit1129 mysql
    package spark.examples.db import java.sql.{PreparedStatement, Connection, DriverManager} import com.mysql.jdbc.Driver import org.apache.spark.{SparkContext, SparkConf} object SparkMySQLInteg
  • Scala: JVM上的函数编程 bookjovi scalaerlanghaskell
        说Scala是JVM上的函数编程一点也不为过，Scala把面向对象和函数型编程这两种主流编程范式结合了起来，对于熟悉各种编程范式的人而言Scala并没有带来太多革新的编程思想，scala主要的有点在于Java庞大的package优势，这样也就弥补了JVM平台上函数型编程的缺失，MS家.net上已经有了F#，JVM怎么能不跟上呢？     对本人而言
  • jar打成exe bro_feng java jar exe
    今天要把jar包打成exe，jsmooth和exe4j都用了。 遇见几个问题。记录一下。 两个软件都很好使，网上都有图片教程，都挺不错。 首先肯定是要用自己的jre的，不然不能通用，其次别忘了把需要的lib放到classPath中。 困扰我很久的一个问题是，我自己打包成功后，在一个同事的没有装jdk的电脑上运行，就是不行，报错jvm.dll为无效的windows映像，如截图 最后发现
  • 读《研磨设计模式》-代码笔记-策略模式-Strategy bylijinnan java设计模式
    声明： 本文只为方便我个人查阅和理解，详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/ /* 策略模式定义了一系列的算法，并将每一个算法封装起来，而且使它们还可以相互替换。策略模式让算法独立于使用它的客户而独立变化 简单理解： 1、将不同的策略提炼出一个共同接口。这是容易的，因为不同的策略，只是算法不同，需要传递的参数
  • cmd命令值cvfM命令 chenyu19891124 cmd
         cmd命令还真是强大啊。今天发现jar -cvfM aa.rar @aaalist 就这行命令可以根据aaalist取出相应的文件   例如：      在d：\workspace\prpall\test.java 有这样一个文件，现在想要将这个文件打成一个包。运行如下命令即可比如在d：\wor
  • OpenJWeb(1.8) Java Web应用快速开发平台 comsci java框架Web项目管理企业应用
        OpenJWeb(1.8) Java Web应用快速开发平台的作者是我们技术联盟的成员，他最近推出了新版本的快速应用开发平台  OpenJWeb(1.8)，我帮他做做宣传   OpenJWeb快速开发平台以快速开发为核心，整合先进的java 开源框架，本着自主开发+应用集成相结合的原则，旨在为政府、企事业单位、软件公司等平台用户提供一个架构透
  • Python 报错：IndentationError: unexpected indent daizj pythontab空格缩进
        IndentationError: unexpected indent 是缩进的问题，也有可能是tab和空格混用啦     Python开发者有意让违反了缩进规则的程序不能通过编译，以此来强制程序员养成良好的编程习惯。并且在Python语言里，缩进而非花括号或者某种关键字，被用于表示语句块的开始和退出。增加缩进表示语句块的开
  • HttpClient 超时设置 dongwei_6688 httpclient
    HttpClient中的超时设置包含两个部分： 1. 建立连接超时，是指在httpclient客户端和服务器端建立连接过程中允许的最大等待时间 2. 读取数据超时，是指在建立连接后，等待读取服务器端的响应数据时允许的最大等待时间   在HttpClient 4.x中如下设置：   HttpClient httpclient = new DefaultHttpC
  • 小鱼与波浪 dcj3sjt126com
    一条小鱼游出水面看蓝天，偶然间遇到了波浪。　　小鱼便与波浪在海面上游戏，随着波浪上下起伏、汹涌前进。　　小鱼在波浪里兴奋得大叫：“你每天都过着这么刺激的生活吗？简直太棒了。”　　波浪说：“岂只每天过这样的生活，几乎每一刻都这么刺激！还有更刺激的，要有潮汐变化，或者狂风暴雨，那才是兴奋得心脏都会跳出来。”　　小鱼说：“真希望我也能变成一个波浪，每天随着风雨、潮汐流动，不知道有多么好！”　　很快，小鱼
  • Error Code: 1175 You are using safe update mode and you tried to update a table dcj3sjt126com mysql
    快速高效用：SET SQL_SAFE_UPDATES = 0；下面的就不要看了！ 今日用MySQL Workbench进行数据库的管理更新时，执行一个更新的语句碰到以下错误提示： Error Code: 1175 You are using safe update mode and you tried to update a table without a WHERE that
  • 枚举类型详细介绍及方法定义 gaomysion enumjavaee
    转发 http://developer.51cto.com/art/201107/275031.htm 枚举其实就是一种类型，跟int, char 这种差不多，就是定义变量时限制输入的，你只能够赋enum里面规定的值。建议大家可以看看，这两篇文章，《java枚举类型入门》和《C++的中的结构体和枚举》，供大家参考。 枚举类型是JDK5.0的新特征。Sun引进了一个全新的关键字enum
  • Merge Sorted Array hcx2013 array
    Given two sorted integer arrays nums1 and nums2, merge nums2 into nums1 as one sorted array. Note:You may assume that nums1 has enough space (size that is
  • Expression Language 3.0新特性 jinnianshilongnian el 3.0
    Expression Language 3.0表达式语言规范最终版从2013-4-29发布到现在已经非常久的时间了；目前如Tomcat 8、Jetty 9、GlasshFish 4已经支持EL 3.0。新特性包括：如字符串拼接操作符、赋值、分号操作符、对象方法调用、Lambda表达式、静态字段/方法调用、构造器调用、Java8集合操作。目前Glassfish 4/Jetty实现最好，对大多数新特性
  • 超越算法来看待个性化推荐 liyonghui160com 超越算法来看待个性化推荐
             一提到个性化推荐，大家一般会想到协同过滤、文本相似等推荐算法，或是更高阶的模型推荐算法，百度的张栋说过，推荐40%取决于UI、30%取决于数据、20%取决于背景知识，虽然本人不是很认同这种比例，但推荐系统中，推荐算法起的作用起的作用是非常有限的。       就像任何
  • 写给Javascript初学者的小小建议 pda158 JavaScript
    　　一般初学JavaScript的时候最头痛的就是浏览器兼容问题。在Firefox下面好好的代码放到IE就不能显示了，又或者是在IE能正常显示的代码在firefox又报错了。 　　如果你正初学JavaScript并有着一样的处境的话建议你：初学JavaScript的时候无视DOM和BOM的兼容性，将更多的时间花在 了解语言本身（ECMAScript）。只在特定浏览器编写代码（Chrome/Fi
  • Java 枚举 ShihLei javaenum枚举
    注：文章内容大量借鉴使用网上的资料，可惜没有记录参考地址，只能再传对作者说声抱歉并表示感谢！   一 基础 1）语法      枚举类型只能有私有构造器（这样做可以保证客户代码没有办法新建一个enum的实例）      枚举实例必须最先定义 2）特性     &nb
  • Java SE 6 HotSpot虚拟机的垃圾回收机制 uuhorse javaHotSpotGC垃圾回收VM
    官方资料，关于Java SE 6 HotSpot虚拟机的garbage Collection，非常全，英文。 http://www.oracle.com/technetwork/java/javase/gc-tuning-6-140523.html   Java SE 6 HotSpot[tm] Virtual Machine Garbage Collection Tuning &
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他