MLSQL

MLSQL-Console 账号体系设计

MLSQLConsoleMLSQLConsole的账号权限体系设计就是用户自己玩，没有超级管理员。设计的角色有：User（任何人都可以MLSQLConsole去注册）Team（任何人都可以创建任意组Team）Role（在特定Team下用户自己创建角色）Table(表是所有操作的对象)AuthType(表的权限类型，比如load,select等)Backend(后端MLSQLEngine)Tag(E
祝威廉·2024-08-22 21:13

MLSQL实战--利用docker快速搭建MLSQL运行环境

摘要MLSQL依赖于Spark，而且算法模块依赖于conda来管理python包。本文将介绍如何用docker快速搭建mlsql的运行环境。
cda766963c7e·2023-08-24 02:22

MLSQL Stack 让流调试更加简单

流程首先我新建了一个kaf_write.mlsql,里面方便我往Kafka里写数据：setabc='
祝威廉·2023-04-07 08:08

实战：如何实时采集上亿级别数据？

数据情况:每天20亿+机器成本:3台kafka集群，2台logstash采集机器技术:Java,MQ,MLSQL,Logstash下图为最终结果图效果图.png采集流程logstash采集流程图.png
Bloo_m·2023-03-23 11:08

antlr4操作入门(java版本)

背景最近在学习github上的一个mlsql项目的时候，发现了antlr这一强大的语言解析工具。上网搜罗了很多资料，基本都是概念原理之类，示例也比较单一，看了之后难以上手。
geene·2023-03-10 23:16

再谈数据中台是什么以及MLSQL为什么可以作为数据中台

昨天还是前天，正好看到朋友圈里大家都在发AI前线推的一篇文章。数据中台已成下一风口，它会颠覆数据工程师的工作吗？,个人认为风口谈不上，但是确实是技术发展到一定程度的产物。这里的技术不仅仅是大数据，也是后端，前端技术前进的共同产物。N年前我们是想都不会想这件事情的，因为技术上很难达到。文章认为数据中台出现的原因是为了弥补数据开发和应用开发严重不匹配而出现的。这其实只是一方面，数据中台真正出现的原因其
祝威廉·2023-02-18 00:04

MLSQL Stack的体验站点终于来啦

MLSQL的体验站点终于来了，点这里MLSQLConsole.另外有Bug或者建议的，可以在Issues提问题一起探讨哦。
祝威廉·2023-02-05 08:43

MLSQL拥抱BigDL,轻轻松松无编码玩深度学习

MLSQL已经有一个相对来比较完善的PythonRuntime,细节可以参看这篇文章，所以玩深度学习是很容易的，不过需要你提供一段tensorflow代码或者项目。
祝威廉·2022-02-21 04:11

AWS 首席技术专家离职后加盟 MongoDB；Docker hub 发生中断；MLSQL 正式更名 Byzer，打造新一代开源语言生态 | 开源日报

海外用户举报TikTok违反GPL开源协议AWS首席技术专家RickHoulihan已离职，将前往MongoDB工作MLSQL正式更名Byzer，打造新一代开源语言生态Dockerhub全面服务中
开源头条·2022-02-08 11:42

MLSQL 正式更名 Byzer，打造新一代开源语言生态

亲爱的社区小伙伴们，2021年12月21日，冬至，我们很高兴地宣布MLSQL正式更名为Byzer。
·2021-12-21 15:03

MLSQL 2.1.0 正式发布！

MLSQL社区于日前宣布：MLSQL2.1.0正式发布！欢迎大家下载使用。MLSQL是一门面向大数据和AI的分布式编程语言，能够帮助用户更好地实现数据分析和AI落地。
·2021-09-13 12:37

MLSQL：融合 Spark+Ray，让企业低成本落地 Data+AI

主办的Data&CloudSummit2021行业峰会在上海成功举办，此次峰会特设「开源有道」分论坛，邀请了来自ApacheKylin，ApacheSpark，Alluxio，Linkis，Ray以及MLSQL
祝威廉·2021-08-26 10:41

从MLSQL性能设计到对架构师的重新思考

从MLSQL性能设计到对架构师的重新思考五年前，我会认为，架构仅仅是针对一个可大可小的问题，把流程设计好，然后往里面填充合适的组件，从而最终解决这个问题。
祝威廉·2021-07-24 13:24

典型日志系统架构及其缺点

kafka或者其它队列系统，这个队列通常是企业内部的流数据总线从kafka出来，再用flink,kafkastream，或者sparkstreaming,sparkstructedstreaming,或者mlsql
hongshen·2021-06-18 21:55

MLSQL 开发环境配置指南

MLSQL是一个非常棒的项目，为了更加了解该项目，我需要建立MLSQL的开发调试环境，由于项目目前已经比较成熟，搭建环境其实也比较简单，这里记录一下供参考。
hongshen·2021-06-12 01:53

MLSQL v1.1.6 新特性：用MLSQL脚本查看API/Configuration

MLSQL有自己的一套doc系统，可以通过标准的MLSQL语句进行获取，可以参看MLSQL-Doc-Slide。今天我们来介绍下v1.1.6里的新特性。
祝威廉·2021-04-29 22:36

MLSQL如何支持部署SKLearn,Tensorflow,MLLib模型提供API预测服务

部署成API服务时，除了要把raw数据特征化成向量外，研发还要想着怎么加载模型，产生模型的框架五花八门，比如Tensorflow,SKlearn,SparkMLllib等每个框架都有自己的模型格式。在我司，有一次用Sklearn研发了一个模型，研发资源比较紧张，没办法，算法同学治好自己用Pythonflask搭建了一个API,然后部署成微服务（多实例来解决并发能力）。有没有一种办法，可以一键部署多
祝威廉·2021-04-29 00:53

15 - MLSQL on k8s（3） - MLSQL on k8s

有了前两篇的铺垫，主角MLSQL终于上场了，在部署MLSQLonk8s，笔者参考了这三篇文章（和作者的帮助）：http://docs.mlsql.tech/mlsql-stack/qa/mlsql-docker-image.htmlhttp
祝威廉·2021-02-25 09:12

Structured Streaming如何实现Parquet存储目录按时间分区

缘由StreamingPro现在支持以SQL脚本的形式写StructuredStreaming流式程序了：mlsql-stream。
祝威廉·2020-09-16 11:37

产品和运营如何利用MLSQL完成excel处理

工作区介绍image.pngimage.png快捷菜单区可以自动帮我们生成MLSQL语句，一般而言，用户只需要自己能够手动
祝威廉·2020-08-11 02:44

MLSQL初学者常见问题QA（持续更新）

常见问题集锦MLSQL架构图有么？用Docker一键安装后，注册时出现Noidentiferspecifiedforentity:tech.mlsql.model...？
祝威廉·2020-07-30 16:03

完全卸载MySQL完整图文流程

想把mlsql卸载了重装，看了许多文章试了很多方法都没办法完全卸载，直到看到了这篇文章，可以完全卸载mysql，在这里谢谢博主，也拿出来分享给大家原文链接：https://blog.csdn.net/qq
一只胡说八道的猴子·2020-07-24 14:00

MLSQL Stack v1.2.0正式版发布

前言MLSQLStack包含如下几个组件：MLSQLEnginev1.2.0MLSQLClusterv1.2.0MLSQLConsolev1.2.0MLSQLStackv1.2.0发布时间距离上个版本v1.7.1.1已经有接近3个月了。这次我们跳过了v1.1.8/v1.1.9是因为我们会认为v1.2.0能作为第一个稳定版本（主要是MLSQLEngine）。在后续的v1.3.0版本里，MLSQLEn
祝威廉·2020-07-11 01:58

MLSQL -个人开源项目的成长之路

前言今天看了下项目的firstcommitlog,发现再过几天，就已经三年整了。commitbbf08489f2e3c58afd584e03b8c9c83d25c63b3bAuthor:WilliamZhuDate:ThuApr2815:04:132016+0800open-sourceversion再查看了一下自己的第一个开源项目，commit35af7b36e909282626038206ec
祝威廉·2020-07-01 17:46

电商网站开发过程

概述设计内容：本设计主要利用VS2005+MLSQL2005设计一个基于B2C的网络销售水果商城，能够实现会员注册，查询选购，商品管理、用户管理和订单管理，多种支付方式等功能。
Aaaaqiu_·2020-06-21 16:51

Your Guide to DL with MLSQL Stack (3)

ThisisthethirdarticleofYourGuidewithMLSQLStackseries.WehopethisarticleseriesshowsyouhowMLSQLstackhelpspeopledoAIjob.AswehaveseeninthepreviouspoststhatMLSQLstackgiveyouthepowertousethebuilt-inAlgorithm
祝威廉·2020-04-05 02:57

为什么去开发一个MLSQL

算法和工程之殇算法和工程结合，有两个非常大的痛点：第一个，算法的着眼点是，用最快速的方式清洗一些数据出来，然后接着建模训练，评估预测效果，之后再重复清洗数据，再试验。因为很多算法工程师都是Python系的，对他们来说，最简单的方式自然是写python程序。一旦确认清洗方式后，这种数据清洗工作，最后研发工程师还要再重新用Spark去实现一遍。那么如果让算法工程师在做数据清洗的时候，直接使用PySpa
祝威廉·2020-04-01 19:27

MLSQL解决了什么问题

前言先给MLSQL做个定义：MLSQL是首先是一门语言，SQL的超集。这意味着他的门槛足够低，无论分析师，研发，算法，运营，产品经理都可以用。
祝威廉·2020-03-29 20:03

MLSQL 真香（尝鲜版）

MLSQLConsole介绍MLSQL目前已经初步有一套WebConsole供使用。界面相对来说也比较清爽。我们先来看看一个尝鲜版本。
祝威廉·2020-03-24 23:33

Spark 2.3.0 如何处理图片以及存在的一些问题

前言因为需要在MLSQL里开发一个图片处理模块（以及配套数据源），使用上大概是这样子的：--通过SQL抓取一张图片，imageBytes字段是一个二进制数组selectcrawler_request_image
祝威廉·2020-03-14 00:26

Structured Streaming如何实现Parquet存储目录按时间分区

缘由StreamingPro现在支持以SQL脚本的形式写StructuredStreaming流式程序了：mlsql-stream。
祝威廉·2020-02-10 18:21

MLSQL 控制台预览版 推出啦

前言MLSQL由三部分构成：MLSQLEngine.MLSQLClusterMLSQL控制台（就是我们今天要介绍的）一个MLSQLEngine启动后就是一个MLSQL实例，通常我们需要启动多个MLSQL
祝威廉·2020-02-09 12:01

mlsql流任务实现distinct

流计算场景里distinct很常用，sparksql对streamdataset不支持SELECTCOUNT(DISTINCTCompany)FROMOrders这种用法，但是dataframe支持dropDuplicates，可以指定columns。下面要加上dropDuplicates的操作。通过et可以实现对dataframe的操作register语法register的语法是这样的：REGI
dongbin_·2020-02-05 20:56

Spark团队新作MLFlow 解决了什么问题

前言中午的时候看到了Spark团队新作MLFlow，因为我本身也在做类似的解决方案MLSQL,自然要看看Meitai是怎么做的。
祝威廉·2019-12-14 00:40

Mlsql内部资源调度读取opentsdb数据信息代码

{Form,Request}importtech.mlsql.utils.PathFunimportcom.goog
你好！Mr陈·2019-10-12 14:00

Docker安装使用以及mlsql的docker安装使用说明

#2.设置开机自启systemctlenabledocker#2.1.关闭开机自启systemctldisabledocker#3.停止dockersystemctlstopdockerDocker安装Mlsql
你好！Mr陈·2019-09-25 16:00

MLSQL Stack如何让流调试更加简单详解

流程首先我新建了一个kaf_write.mlsql,里面方便我往Kafka里写数据：setabc='
祝威廉·2019-06-04 10:34

手动安装和启动MLSQL三套件

MLSQL-Engine1.clone项目gitclonehttps://github.com/allwefantasy/streamingpro.git2.编译NOTE:jar包版本以代码为准，以下示例代码版本为
祝威廉·2019-05-28 15:23

MLSQL Stack指南

官网地址：http://www.mlsql.tech便捷体验：MLSQLStack一键体验玩一玩:产品和运营如何利用MLSQL完成excel处理语法文档：语法常见问题参考：MLSQL初学者常见问题QA（
祝威廉·2019-05-27 18:56

MLSQL Stack 应用场景示例

流式平台MLSQL很好的支持了StructuredStreaming.开发平台什么意思呢？就是根据业务需求，用MLSQL开发了一个脚本，然后将脚本暴露通过A
祝威廉·2019-04-27 15:11

MLSQL 1.3.0开发版中最新三个MPIPs--调度，资源，缓存

1.3.0开发版最新的三个MPIPs在MLSQL1.3.0开发版中，我们根据实际场景需求，提出了三
祝威廉·2019-04-27 15:00

MLSQL编译时权限控制示例详解

权限控制，对于MLSQL而言的重要程度可以说是生命线。
祝威廉·2019-03-22 08:33

产品和运营如何利用MLSQL完成excel处理

工作区介绍image.pngimage.png快捷菜单区可以自动帮我们生成MLSQL语句，一般而言，用户只需要自己能够手动
祝威廉·2019-03-05 15:46

MLSQL平台执行python代码示例

MLSQL平台介绍1、基于ApacheSpark开发并支持通过写sql的方式执行批程序、流程序、AI、爬虫任务的分布式机器学习平台。
天降攻城狮·2018-12-28 11:48

ServiceFramework作为Java Web框架都有哪些不错的设计

前言最近需要开发一个纯API的项目，mlsql-cluster，从无到有，到最后完整的proxy功能开发完毕，只花了四个小时不到，自己不尽小感叹了一把ServiceFramework的高效。
祝威廉·2018-12-11 17:13

MLSQL拥抱BigDL,轻轻松松无编码玩深度学习

MLSQL已经有一个相对来比较完善的PythonRuntime,细节可以参看这篇文章，所以玩深度学习是很容易的，不过需要你提供一段tensorflow代码或者项目。
祝威廉·2018-10-13 17:00

如何使用MLSQL中的帮助指令学习模块的使用

前言MLSQL已经实现了文章中描述的功能如何实现语法的自解释（MLSQL易用性设计有感）。
祝威廉·2018-09-15 20:24

水果电商网站开发过程

概述设计内容：本设计主要利用VS2005+MLSQL2005设计一个基于B2C的网络销售水果商城，能够实现会员注册，查询选购，商品管理、用户管理和订单管理，多种支付方式等功能。
Aaaaqiu_·2018-08-09 13:10

GitHub - allwefantasy/streamingpro: Build Spark Batch/Streaming/MLlib Application by SQL

服务模式：启动一个StreamingProServer作为常驻程序,然后通过http接口发送MLSQL脚本进行交互。我们强烈推荐使用第二种模式，第一种模式现在已经不太更新了，现在迅速迭
·2018-07-31 15:00

MLSQL解决了什么问题

七月上海|高性能计算之GPUCUDA培训7月27-29日三天密集式学习快速带你入门阅读全文>正文共1259个字，预计阅读时间8分钟。先看看做算法有哪些痛点（我们假设大部分算法的代码都是基于Python的）：1、项目难以重现，可阅读性和环境要求导致能把另外一个同事写的python项目运行起来不得不靠运气2、和大数据平台衔接并不容易，需要让研发重新做工程实现，导致落地周期变长。3、训练时数据预处理/特
LeadAI学院·2018-06-24 18:00
上一页 1 2 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他