大数据系统基础

Spark MLlib

目录一、SparkMLlib简介（一）什么是机器学习（二）基于大数据的机器学习（三）Spark机器学习库MLlib二、机器学习流水线（一）机器学习流水线概念（二）流水线工作过程（三）构建一个机器学习流水线三
Francek Chen·2024-02-12 11:15

“大数据“对当今信息时代产生的影响

2.思维方式层面大数据的产业链主要有三个层面，第一层是数据层，主要是数据的采集、存储、传输、扩散；第二层是信息层，把数据背景融入数据，形成价值密
嘿嘿海海·2024-02-12 11:11

EXCEL向大数据宣战：别小瞧我！

用了这么多年的EXCEL，一直把EXCEL奉为厉害的办公软件，首先EXCEL入门门槛非常低，任何人都可以轻松上手；其次是EXCEL的功能非常强大，无论是写函数，还是做透视表，或者是做图表可视化，EXCEL都能信手拈来，不在话下。还有就是EXCEL可以利用VBA写编程语言去实现数据自动化，这个功能简直逆天，可以让人解放双手。所以这么多年来，EXCEL一直受到大家的青睐，并在众多的办公软件中一枝独秀，
喜欢下厨的数据分析师·2024-02-12 10:50

开源大数据集群部署（九）Ranger审计日志集成（solr）

作者：櫰木1、下载solr安装包并解压包tar-xzvfsolr-8.11.2.gzcdsolr-8.11.2执行安装脚本./bin/install_solr_service.sh/opt/solr-8.11.2.tgz安装后，会在/etc/default/下生成solr.in.sh文件。2、在rangeradmin下生成solr相关配置cd/opt/ranger-2.3.0-admin/cont
·2024-02-12 10:07

UUID算法：独一无二的标识符解决方案

引言在分布式系统和大数据环境下，唯一标识符的生成和管理是一项关键任务。UUID（UniversallyUniqueIdentifier）算法应运而生，成为了解决重复数据和标识符冲突的有效工具。
qcidyu·2024-02-12 08:08

UUID算法：独一无二的标识符解决方案

引言在分布式系统和大数据环境下，唯一标识符的生成和管理是一项关键任务。UUID（UniversallyUniqueIdentifier）算法应运而生，成为了解决重复数据和标识符冲突的有效工具。
qcidyu·2024-02-12 08:08

【原创文集】时间请再慢一点吧

张美艳21物联本18484604881大数据工程学院在默默里算着，数不清的日子已经从我手中溜去；像针尖上一滴水滴在大海里，我的日子滴在时间的流里，没有声音，也没有影子。
30b2fa426f09·2024-02-12 08:50

Redis核心技术及实战（九.解决大数据量问题）

九：cluster集群——解决大数据量问题原文：《09丨切片集群：数据增多了，是该加内存还是加实例？》Redis要保存大量数据怎么办？
ZYLer_·2024-02-12 07:07

系统集成项目管理工程师（软考中级）—— 第二十三章 风险管理 笔记分享

幕布地址：第二十三章风险管理-幕布概述大数据ITO4W1H风险概念风险是一种不确定的事件或条件，一旦发生，就会产生积极或消极的影响有些风险是必然要发生的，但何时发生却是不确定性的风险管理不是一蹴而就的，
梨涡泥窝·2024-02-12 07:31

快速上手医学影像组学和机器学习（训练营：2023.9.19~9.26）

★课程简介★随着大数据、人工智能的深入融合发展，一项新的研究方法开始用于临床研究，它就是影像组学。它可以对普通影像图像进行更深层
茗创科技·2024-02-12 07:14

Hadoop：认识MapReduce

MapReduce是一个用于处理大数据集的编程模型和算法框架。其优势在于能够处理大量的数据，通过并行化来加速计算过程。
爱写代码的July·2024-02-12 06:41

用Python的Pandas和Matplotlib绘制股票KDJ指标线

我最近出了一本书，《基于股票大数据分析的Python入门实战视频教学版》，京东链接：https://item.jd.com/69241653952.html，在其中给出了MACD，KDJ等指标图的绘制方法
hsm_computer·2024-02-12 06:35

Linux操作系统基础（九）：Linux用户与权限

文章目录Linux用户与权限一、文件权限概述二、终端命令：组管理三、终端命令：用户管理1、创建用户、设置密码、删除用户2、查看用户信息3、su切换用户4、sudo4.1、给指定用户授予权限4.2、使用用户zhangsan登录,操作管理员命令四、修改文件权限1、字母形式修改文件权限2、数字形式修改文件权限Linux用户与权限一、文件权限概述Linux操作系统是多任务多用户操作系统，每当我们使用用户名
Lansonli·2024-02-12 03:46

基于NSGA-II的深度迁移学习

为什么要迁移大数据与少标注的矛盾在大数据的时代背景下，我们所面临的数据量呈现爆炸性增长，同时数据类型也变得日益复杂多样
代码缝合怪·2024-02-12 03:45

可以参考使用的句子

做好调研的前期准备工作，做好计划是调研的前提；5、基层民警是人民群众的贴心人，我会运用所学知识，结合工作经验，制定出改进方法并且带头实践，从而更好地为群众服务；6、建立健全值班制度，做到专人专职，专岗专责；7、是公安大数据战略和智慧公安的重要体现形式
花间独酌酒一壶·2024-02-12 02:09

如何保护我们的隐私1：注册账号中的小技巧

马云曾经说过，在这个大数据时代，数据就是这个时代的石油！因此很多公司几乎无所不用其极，想方设法采集用户数据。而单纯依靠公司道德和规章制度来推动隐私的保护，在短期来看是不现实的。
airhuu·2024-02-12 02:57

上海银行｜用知微支撑全行2500人研发数字化管理转型

在一期试点实施成功的基础上，知微将全面支撑上海银行建立面向全行2500人以上规模的敏捷部落小队运作机制和端到端敏捷管理机制，形成全行研发大数据和效能度量体系。
weixin_45977872·2024-02-12 02:50

网络兼职的正规平台有哪些啊？九个正规靠谱的兼职平台

【蚂蚁微客】是一个领先、开放、多样化的共享经济平台，基于用户的位置、信用以及大数据分析的智能算法，将人和任务的进行一个智能匹配。简
指北针聊天项目·2024-02-12 01:12

zero-copy

当需要通过IO（网卡/硬盘）处理大数据量时，CPU搬运数据的压力会增大，所以要引入DMA。DMA在
甜甜起司猫_·2024-02-12 01:21

亚信安全发布2016年第一季度安全威胁报告

近日，云与大数据安全的领导者亚信安全发布了2016年第一季度安全威胁报告。报告显示，勒索软件病毒在本季度已经成为威胁企业安全的头号病毒，其不仅从代码结构方面发生变化，且感染方式更加多元化、本地化。
weixin_34281537·2024-02-12 00:17

亚信安全2016年Q1安全威胁报告: 勒索软件成威胁企业的头号病毒

亚信安全发布2016年第一季度安全威胁报告:勒索软件成为威胁企业的头号病毒,安卓恶意程序比去年同期增长一倍以上近日，云与大数据安全的领导者亚信安全发布了2016年第一季度安全威胁报告。
weixin_34191734·2024-02-12 00:47

侗族服饰之旅

大数据工程学院19物联本罗代英侗族是我国一个历史悠久的民族，主要有南部支系和北部支系，不同的地区侗族由于自然或历史的原因侗族服饰有着较大的差异，形成了独具特色的服饰文化。
Discover_de14·2024-02-11 23:51

Linux操作系统基础（五）：Linux的目录结构

文章目录Linux的目录结构一、Linux目录与Windows目录区别二、常见目录介绍（记住重点）Linux的目录结构一、Linux目录与Windows目录区别Linux的目录结构是一个树型结构Windows系统可以拥有多个盘符,如C盘、D盘、E盘Linux没有盘符这个概念,只有一个根目录/,所有文件都在它下面二、常见目录介绍（记住重点）目录作用/bin二进制命令所在的目录(普通命令=>普通用户l
Lansonli·2024-02-11 22:20

刷抖音

长时间盯着手机屏幕看，根据大数据计算所得为用户自动推荐的海量内容无边无际，不断有新的消息提醒，像是在诱导催促你快点打开看一看。
萌喵儿·2024-02-11 22:08

大数据，小隐私

商家告诉我们，这种自我测量、自我监控可以帮助我们认清自己的体质，帮助提升身体的机能……图片发自App万物皆可被测量、被量化，意味着大数据会被商家及服务机构轻易获取，最终人们之间隐蔽的相关性、人的行为举止也因此可以被
张口细说·2024-02-11 22:13

大数据在城市定量研究中的应用—百度地图开放平台

百度地图事业部总经理李东旻表示，“大数据能客观反映城市生长脉络，规划是城市建设的源头，具有海量大数据和人工智能技术的百度地图与规划行业的龙头机构中国城市规划设计研究院签约，能为城市把脉问诊，探索城市规划的新模式
带发条的桔子·2024-02-11 22:25

问题驱动结合系统思维搭建有序的知识体系

社会在发展，也许在未来大家都使用爬虫大数据挖掘在看问题的时候，这项搜索技能也过时了，但是唯一不会被淘汰的就是解决问题的智慧和思维。1、问题驱动：高效行动的秘密什么是问题驱动？以解决问题出发。
yufawu·2024-02-11 21:48

【数据结构】八大数据结构分类

本文目录：数据结构分类1、数组2、栈3、队列4、链表5、树6、散列表7、堆8、图数据结构分类数据结构是指相互之间存在着一种或多种关系的数据元素的集合和该集合中数据元素之间的关系组成。常用的数据结构有：数组，栈，链表，队列，树，图，堆，散列表等，如图所示：每一种数据结构都有着独特的数据存储方式，下面为大家介绍它们的结构和优缺点。1、数组数组是可以再内存中连续存储多个元素的结构，在内存中的分配也是连续
咖喱年糕·2024-02-11 21:52

国内首个图计算标准发布，悦数图数据库通过测试

近日，经中国通信标准化协会批准，《大数据图计算平台技术要求与测试方法》标准正式发布，这是我国首个图计算平台标准，为图计算平台的发展提供了一个标准化的指导方针，对于推动我国图技术的发展具有重要意义。
悦数图数据库·2024-02-11 20:38

C语言常见面试题：C语言中如何进行大数据处理编程？

在C语言中进行大数据处理编程需要使用特定的数据结构和算法，以及对内存管理和性能优化的深入理解。
广寒舞雪·2024-02-11 20:37

思维导图实战派T3-13/21袁杰

…今天，这样一个大数据时代，所有一切信息都是可以预知的，甚至可以获取未来信息的年代。所以几乎没有外因，大数据时代外因如911那样的概率…一切有为法，如梦幻泡影！如露亦如电，应作如是观。”图片发自App
阿土112·2024-02-11 19:20

汉服租赁网站：Java技术的文化应用

专业做Java、Python、微信小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！
计算机编程指导师·2024-02-11 18:38

甘肃旅游服务平台：技术驱动的创新实践

专业做Java、Python、微信小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！
计算机编程指导师·2024-02-11 18:07

大数据--Flink--流处理（二）

一、flink单节点安装部署下载1）下载安装包[root@localhost~]#wgethttp://us.mirrors.quenda.co/apache/flink/flink-1.9.1/flink-1.9.1-bin-scala_2.11.tgz2）解压[root@localhost~]#tar-zxvfflink-1.9.1-bin-scala_2.11.tgz-C/usr/local
无剑_君·2024-02-11 18:38

ClickHouse--01--简介

如何生成可参考右边的帮助文档文章目录1.ClickHouse简介官网：[https://clickhouse.com/docs/zh](https://clickhouse.com/docs/zh)1.1大数据处理场景
知行合一。。。·2024-02-11 18:26

【专题】2023供应链数智化白皮书报告PDF合集分享（附原数据表）

与此同时，物联网、大数据、云计算、人工智能等信息
·2024-02-11 18:19

计算机系统基础实验——拆除二进制炸弹

实验简要介绍：该实验是书籍深入理解计算机操作系统中最有趣的实验之一，主要使用gdb来拆解二进制(或者说程序)的一个文件，了解其运行逻辑。我们对这个程序的了解有：有六个关卡，分别是phase_1-phase_6每一步都会要求你输入一个内容,就好像是密码，但是密码需要自己通过技术手段获取。程序是C写的。bomb.c是程序的总逻辑，可以看到每一个关卡都是调用一个phase开头的函数。首先使用命令objd
Kerin637·2024-02-11 18:54

数维图数字孪生：能源电力行业三维可视化系统合集

场景展示风能发电“智慧风场”以数字化、信息化、标准化为基础，以管控一体化、大数据、云平台、物联网为平台，以数字孪生技术为辅助，以计算资源的弹性配置为保障，以异构
·2024-02-11 18:54

智慧电网数据可视化运维云平台解决方案

智慧电力概述智慧电力是通过采用先进的大数据、云计算、物联网、边缘计算等技术，实现生产信息与管理信息的智慧，实现人、技术、经营目标和管理方法的集成，是企业管理思想的一个新突破。
·2024-02-11 18:55

又双叒叕 更新了！+团队介绍

开源IoTOS团队介绍：多套主流ToC/ToB物联网卡系统主力开发；从事Java开发，拥有大数据量物联网卡运营综合业务系统开发经验、大量数据运营同步、数据安全链路加密通信数据攻防。
·2024-02-11 18:21

数据智能引擎：企业模糊搜索API精准获取企业列表信息

在这个大数据的时代，企业面临着海量信息的管理和利用挑战。为了更有效地获取并利用数据，企业信息模糊搜索API成为了企业数据智能引擎的一部分，为企业提供了精准的企业列表检索服务。
·2024-02-11 17:00

【数据库】对大数据量数据集，PostgreSQL分组统计数量，限定每组最多数量

一、背景介绍在处理大数据量数据集时，我们经常需要进行分组统计。例如，我们需要统计每个城市的人口数量、每个年龄段的人数等。
·2024-02-11 17:41

适合低学历做的技术推荐，未来最有前景的技术

很多学生甚至在大专毕业以后，还去报班学习写代码，现在是大数据时代，各种新型在分享之前给大家推荐一个互联网最新导购平台（高省）买东西先上高省领取隐藏优惠券，还有高额返利，让你更
古楼·2024-02-11 16:55

【论文精读】GPT2

但多任务需要多数据集，而继续扩大数据集和目标设计的规模是个难以处理的问题，所以只能采取多任务学习的其他框架。
None-D·2024-02-11 15:43

基于Springboot+Vue实现图书个性化推荐系统

领域优质创作者、CSDN博客专家、CSDN内容合伙人、掘金特邀作者、阿里云博客专家、51CTO特邀作者、多年架构师设计经验、腾讯课堂常驻讲师主要内容：Java项目、Python项目、前端项目、人工智能与大数据
编程指南针·2024-02-11 15:34

学成网html+css案例

这是跟着pink老师敲的第一个html+css的静态页面：html部分学成网首页课程职业规划个人中心CheeryZ前端开发>后端开发>移动开发>人工智能>商业预测>云计算&大数据>运维&测试>UI设计>
倒霉娃不要倒霉·2024-02-11 15:33

我的创作纪念日

当时，作为一名来自南京的大二大数据专业学生，我被分配到了一个大型分布式系统测试团队中，亲身经历了从零构建测试框架、设计复杂测试场景到验证大数据组件性能的过程。这份实践让我意识到，软件测试不仅是
yueqingll·2024-02-11 14:14

MySQL数据库新手入门最佳教程_MySQL新手入门教程详解

所以，我们很有必要掌握一款可以处理大数据量的工具，比如MySQL数据库管理系统。为什么推荐学习MySQL呢？因为它具有体积小、速度快
fjgmgh·2024-02-11 14:08

AI+大数据面向未来医疗

在上一篇文章中，我们畅想了数字化健康的未来，健康是大众化的行业，也是并未完全觉醒的行业，对于大众而言当前的健康还比较局限于医院相关，有病治病无病安康。医疗活动依然以医生为权威，但是真实情况呢，医疗是一门精密科学，大多数情况下其实并不存在权威，同样的病历在不同的个人身上会出现全然不同的发展轨迹，同样的用药疗效并不准确归一，这说明了我们当前的医疗体系的问题。为了解决以医生为中心的医疗体系问题，美国一些
弹指数据之禅·2024-02-11 13:55

Linux操作系统基础（八）：Linux的vi/vim编辑器

文章目录Linux的vi/vim编辑器一、vi/vim编辑器介绍二、打开文件三、VIM编辑器的三种模式(重点)四、命令模式相关命令五、底行模式相关命令Linux的vi/vim编辑器一、vi/vim编辑器介绍vi是visualinterface的简称,是Linux中最经典的文本编辑器vi的核心设计思想：让程序员的手指始终保持在键盘的核心区域,就能完成所有编辑操作vi的特点：只能是编辑文本内容,不能对
Lansonli·2024-02-11 13:51
上一页 15 16 17 18 19 20 21 22 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他