大数据计算环境管理

Spark简介

Spark是一个大数据计算平台，在这个平台上，有我们大家熟悉的SQL式操作组件SparkSQL;功能强大、性能优
GakkiLove·2023-04-08 10:37

【Python安装系统】win10系统从零开始安装Python并为不同项目设置开发环境——以安装TensorFlow2为例

2.4.3模块配置2.4.4TensorFlow2配置2.4.5其他库的安装3PyCharm3.1下载3.2安装3.3破解激活3.4新建项目3.5项目环境的修改4测试1概述利用Anaconda进行开发环境管理
Fighting_hawk·2023-04-08 07:47

【周检视】2020-11-15为年终检查做前期准备

引子：就快迎来每年最重要的时刻：年终检查，换了岗位，做的事情完全不一样，站的位置不一样，对同一件事了解的角度的不一样了，在口腔科院感做好环境管理、消毒隔离、培训全员院感重点内容、重点环节的管理，口头考核
口腔护士小罗·2023-04-08 04:11

探花交友2022最新版-Java微服务实战-社交项目

探花交友2022是一个陌生人的在线交友平台，在该平台中可以搜索附近的人，查看好友动态，平台还会通过大数据计算进行智能推荐，通过智能推荐可以找到更加匹配的好友，这样才能增进用户对产品的喜爱度。
帅杰IT大神·2023-04-07 18:17

对部署环境管理的一些理解

最近刚好闲下来，对这几年的一些工作记录，今天思考了一些代码部署环境的一些看法：中小公司3/4套环境即可：开发环境，测试环境，生产模拟环境（可选），生产环境为何需要这么多套环境1.各个人员使用个字环境，保证其工作不互相影响2.最大程度提高生产力，代码快速运行3.提高版本迭代速度4.满足各个环境收益人的需求开发环境这个环境的收益人是开发侧，这个环境在项目开始阶段准备好。微服务结构，在开发开始前准备好一
richard520·2023-04-07 00:03

Flink初探

WhatIsFlink一个通俗易懂的概念:ApacheFlink是近年来越来越流行的一款开源大数据计算引擎，它同时支持了批处理和流处理.这是对Flink最简单的认识,也最容易引起疑惑,它和storm和spark
活长擅运动·2023-04-06 19:46

Postman 如何进行参数化

1.打开Postman，点击右上角的环境管理按钮2.选择Global，设置全局变量3.输入你要设置的变量名和变量，点击Save，进行保存4.引用全
喜欢软测的小北葵·2023-04-06 09:25

统一观测丨使用 Prometheus 监控 E-MapReduce，我们该关注哪些指标？

E-MapReduce（简称“EMR”）是云原生开源大数据平台，向客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎
阿里云技术·2023-04-06 04:31

windows和linux下安装conda

Conda介绍任何语言的包，依赖和环境管理：Python，R，Ruby，Lua，Scala，Java，Javascript，C/C++，FORTRAN,Conda是一个开源包管理系统和环境管理系统，用于安装多个版本的软件包及其依赖关系
逍遥叹_64c6·2023-04-06 00:49

Scala

第一章入门0、为什么学ScalaSpark新一代内存及级大数据计算框架，是大数据的重要内容Spark是适用Scala编写的。
asd623444055·2023-04-05 19:40

大数据技术之scala

前提介绍：·scala入门：基本语法（变量和数据类型、运算符、流程控制）·核心特性：函数式编程、面向对象、集合·其他特色：模式匹配、异常处理、隐式转换、泛型scala入门1、概述Spark—新一代内存级大数据计算框架
独创之上·2023-04-05 19:39

python安装指定版本的tensorflow以及kears（conda+win）

项目需要所以需要在CPU环境下安装指定的tf以及kears，本地环境管理利用的是conda，不过安装过程中还是尽量用pip，避免最终部署的时候出现环境不兼容的问题目标环境如下：python3.6.0tensorflow1.12.0Keras2.2.0Step1
理想国の糕·2023-04-05 16:36

少儿Python编程4-Python环境和工具

一、Python环境的配置安装，Anaconda、jupyter和pycharmAnaconda是在一个包管理器和环境管理器（conda）的基础上发展出来的。
suelee_hm·2023-04-05 14:33

大数据计算框架概述

转自个人服务器：http://bbit.vip/service/main.php?version=1&type=article&id=166
~泊舟~·2023-04-05 13:04

itest work 开源接口测试，敏捷测试管理平台10.0.0GA 发布

一：itestwork简介itestwork开源敏捷测试管理，包含极简的任务管理，测试管理，缺陷管理，测试环境管理，接口测试，接口Mock，还有压测，又有丰富的统计分析，8合1工作站。
MYPM_AndyLiu·2023-04-05 11:41

利用 bioconda 管理生物信息软件

1了解conda，anaconda，miniconda，bioconda1.1condaconda是一个软件模块管理工具，也是一个可执行命令，其核心功能是包管理与环境管理，可以用来管理Python,R,
一只小蛮要·2023-04-05 01:25

1.1 Flask 环境搭建

一、Pipenv环境准备Pipenv是基于pip的Python包管理工具，与pip用法类似，是pip,Pipfile和Virtualenv的结合体，它让包安装、包依赖管理和虚拟环境管理更加方便，可实现搞笑的
雨停江南Lujier·2023-04-05 00:07

怎么在anaconda上安装python_Anaconda详细安装使用教程

简单来说，Anaconda是Python的包管理器和环境管理器。先来解决一个初学者都会问的问题：我已经安装了Python，那么为什么还需要Anaconda呢？
weixin_39628342·2023-04-05 00:06

Anaconda详细安装及使用教程

Conda是一个开源的包、环境管理器，可以用于在同一个机器上安装
至尊宝l·2023-04-05 00:54

anaconda安装使用详细教程

目录介绍安装安装方式测试方式更换源中科大阿里镜像源豆瓣的python的源显示检索路径，每次安装包时会将包源路径显示出来显示所有镜像通道路径命令更新使用虚拟环境管理创建环境激活环境列出所有的虚拟环境包管理安装库查看安装的库更新
明天谭·2023-04-05 00:17

Hadoop/Spark 太重，esProc SPL 很轻

很多用户开始转向分布式计算路线，用多台廉价的PC服务器组成集群来完成大数据计算任务。Hadoop/Spark就是其中重要的软件技术，由于开源免费而广受欢迎。
逛逛GitHub·2023-04-04 21:22

手把手教数据仓库建设dataworks（小白版）

到1去搭建整个数据仓库工作量比较大，且对于性价比不高，故我们采用现成的阿里云提供的数据仓库，阿里云技术框架如下：阿里云产品介绍类比DataHub数据总线Kafka+dataxE-MapReduce开源大数据计算框架上面所说的从
菩提树下的呆子·2023-04-04 18:42

Windows上安装Anaconda3教程

介绍Anaconda是Python的一个开源发行版本,包含了Python环境管理工具conda,以及很多科学计算包,如numpy,scipy等等.下载地址:到清华源找到相应的版本，以Anaconda3-
月夜长影·2023-04-04 18:17

仅 1 年 GitHub Star 数翻倍，Flink 做了什么？

作者：王峰（莫问）ApacheFlink是公认的新一代开源大数据计算引擎，其流水线运行系统既可以执行批处理程序也可以执行流处理程序。目前，Flink已成为Apache基金会和GitHub社区最为活跃的
Apache Flink·2023-04-04 17:57

仅1年GitHub Star数翻倍，Flink 做了什么？

阿里妹导读：ApacheFlink是公认的新一代开源大数据计算引擎，其流水线运行系统既可以执行批处理程序也可以执行流处理程序。
阿里技术_·2023-04-04 16:22

30天精通Python（数据分析篇）——第1天：环境搭建之 Linux/Windows 下安装 Anaconda 和 Windows 下安装 DataSpell

、Linux下安装AnacondaAnaconda是适合数据分析的Python开发环境，在全球有超过1100万用户(网上看到的数据)，它是一个开源的Python发行版本，其中包含了conda(包管理和环境管理
Amo Xiang·2023-04-04 11:28

Flink-Yarn安装及使用

但我们知道，Flink是大数据计算框架，不是资源调度框架，这并不是它的强项；所以还是应该让专业的框架做专业的事，和其它资源调度框架集成更靠谱。
  ·2023-04-03 17:14

数据同步工具之DataX理论

二、DataX可支持的数据源DataX目前已具备比较全面的插件体系，主流的RDBMS数据库、NoSQL、大数据计算系统都已接入，目前可支持的数据如下图所示：类型数据源Reader(读)Writer(写)
技匠三石弟弟·2023-04-03 05:53

Flink学习笔记：Flink Runtime

本文为《Flink大数据项目实战》学习笔记，想通过视频系统学习Flink这个最火爆的大数据计算框架的同学，推荐学习课程：Flink大数据项目实战：http://t.cn/EJtKhaz1.Flink运行时架构
weixin_30347335·2023-04-03 03:33

ubuntu下的conda管理

在Anaconda中conda可以理解为一个工具，也是一个可执行命令，其核心功能是包管理与环境管理。所以对虚拟环境进行创建、删除等操作需要使用conda命令。
爱叫啥叫啥去·2023-04-03 02:20

Java8新特性：流式计算

batchcomputing)流式计算(streamcomputing)交互计算(interactivecomputing)图计算(graphcomputing)等其中，流式计算和批量计算是两种主要的大数据计算模式
要学就学灰太狼·2023-04-03 01:51

【Python】Python 环境管理工具 Anaconda 详细介绍（安装 + 具体使用 + 常见问题 及 解决对策）

本文对Python虚拟环境工具（环境管理工具）Anaconda进行了详细的整理，内容包括：Anaconda诞生的初衷Anaconda的安装和使用方法使用Anaconda时，可能遇到的问题和解决的对策。
__阿健__·2023-04-02 19:43

2023最新pycharm导入Anaconda3环境，并管理环境的方法

（interpreter）在anaconda的安装环境中可以在/envs中选择已经创建好的环境，选中该环境下的python.exe解释器（interpreter），并点击确定可以通过anaconda的环境管理界面来管理这个环境的包也可以选择
HarryOkk·2023-04-02 19:22

Nvidia jetson agx 中部署yolov5，并测试

一、前言在Windows或者Ubuntu系统一般都使用anaconda作为虚拟环境管理器，但是由于jetson系列的产品核心是基于ARM框架的，无法安装acoconda。
weixin_43008635·2023-04-02 14:59

基于Windows下Anaconda创建python虚拟环境教程

Conda是一个开源的包管理系统和环境管理系统，可在Windows、macOS和Linux上运行。Conda可快速安装、运行和更新包及其依赖项
rothschildlhl·2023-04-01 09:31

自主研发项目Git代码管理方案

一、开发环境管理建议自主研发系统使用以下环境进行开发：开发工具：MyEclipse10（安装git和FindBugs插件）开发语言：Java（建议使用JDK1.7或者JDK1.8）Web容器：Tomcat8.5.23
枫_7654·2023-04-01 09:24

python项目服务器配置部署docker/nginx/gunicom/flask/supervisor/anaconda

项目结构：flask写的服务，nginx负载均衡，gunicom配置启动服务，supervisor服务管理，anaconda环境管理，ubuntu镜像版本1604，ngin镜像版本1.15.8项目架构搭建
古斯塔斯hugh·2023-03-31 22:25

阿里云框架大数据

框架总览：DataHub数据总线类比kafka与各种服务接口MaxCompute大数据计算框架类比Hadoop+hive+调度器DataWorks可视化MaxCompute的开发管理平台RDS关系型数据库类比
zhzsdiligence·2023-03-31 18:00

初识MR 初识YARN 初识ZooKeeper

适合于大数据计算MR的执行过程a.当用户输入计算任务时，MR会将任务分成一个个小的任务块，(一般情况下map所处理的文件都在HDFS本地，原因是为了减少网络间的传送)b.将每个任务块分给不同的map任务
A NIHUAN·2023-03-31 17:01

【探花交友DAY 02】项目搭建和用户登录功能的实现

1.项目介绍探花交友是一个陌生人的在线交友平台，在该平台中可以搜索附近的人，查看好友动态，平台还会通过大数据计算进行智能推荐，通过智能推荐可以找到更加匹配的好友，这样才能增进用户对产品的喜爱度。
lyx7762·2023-03-31 16:20

01-环境搭建

1、项目介绍探花交友是一个陌生人的在线交友平台，在该平台中可以搜索附近的人，查看好友动态，平台还会通过大数据计算进行智能推荐，通过智能推荐可以找到更加匹配的好友，这样才能增进用户对产品的喜爱度。
InLoadwetrust·2023-03-31 16:28

安装yolov5环境

1.安装AnacondaAnaconda是一个非常流行的Python环境管理器，它可以帮助用户轻松地安装和管理Python包和环境。在安装YOLOv5之前，我们需要先安装Anacond
SYBH.·2023-03-31 10:54

01VSCode配置Anaconda 环境和调试环境

VSCode配置Anaconda环境Anaconda简介自带Python解释器Anaconda附带了一大批常用数据科学包150多个科学包及其依赖项Anaconda是在conda（一个包管理器和环境管理器
步、步、为营·2023-03-31 09:02

大数据架构与技术——（一）大数据概述

数据产生方式的变革促成大数据时代的来临1.1.4大数据的发展历程1.2大数据概念1.2.1数据量大1.2.2数据类型繁多1.2.3处理速度快1.3大数据的影响1.4大数据的应用1.5大数据关键技术1.6大数据计算模式
TUTOU程序猿·2023-03-31 07:14

大数据结合人工智能，助力智慧城市建设

PaddleSpatial是基于百度飞桨深度学习框架开发的时空大数据计算工具和平台，融合了百度领先的区域分割、时间序列、城市迁移学习等时空数据处理能力。
飞桨PaddlePaddle·2023-03-31 07:25

Flink的Java Api 实现WordCount的批处理和流处理

1基础说明Flink是一款优秀的批处理和流处理的大数据计算引擎，本文将通过Flink的JavaApi实现WordCount多版本案例。
为伊戏诸侯·2023-03-31 01:06

大数据计算生态之数据计算（二）

导读：大数据计算发展至今，已经形成了一个百花齐放的大数据生态，通用计算、定制开发，批量处理、实时计算，关系查询、图遍历以及机器学习等等，我们都可以找到各种对应的计算引擎来协助我们处理这些任务。
程小舰·2023-03-30 17:07

大数据计算生态之数据存储

导读：大数据计算发展至今，已经形成了一个百花齐放的大数据生态，通用计算、定制开发，批量处理、实时计算，关系查询、图遍历以及机器学习等等，我们都可以找到各种对应的计算引擎来协助我们处理这些任务。
程小舰·2023-03-30 16:37

大数据计算生态之数据计算（一）

导读：大数据计算发展至今，已经形成了一个百花齐放的大数据生态，通用计算、定制开发，批量处理、实时计算，关系查询、图遍历以及机器学习等等，我们都可以找到各种对应的计算引擎来协助我们处理这些任务。
程小舰·2023-03-30 16:37

flink学习笔记：Flink核心概念与编程模型

本文为《Flink大数据项目实战》学习笔记，想通过视频系统学习Flink这个最火爆的大数据计算框架的同学，推荐学习课程：Flink大数据项目实战：http://t.cn/EJtKhaz1.Flink分层架构
大数据研习社·2023-03-30 10:39
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他