大数据计算环境管理

告别自动激活：掌握如何在Conda中禁用Base环境

告别自动激活：掌握如何在Conda中禁用Base环境引言在Python开发的世界中，环境管理是一个不可或缺的部分。
2401_85439108·2024-08-22 23:13

Python之FastAPI框架~搭建FastAPI开发环境

1.创建虚拟环境在FastAPI项目中python创建虚拟环境的方法跟python其他框架项目的创建方法也差不多，可以使用不同的虚拟环境管理模块比如Anaconda，Pipenv,poetry，virtualenv
Jason-Lai·2024-08-22 08:12

大数据存储

区别：hdsf更多的与其他的计算框架如Mapreduce进行配合使用，也就是大数据存储+大数据计算。而我送负责的底层存储系统更多的是面上中、小文件，如视频、图片、文件等，显然如果直接用hd
龙哥vw·2024-08-22 02:32

生信星球学习小组第80期 Day3笔记--ZJUSKY

Conda简介Conda是一个开源的软件包管理系统和环境管理系统，用于安装多个版本的软件包及其依赖关系，并在它们之间轻松切换。
ZJUSKY·2024-03-26 14:13

linux安装单机版spark3.5.0

一、spark介绍是一种通用的大数据计算框架，正如传统大数据技术Hadoop的MapReduce、Hive引擎，以及Storm流式实时计算引擎等.Spark主要用于大数据的计算二、spark下载spark3.5.0
爱上雪茄·2024-03-17 18:57

【Conda】详细讲解

Conda1.前言2.关键特点3.Conda命令1.前言Conda是一个流行的包管理器和环境管理器，主要用于Python编程语言，但也可以用来安装、运行和更新包和环境中的任何语言，如R、Ruby、Lua
程序员不想敲代码啊·2024-03-17 13:49

Anaconda 常见命令

conda常见命令一.环境管理1.创建环境condacreate-n[your_env_name]python=x.x#创建指定版本的python环境condaenvcreate-n[your_env_name
牛码当驴·2024-03-14 14:41

国内有实力的三防加固平板厂家｜亿道三防onerugged

无论是多任务处理还是大数据计算，这些平板电脑都能保持流畅和高效的运行。此外
emdoorrugged·2024-02-27 22:35

什么是编程领域的 managed 特性

在计算机软件开发领域，managed特性指的是一种由高级运行时环境管理资源（如内存分配、类型安全检查、异常处理等）的编程方式，与之相对的是unmanaged，后者通常指直接由程序员控制资源，更接近硬件，
·2024-02-25 02:35

大数据计算技术秘史（上篇）

在之前的文章《2024年，一个大数据从业者决定……》《存储技术背后的那些事儿》中，我们粗略地回顾了大数据领域的存储技术。在解决了「数据怎么存」之后，下一步就是解决「数据怎么用」的问题。其实在大数据技术兴起之前，对于用户来讲并没有存储和计算的区分，都是用一套数据库或数据仓库的产品来解决问题。而在数据量爆炸性增长后，情况就变得不一样了。单机系统无法存储如此之多的数据，先是过渡到了分库分表这类伪分布式技
·2024-02-22 20:33

Week 02 Python初步

，从真正小白零接触，跟着大神们开始学习参考书：利用Python进行数据分析（原书第2版）中第三章和第五章一、Python基础1）Python环境安装（1）下载anaconda是python的包管理器和环境管理器
图小加·2024-02-20 15:15

Python | Conda常用命令

一、介绍1、Anaconda工具Anaconda是一个用于数据科学和机器学习的开源软件包管理器和环境管理器。
-拟墨画扇-·2024-02-20 12:48

conda 所有的命令及其讲解

Conda是一个开源的包管理器和环境管理器，可以用于安装、运行和升级跨平台的软件包和环境。Conda很流行于数据科学、机器学习、科学计算等领域，因为它能够快速地安装、管理和部署软件包和环境。
MonkeyKing.sun·2024-02-20 12:48

macOS 安装 conda

macOS安装conda安装conda参考Conda是一个开源的软件包管理系统和环境管理系统，用于安装和管理软件包和其依赖项。
mixboot·2024-02-20 11:09

大数据 - Spark系列《六》- RDD详解

Spark系列文章：大数据-Spark系列《一》-从Hadoop到Spark：大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客大数据
王哪跑nn·2024-02-20 10:55

大数据 - Spark系列《七》- 分区器详解

Spark系列文章：大数据-Spark系列《一》-从Hadoop到Spark：大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客大数据
王哪跑nn·2024-02-20 10:55

以内存为核心的开源分布式存储系统

Tachyon为不同的大数据计算框架（如ApacheSpark，HadoopMapReduce,ApacheFlink等）提供可靠的内存级的数据共享服务。
这次靠你了·2024-02-20 05:26

[Flink04] Flink部署实践

但Flink是大数据计算框架，不是资源调度框架，这并不是它的强项；所以还是应该让专业的框架做专业的事，和其他资源调度框架集成更靠谱。FlinkonYarn模式，把资源管理交给Ya
YoungerChina·2024-02-19 20:49

anaconda简介,什么是anaconda？

以下是Anaconda的一些主要特点和优势：1.简化环境配置：Anaconda提供了一个集成的环境管理
JayGboy·2024-02-19 10:30

【读书笔记】《大数据技术体系详解：原理，架构与实践》06.大数据计算引擎篇

批处理引擎MapReduceMapReduce是一个经典的分布式批处理计算引擎，被广泛应用于搜索引擎索引构建、大规模数据处理等场景中，具有易于编程、良好的扩展性与容错性以及高吞吐率等特点。它主要由两部分组成：编程模型和运行时环境。其中，编程模型为用户提供了非常易用的编程接口，用户只需像编写串行程序一样实现几个简单的函数即可实现一个分布式程序，而其他比较复杂的工作，如节点间的通信、节点失效、数据切分
粥一样温柔·2024-02-14 15:01

Let’ s Encrypt 现支持通配符的 HTTPS 认证

image.pngLet'sEncrypt发布公告称，本周新的ACME2（AutomatedCertificateManagementEnvironment自动证书环境管理）协议将支持通配符证书！
summerbluet·2024-02-14 06:19

刷抖音

长时间盯着手机屏幕看，根据大数据计算所得为用户自动推荐的海量内容无边无际，不断有新的消息提醒，像是在诱导催促你快点打开看一看。
萌喵儿·2024-02-11 22:08

Python资源大全，让你相见恨晚的Python库！

环境管理管理Python版本和环境的工具p–非常简单的交互式python版本管理工具。pyenv–简单的Python版本管理工具。Vex–可以在虚拟环境中执行命令。
大数据公社·2024-02-11 13:24

2020-02-21学习小组DAY3

Get专属AppStoreConda是一个开源的软件包管理系统和环境管理系统，用于安装多个版本的软件包及其依赖关系，并在它们之间轻松切换。
veronaxx·2024-02-11 04:33

[Venv]Windows下Python程序虚拟环境配置

日常的生活和学习中难免会遇到需要使用其他师傅编写的Python脚本的时候，但是不同的Python脚本需要的环境往往各不相同，如果统统把所有遇到的软件需要的依赖统统安装到本机上，有时候会出现依赖冲突的问题，因此在这里我们使用Python虚拟环境管理工具
SlackMoon·2024-02-10 19:38

项管学习规划

整理项目思维导图参考图例，没有固定要求整理项目需求分析文档以下为参考内容：三、租户环境管理对租户的环境信息进行管理。
万总有点菜·2024-02-10 05:36

PyCharm安装PyQt5及工具Qt Designer程序UI界面的实现工具

工具包安装对于一个新创建的Python环境，首先需要安装PyQt的相关工具包，因为是Python的依赖包所有可以通过pip进行安装，由于我们在PyCharm中进行程序设计，这里我们可以通过PyCharm中的环境管理界面进行安装
Stitch .·2024-02-09 20:16

北理-Python数据分析与展示-Numpy、Matplotlib、Pandas PART1

针对科学计算数据分析的IDLE*canopyanaconda一个集合，包含conda、某版本python、一批第三方库，包含IPython、Spyder等，是conda的扩展，类似于nvm与node的关系包管理和环境管理工具
哇哇哇哇池·2024-02-09 09:04

大数据 - Spark系列《五》- Spark常用算子

Spark系列文章：大数据-Spark系列《一》-从Hadoop到Spark：大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客大数据
王哪跑nn·2024-02-09 05:25

virtualenv虚拟环境搭建

防止出现包管理混乱及包版本冲突windows安装#建议使用pip3安装到python3环境下pip3installvirtualenvpip3installvirtualenvwrapper-win配置虚拟环境管理器工作目录
apehole·2024-02-09 01:07

「转录组」从环境配置之conda

image.png什么是condaconda：开源包管理系统和环境管理系统，用于安装多个版本的软件包及其依赖关系，并在它们之间轻松切换。系统：适用Linux，OSX和Windows。
旮旯蜗牛_c299·2024-02-08 21:35

国内唯一连续入选Gartner，Quick BI是如何做到的？

阿里云QuickBI凭借灵活的公共云部署，私有化独立部署能力、无缝对接各类云上数据库和自建数据库、可视化搭建分析、高效数据处理能力与强大数据计算能力，使得在2022年持续入选GartnerABI魔力象限报告
阿里云技术·2024-02-08 19:23

深入理解Spark的前世今生

Spark，是一种通用的大数据计算框架，正如传统大数据技术Hadoop的MapReduce、Hive引擎，以及Storm流式实时计算引擎等。
闲云野鹤~~~·2024-02-08 14:01

[培训-Python机器学习]02-使用conda管理环境和包

conda其实可理解为：venv+pip，它的主要功能包括：环境管理：创建多个隔离的Python运行环境，每
乱码奇糟·2024-02-08 13:34

涤生大数据实战：基于Flink+ODPS历史累计计算项目分析与优化（上）

涤生大数据实战：基于Flink+ODPS历史累计计算项目分析与优化（一）1.前置知识ODPS（OpenDataPlatformandService）是阿里云自研的一体化大数据计算平台和数据仓库产品，在集团内部离线作为离线数据处理和存储的产品
涤生大数据·2024-02-08 08:55

接口测试 - postman使用之导出文件

导出json文件方便使用jenkins集成环境管理，导出python的话方便在linux系统下运行脚本。
詹小布·2024-02-07 19:31

postman的学习——如何将脚本导出成json文件

将所有测试接口写到一个集合里面点击集合后面的···，选择export选择推荐的那个版本，点击export确定导出选择要导出到的文件目录，点击保存，即可得到一个接口脚本的json文件点击环境管理，选择导出具体的环境变量
sun_977759·2024-02-07 19:00

Spark Chapter 8 Spark SQL

【参考以慕课网日志分析为例进入大数据Sparksql】0导读SQL：MySQL，Oracle，DB2，SQLServer在大数据平台上实现大数据计算：Hive/SparkSQL/SparkCore直接使用
深海suke·2024-02-07 01:34

DockerUI如何部署结合内网穿透实现公网环境管理本地docker容器

文章目录前言1.安装部署DockerUI2.安装cpolar内网穿透3.配置DockerUI公网访问地址4.公网远程访问DockerUI5.固定DockerUI公网地址前言DockerUI是一个docker容器镜像的可视化图形化管理工具。DockerUI可以用来轻松构建、管理和维护docker环境。它是完全开源且免费的。基于容器安装方式，部署方便高效，浏览和维护docker单节点或集群节点work
是Nero哦·2024-02-06 10:31

客观对比Python所有的依赖环境管理工具

△△请给“Python猫”加星标，以免错过文章推送你好，我是猫哥。Python潮流周刊第27期分享过一则《对Python环境和包管理工具的公正分析》，这里分享一篇译文。原文：https://alpopkes.com/posts/python/packaging_tools译文：https://juejin.cn/post/7325611798135767090译者：hashcon作者在EuroPy
Python猫·2024-02-06 03:26

大数据平台_大数据应用场景有哪些

大数据时代的出现，简单的讲是海量数据同完美计算能力结合的结果，确切的说是移动互联网、物联网产生了海量的数据，大数据计算技术完美地解决了海量数据的收集、存储、计算、分析的问题。
思迈特Smartbi·2024-02-05 16:06

大数据 - Spark系列《三》- 加载各种数据源创建RDD

Spark系列文章：大数据-Spark系列《一》-从Hadoop到Spark：大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客目录3.1
王哪跑nn·2024-02-05 09:28

大数据 - Spark系列《四》- Spark分布式运行原理

Spark系列文章：大数据-Spark系列《一》-从Hadoop到Spark：大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客大数据
王哪跑nn·2024-02-05 08:54

开发工具-Miniconda python开发环境管理

开发工具-Minicondapython开发环境管理下载安装windows安装linux安装macOS安装使用虚拟环境创建新的虚拟环境激活虚拟环境退出虚拟环境管理虚拟环境里的python管理conda和虚拟环境
runsong911·2024-02-05 08:42

体系管理对企业如此重要，如何才能用信息化工具构建高效的管理体系？

一个企业里所有的活动都离不开体系的要求：产品生产、产品检验、原料采购、人事管理、成本管理、质量管理、环境管理、安全管理……体系无处不在。
baimini·2024-02-04 20:28

1.Python版本及其虚拟环境管理：pyenv和pyenv-virtualenv

pyenv和pyenv-virtualenv管理Python工作环境@[TOC](pyenv和pyenv-virtualenv管理Python工作环境)使用pyenv管理不同的Python版本1.pyenv的安装2.pyenv的使用3.pyenv的帮助使用pyenv-virtualenv管理不同的项目1.pyenv-virtualenv的安装2.pyenv-virtualenv的使用3.pyenv
卓懿·2024-02-04 15:03

Python开发常用的库汇总，附官网链接

文章目录前言环境管理包管理包仓库分发构建工具交互式解析器文件日期和时间文本处理特殊文本格式处理自然语言处理文档配置命令行工具下载器图像处理OCR音频Video地理位置HTTP数据库数据库驱动ORMWeb
python零基础入门小白·2024-02-04 11:58

DevOps落地笔记-10|环境管理：交付测试环境的迅猛方法

环境管理的问题也是我目前工作的一个重点，由于业务需要，对环境的数量、环境部署的速度有很高的要求。如何快速的交付一套可用的环境就变得格外重要。这也是这个课时要介绍的内容——环境管理。什么是环境管理
机智阳·2024-02-04 07:04

anaconda的简单用法(python)

●conda与环境相关的用法有哪些ChatGPTconda是一个强大的环境管理工具，可以用于创建、管理和切换不同的Python虚拟环境。
m0_74176885·2024-02-04 06:45

子雨大数据之Spark入门教程---Spark入门：RDD的设计与运行原理1.3

Spark的核心是建立在统一的抽象RDD之上，使得Spark的各个组件可以无缝进行集成，在同一个应用程序中完成大数据计算任务。
千寻～·2024-02-04 06:38
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他