bigData

从万物互联到边缘计算 （记录）2018-11-10

本次记录为与搜狐视频&小明智能杨志云总监在清华公管学院座谈AI发展阶段：起步期（上世纪五十年代）-专家体统的推广（几度浮沉）-深度学习（2012年IMAGENET爆发+Nvidia+BigData）深度学习算法特点
安全青年·2020-07-27 18:16

NBA体育决策和数据挖掘分析

p=1370IntheInternetage,dataisthemostvaluableresource,bigdatatoleadthetraditionalindustries,gavebirthtonewvitality.Almostallindustriesareembracinglargedata
LT_Ge·2020-07-27 17:56

NBA体育决策和数据挖掘分析

p=1370IntheInternetage,dataisthemostvaluableresource,bigdatatoleadthetraditionalindustries,gavebirthtonewvitality.Almostallindustriesareembracinglargedata
LT_Ge·2020-07-27 17:45

SQLserver通过OGG for bigdata对接Kafka

1.OGG五大进程的功能Manager进程是GoldenGate的控制进程，运行在源端和目标端上。它主要作用有以下几个方面：启动、监控、重启Goldengate的其他进程，报告错误及事件，分配数据存储空间，发布阀值报告等。在目标端和源端有且只有一个manager进程Extract运行在数据库源端，负责从源端数据表或者日志中捕获数据。Extract的作用可以按照阶段来划分为：–初始时间装载阶段：在初
Gain_TF·2020-07-27 16:35

使用Hadoop分析大数据

大数据（BigData）是一个指大量数据的术语，包括传统数据库中存在的结构化数据以及文本文档，视频和音频等非结构化数据。大数据不仅仅是数据，也是各种工具、技术、框架和平台的集合。交通数据、搜索数据
Myhoooyo·2020-07-27 16:50

088-BigData-16ZooKeeper

上一篇：087-BigData-15Hadoop阶段小结一、ZooKeeper概述1.1概述Zookeeper是一个开源的分布式的，为分布式应用提供协调服务的Apache项目。
AncientMing·2020-07-27 16:24

大数据改变世界，UserData改变生活

大数据(bigdata)，或称巨量资料，指的是所涉及的资料量规模巨大到无法透过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。
Mad_Geek·2020-07-27 16:17

Big Data Management笔记01：Hadoop & HDFS

BigDataManagement笔记01：Hadoop&HDFSHadoop介绍Hadoop的特点Hadoop的优点Hadoop结构（Architecture）HDFS介绍HDFS结构NameNodeDataNodeSecondaryNameNode
MYJace·2020-07-27 16:45

大数据技术与实践总结

大数据技术与实践总结大数据概述大数据的定义大数据的4V特征HDFSHBaseRedisMongoDB大数据概述大数据的定义大数据一词由英文“bigdata”翻译而来，是最近几年兴起的概念，目前还没有一个统一的定义
Leozonemxy·2020-07-27 16:20

Ambari-Ranger组件修改MySQL端口（非3306）问题解决

数据库的端口修改为：非默认端口3306在启动、重启Ranger组件时报错：/usr/jdk64/java/bin/java-cp/usr/hdp/current/...jdbc:mysql://managerhd.bigdata
@TangXin·2020-07-27 15:10

大数据学习资源整理

大数据定义与5V特征：“大数据”（Bigdata）研究机构Gartner定义：是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力来适应海量、高增长率和多样化的信息资产。
yown·2020-07-27 14:04

Thinking in BigData（七）大数据技术核心之NoSql(一)

曾在ThinkinginBigDate（三）大数据运作机理与趋势，一文中谈到结构化数据面临的挑战，随着持续增长的海量数据，NoSql应运而生。本文，我们将续续揭开NoSql的神秘面纱，打开非结构化数据的大门（不再过多的探讨关系型数据库的特点）。原文章总结于《NoSqlDistilled》作者：PramodJ.Sadalage，MartinFowler著，爱飞翔译《NoSql精粹》学而不思等于白学，
dufman·2020-07-27 14:53

超详细的大数据学习资源大全！

为了帮助程序员更好、更深入的了解大数据，w3cschool整理了GitHubAwesomeBigData资源，供大家参考。本资源类型主要包括：大数据框架、论文等实用资源集合。
weixin_34221036·2020-07-27 13:53

大数据开发及和大数据相关的技术

首先，大数据(bigdata)，指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
juan11115·2020-07-27 12:25

漫谈大数据仓库与挖掘系统

任何比较关注业界新闻的人，都会知道近两年数字信息领域的几个关键字:移动端、LBS、SNS和大数据(BigData)。前边三个，大家应该是很熟悉的，因为身边早已充斥着相关的应用。
hadoop17173·2020-07-27 12:32

大数据学习资源之DataCamp

——托尼老师《Nature》杂志早在2008年第一次提出“BigData”的概念，到2015年国务院正式印发《促进大数据发展行动纲要》，标志着大数据正式上升至国家战略，再到2017年的大数据市场全面打开
数据工程师金牛·2020-07-27 11:03

Hive 删除包含表的数据库

hive>dropdatabasebigdata;FAILED:ExecutionError,returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask.InvalidOperationException
MrZhangBaby·2020-07-27 11:24

BigData：大数据开发的简介、核心知识(linux基础+Java/Python编程语言+Hadoop{HDFS、HBase、Hive}+Docker)、经典场景应用之详细攻略

BigData：大数据开发的简介、核心知识(linux基础+Java/Python编程语言+Hadoop{HDFS、HBase、Hive}+Docker)、经典场景应用之详细攻略BigData：大数据简介及以
一个处女座的程序猿·2020-07-27 11:55

python数据挖掘:概念_大数据：概念，安全性和用例

python数据挖掘:概念Introduction介绍BigDatareferstodatacollectionsthataresolargeandcomplexthattheyaredifficultfortraditionaldatabasetoolstomanage.BigDataisconsideredasthebaseofthefutureinthefieldofInformationT
cunchi8090·2020-07-23 13:57

Hadoop-Yarn实战

Haoop和Yarn命令Hadoop相关命令Yarn相关命令//yarn启动resourcemanager,nodemanger等yarn--config/home/bigdata/data/hadoop
hq_allen·2020-07-16 10:16

JVM性能监控工具总结

使用如下：hadoop@hzbxs-bigdata16:~$jps40759AzkabanWebServer41031AzkabanExecutorServer11860Jps第一列是LVMID(LocalVirtualMachineIdentifier
duval·2020-07-16 07:41

noSql 与大数据

NoSQL数据库具有以下几个优点:1．易扩展2．大数据量，高性能3．灵活的数据模型4．高可用大数据（bigdata），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力
程序员杂谈·2020-07-16 04:52

2016中国(北京)国际大数据产业博览会暨高峰论坛

2016中国(北京)国际大数据产业博览会暨高峰论坛2016China(Beijing)InternationalBigDataIndustryExhibitionandSummitForum时间：2016
北京科博会创客教育展·2020-07-16 03:33

推特史上最严重安全事故？奥巴马等多名大V账号被黑了

本文来自微信公众号：大数据文摘（ID：BigDataDigest），作者：刘俊寰、牛婉杨，头图来自：JaapArriens/NurPhoto|GettyImages对推特来说，今天注定是个不眠夜。
虎嗅网·2020-07-16 00:00

kylin从入门到实战：实际案例

文章来源：http://bigdataer.net/?p=308排版乱？
bigdataer·2020-07-15 22:54

阅读《Practical web scraping for data science》p161的代码之 Cannot operate on a closed database错误

页的代码原封不动的敲到电脑中，编写一个爬虫蜘蛛，但运行以后出现以下错误：ErrorclosingcursorTraceback(mostrecentcalllast):File“E:\StudyCard\BigData
阿智智·2020-07-15 18:50

Expedia Software Engineer Interview Questions

SoftwareDeveloperInterviewQuestionsHowwillyougeneraterandomnumbers.Howtousebigdatainmobileapps.CodingproblemsontreeDesignablackjackcardgameHowtofindKmostfrequentlyoccurringelements.ReverseastringRemov
billyzhang·2020-07-15 17:58

CDH 平台安装 Apache Phoenix

hbase相关配置文件拷贝到Phoenix/bin目录下重启Hbase即可连接Phoenix下载Phoenixhttp://phoenix.apache.org/download.html解压[root@bigdata
丶kino丶·2020-07-15 17:13

spark shell提交

spark-shell（REPL）（1.）直接运行spark-shell启动的是本地的命令：[root@bigdata111~]#spark-shellSparkcontextavailableas'sc
Jackson_MVP·2020-07-15 17:04

提高神经网络的学习方式Improving the way neural networks learn-2

Anasideonbigdataandwh
GarfieldEr007·2020-07-15 17:18

【2020版】大数据学习详细路线

大数据（BIGDATA）是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
千锋教育官方博客·2020-07-15 17:09

CDH版Phoenix的安装（图文详解）

其中，cmbigdata1即做server，又做agent。cmbigdata2、cmbigdata3和cmbigdata4都是做agent。注意：CDH版本的Phoenix的安装，需要我们自己编译。
weixin_34320724·2020-07-15 15:25

mybatis 别名查询，map传参

dao层interfacepackagecom.bigdata.project.dao;importjava.util.List;importjava.util.Map;importorg.apache.ibatis.annotations.Param
修炼到救赎·2020-07-15 15:47

Hadoop全分布分配部署测试

设立各点通讯设置时间同步(CRT下选择对所有窗口发送)date-s"2019-8-2111:15"密钥分发：scpid_dsa.pubbigdata02:`pwd`/bigdata01.pub//从bigdata01
宇直豪·2020-07-15 13:49

Hadoop高可用搭建部署测试

ssh-keygen-tdsa-P''-f~/.ssh/id_dsacat~/.ssh/id_dsa.pub>>~/.ssh/authorized_keys分发密钥到主机（并重命名区分避免覆盖）scpid_dsa.pubbigdata01
宇直豪·2020-07-15 13:49

087-BigData-15Hadoop阶段小结

上一篇：086-BigData-14MapReduce实战一、概述学习只是知道，而使用才是学会。这是一个实践性很强的内容，理论再好很有可能是空中楼阁，实践起来完全不会。或者遇到问题完全无法解决。
AncientMing·2020-07-15 11:02

Thinking in BigData（八）大数据Hadoop核心架构HDFS+MapReduce+Hbase+Hive内部机理详解

纯干货：Hadoop核心架构HDFS+MapReduce+Hbase+Hive内部机理详解。通过这一阶段的调研总结，从内部机理的角度详细分析，HDFS、MapReduce、Hbase、Hive是如何运行，以及基于Hadoop数据仓库的构建和分布式数据库内部具体实现。如有不足，后续及时修改。HDFS的体系架构整个Hadoop的体系结构主要是通过HDFS来实现对分布式存储的底层支持，并通过MR来实现对
dufman·2020-07-15 11:13

Thinking in BigData（九）大数据hadoop集群下离线数据存储和挖掘架构

前序：2月23日，在中关村，海淀黄庄丹棱街SOHO大厦好未来会议室，hadoop专家吴超大侠，针对hadoop初学者的概念梳理，以及简单介绍针对日志分析案例。在回来的第二天，赶上了这次草根面对面交流。说是草根，像我这样的是草根，其余的都是大侠。在这一次交流中，主要是针对初级想了解hadoop的人员的，主要讲的内容，在我的上一篇ThinkinginBigDate（八）大数据Hadoop核心架构HDF
dufman·2020-07-15 11:13

Hadoop集群配置以及伪分布式、完全分布式

安装好配置好虚拟机后将IP地址进行截图，并在secureCRT中输入相应IP地址进行连接（此处CRT我用的是绿色免安装版本所以可以直接连接）以下是虚拟机IP以及主机名截图（bigdata1后改成了bigdata129
做一条有梦想的咸鱼卍·2020-07-15 10:13

CCF大专委2019年大数据发展趋势预测

,程学旗.CCF大专委2019年大数据发展趋势预测.大数据[J],2019,5(1):109-115ZHOUT,PANZY,CHENGXQ.Developingtendencypredictionofbigdatain2019fromCCFTFBD.Bigdataresearch
唐名威·2020-07-15 09:44

Flume监控之Ganglia部署与使用

部署环境CentOS7.6Flume1.6.0-cdh5.15.1前置准备1）安装httpd服务与php[js@bigdata001flume]$sudoyum-yinstallhttpdphp2）安装其他依赖
Exzzla·2020-07-15 08:58

hadoop单机版

JAVA_HOME}将其修改为自己JDK的目录【JAVA_HOME的目录】2、修改core-site.xmlfs.default.namehdfs://master01:9000hadoop.tmp.dir/bigdata
风中有个帅的人·2020-07-15 08:04

配置spark driver

默认也使用的是这个版本，故：设置pyspark的解释器为miniconda3的解释器PYSPARK_PYTHON=“/root/miniconda3/bin/python3”JAVA_HOME=’/root/bigdata
孤数不证·2020-07-15 08:30

使用mycat部署mysql集群(分片，读写分离，主从复制)

在s201,s202,s203上安装MySQL（安装jdk）配置MySQL5.7的yum源sudotee-a/etc/yum.repos.d/mysql-community.reporootbigdatarootbigdatatrue
LaZY_apple·2020-07-15 07:25

Kafka编程指南之二：消息的物理存放路径

/bin/kafka-topics.sh--describe--zookeeperbigdata01:2181--topicfirsttopic显示如下：Topic:firstto
Darren.P·2020-07-15 07:51

在windows系统中安装配置hadoop环境变量

安装hadoop之前我已经在linux虚拟机安装了hadoop，用的hadoop安装包是：把这个安装包解压到d盘下的一个全英文路径下：D:\bigdataSource\Hadoop\hadoop-2.6.0
白修修·2020-07-15 06:22

大数据基准测试平台BigDataBench5.0安装配置及使用

bigDataBench5.0（2019.6月发布）前提：安装hadoop、jdk、g++、gcc、gsl1.首先就是下载BigDataBench安装包http://125.39.136.212:8090
AthenaHe·2020-07-15 06:33

Shell实战之变量的高级用法

/usr/bin/envbash#字符串处理完整脚本string="BigdataprocessframeworkisHadoop,Hadoopisanopensourceproject"functiontips_info
weixin_34278190·2020-07-15 05:18

HBase环境搭建

/software配置环境变量exportPATH=/usr/local/bigdata/software/hbase-1.2.5/bin:$PATH单机HBase配置配置文件修改配置文件在hbase-
忘净空·2020-07-15 04:08

Oozie时出现Exception in thread "main" java.lang.UnsupportedClassVersionError: com/mysql/jdbc/Driver : U...

问题详情[hadoop@bigdatamasteroozie-4.1.0-cdh5.5.4]$bin/ooziedb.shcreate-sqlfileoozie.sql-runDBConnection[
weixin_33699914·2020-07-15 04:04
上一页 32 33 34 35 36 37 38 39 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他