avro

GCC的ARM编译选项

Next:AVROptions,Previous:AdaptevaEpiphanyOptions,Up:SubmodelOptions3.17.2ARMOptionsThese`-m'optionsaredefinedforAdvancedRISCMachines
weixin_33989780·2020-09-10 19:48

Hadoop权威指南：知识梳理（二）

第12章关于AvroApacheAvro独立于编程语言的数据序列化系统，支持压缩、可切分意在解决Hadoop中Writable类型的不足：缺乏语言的可移植性Avro模式通常用json编写Avro有丰富的模式解析能力
无影风Victorz·2020-09-10 18:46

【Netty】 Netty高并发应用实践

Netty服务注意事项Netty集群部署需要面临的问题Netty集群部署实践服务注册登录认证和Netty服务器负载均衡异步任务会话管理通讯安全总体架构注意事项行业应用Dubbo阿里巴巴开源服务框架ApacheAvro
一介遗石·2020-09-08 10:38

数据治理篇-数据质量-数据模式: avro概述

前言前面几篇讲过，元数据侧重于配置【驱动】编程的思想，通过建立统一的数据资产，进一步【驱动】企业数字化升级。但数字化升级是个战略性的目标，短期内效果并不明显，甚至很多时候容易引发空谈数字化转型，而达不到实际意义的用途。或者落地之后，产生的效果比预期会低很多。而数据质量往往却是企业当下需要解决的问题。比元数据管理来得更迫切一些。并且元数据是需要数据质量来引导的。1.元数据与数据质量的关系是什么呢？元
larluo_罗浩·2020-08-30 13:15

Flume中自定义Source和自定义Sink

Source组件可以处理各种类型、各种格式的日志数据，包括avro、thrift、exec、jms、spoolingdirectory、netcat、sequencegenerator、syslog、http
苏世不醒·2020-08-28 21:25

netty实现简单RPC

一个RPC框架一般有三个核心部分：1基础的网络通信服务如javanio，netty等，本文使用netty作为基础网络服务2序列化工具，如avro，K
图灵家的油烟机·2020-08-28 14:40

Log4j、Flume、kafka和spark streaming时时日志处理

本次实战flume是1.7版本，kafka是0.10，sparkstreaming是2.2.0版本第一步：flume=》kafka，首先配置flume的source为avro，然后sink为kafka方式
南山小和尚·2020-08-26 14:44

Kafka 中使用 Avro 序列化框架(一)：使用传统的 avro API 自定义序列化类和反序列化类

关于avro的maven工程的搭建以及avro的入门知识，可以参考：ApacheAvro入门1.定义schema文件，并编译maven工程生成实体类schema文件名称为：stock.avsc，内容如下
CoderJed·2020-08-26 12:13

【Flume-工具篇】Flume的安装及使用

官网地址：http://flume.apache.org/第一部分：Flume简介Flume是分布式的日志收集系统，可以处理各种类型各种格式的日志数据，包括avro、thrift、exec、jms、spoolingdirectory
塵世星空·2020-08-26 09:23

sqoop 导入导出数据命令参数详解

username数据库用户名--password数据库密码--target-dir导入到哪一个HDFS目录--table导入关系型数据库哪一张表的数据--as-textfile#导入为文本文件--as-avrodatafile
wtzhm·2020-08-25 05:15

Kafka 中使用 Avro 序列化组件(三)：Confluent Schema Registry

1.schema注册表无论是使用传统的AvroAPI自定义序列化类和反序列化类还是使用Twitter的Bijection类库实现Avro的序列化与反序列化，这两种方法都有一个缺点：在每条Kafka记录里都嵌入了
CoderJed·2020-08-25 01:51

Flume 入门之架构

Source组件可以处理各种类型、各种格式的日志数据，包括avro、thrift、exec、jms、spoolingdirectory、netcat、sequencegenerator、syslog、http
郑永乐·2020-08-24 17:44

Flume 之Source

Flume之sourceSource详解现在介绍几种比较重要的SourceAvroSource监听AVRO端口来接受来自外部AVRO客户端的事件流。
郑永乐·2020-08-24 17:13

黑猴子的家：Sqoop数据导入工具import

选项含义说明--append将数据追加到HDFS上一个已存在的数据集上--as-avrodatafile将数据导入
黑猴子的家·2020-08-24 17:50

Flume Source 实例

FlumeSource实例AvroSource监听avro端口，接收外部avro客户端数据流。跟前面的agent的AvroSink可以组成多层拓扑结构。
weixin_30896511·2020-08-24 17:31

flume各种配置

source1avro从网络收集数据#a2a2.sources=r2a2.sinks=k2a2.channels=c2a2.sources.r2.type=avroa2.sources.r2.bind=
宁君·2020-08-24 16:03

Flume--Load Balancing Sink Processor

假设您有一个拓扑结构，其中第一层从数千个应用服务器接收数据，第二层在将数据推入HDFS之前通过AvroRPC从第一层接收数据。为简单起见，我们假设第一层有100个代理，第二层有4个。
缘定三石·2020-08-24 16:06

Flume-配置解析

sinkorchannel)intheflowhasaname,type,andsetofpropertiesthatarespecifictothetypeandinstantiation.Forexample,anAvrosourceneedsahostname
再努力试试·2020-08-24 15:38

flume+hbase,自定义hbase-sink，hive集成habase

1.编写flume-hbase.confa1.sources=r1a1.channels=hbaseCa1.sinks=hbaseS2a1.sources.r1.type=avroa1.sources.r1
小周先森·2020-08-24 15:07

flume1.6 avro测试

其次编写avro的配置文件，这个可以从flume给的example.conf中去修改就行。
shawn_zhu1·2020-08-24 15:13

Hadoop学习笔记(1)----项目简述

1.Common：一系列组件和接口，用于分布式文件系统和通用I/O(序列化、JavaRPC和持久化数据结构)2.Avro:一种序列化系统，用于支持高效，跨语言的RPC和持久化数据存储3.MapReduce
Eickrow·2020-08-24 15:54

flume-ng avro方式传输数据配置 flume-ng多节点实例

tail-to-avroagent1.sources=source1agent1.sinks=sink1agent1.channels=channel1#Describe/configurespooldirsource1
liyonghui123·2020-08-24 14:40

用Hadoop构建电影推荐系统

Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括
Fens·2020-08-24 14:17

Flume Avro Source 远程连接拒绝解决方法

报错如下：Exceptioninthread"main"org.apache.flume.FlumeException:NettyAvroRpcClient{host:xxxx,port:xxxx}:RPCconnectionerror
doegoo·2020-08-24 14:42

Flume集群配置故障转移，踩过的坑

Agent1:netcatsource----memorychannel-----2AvroSink(hadoop102)Agent2：ArvoSource----memorychannel-----loggersink
Hi Xiu Hui·2020-08-24 13:07

黑猴子的家：Sqoop 命令&参数：import

2--as-avrodatafile将数据导入到一个Avro数据文件中3--as-sequencefile将数据导入到一个s
黑猴子的家·2020-08-24 04:39

【Kafka】Kafka Schema Registry 原理

1.概述原文：https://www.dazhuanlan.com/2019/12/10/5deec4add22d4/Confluent公司为了能让Kafka支持Avro序列化，创建了KafkaSchemaRegistry
九师兄·2020-08-23 18:59

Log4j、Flume、kafka和spark streaming时时日志处理

本次实战flume是1.7版本，kafka是0.10，sparkstreaming是2.2.0版本第一步：flume=》kafka，首先配置flume的source为avro，然后sink为kafka方式
zwb_jianshu·2020-08-23 16:13

Flume整合Kafka框架

zookeeper再启动kafka*先启动flume监听，在启动flume接受data.log的一方*关键部分为kafka对接的conf的配置书写部分image.png先上两个配置文件//exec-memory-avro.conf
冷梦颜情·2020-08-23 04:38

基于spark2的dataFrame和dataSet

文章目录dataFramedataFramewordCount基于dataSet的wordCountdataFramepackagesql2importorg.apache.avro.generic.GenericData.StringTypeimportorg.apache.spark.sql.types
_张不帅·2020-08-23 03:58

三高时代利器：Netty+Redis+ZooKeeper开源字节跳动内推600页笔记

例如火爆的Kafka、RocketMQ等消息中间件、火热的ElasticSearch开源搜索引擎、大数据处理Hadoop的RPC框架Avro、主流的分布式通信框架Dubbo，它们都使用了Netty。
马小梦·2020-08-23 03:02

Kafka生产者

文章目录Kafka生产者1.Kafka生产者组件2.创建Kafka生产者3.发送消息到Kafka3.1同步发送消息3.2异常发送消息4.生产者的配置5.序列化器5.1自定义序列化器5.2使用Avro序列化
小柒sy·2020-08-23 03:57

法伯丽FARBERLY筑梦纽约巴黎时装周，惊艳国际时尚圈！

国货匠心品牌法伯丽FARBERLY，继2018纽约时装周首度合作后，今年再度联手2019纽约时装周及2019巴黎时装周，携手EmmanuelleHouvenagel、EmilyBarbe、VeraVavrova
FARBERLY法伯丽·2020-08-23 03:22

flink sql-clent MATCH_RECOGNIZE kafka 例子

环境flink1.7.2python增长flink1.7.2的lib中的jar，不然会报类找不到sqlavro-1.8.2.jarflink-connector-kafka-0.10_2.12-1.7.2
ruiyiin·2020-08-23 02:16

安装Mavros ubuntu16.04 ROS-kinetic

cd~/catkin_wscatkininit&&wstoolinitsrcrosinstall_generator--rosdistrokineticmavlink|tee/tmp/mavros.rosinstallrosinstall_generator
BlvinDon·2020-08-22 21:18

flume 1.9 源码阅读(四) Source配置

从官网上扒下来的一些资料：AvroSource属性名称默认值描述channels-sources要连接的channelstype-source的类型，这里是
赵大龙·2020-08-22 18:07

实战3:将A服务器上的日志实时采集到B服务器

#跨节点传输采用avrosinkagent选型A机器execsource+memorychannel+avrosinkB机器avrosource+memorychannel+loggersinkexec-memory-avro.conf
洪武·2020-08-22 18:14

Flume总结04_常见面试题

作用Source组件是专门用来收集数据的，可以处理各种类型、各种格式的日志数据，包括avro、thrift、exec、jms、spoolingdirectory、netcat、sequencegene
tyf2007635·2020-08-22 18:06

宽带优化之Flume Avro在个推的实践

这期文章，Mr.Tech邀请了在性能优化方面有着丰富经验的个推高级运维工程师白子画，为大家分享宽带优化之FlumeAvro在个推的实践。
个推·2020-08-22 15:58

Hadoop生态圈中存在的Apache顶级项目

2008年1月，Hadoop成为Apache顶级项目2009年7月，Avro和Chukwa成为Hadoop新的子项目2010年5月，Avro脱离Hadoop项目，成为Apache顶级项目2010年5月，
cdf861015·2020-08-21 13:04

TX2(RTSO-9002）环境配置（ROS，mavros，arduino,ttyACM,串口）

TX2环境配置1、TX2ubuntu16.04换源备份文件：sudocp/etc/apt/sources.list/etc/apt/sources_init.list打开文件：/etc/apt/sources.list将该文件的内容替换成如下内容：debhttp://mirrors.tuna.tsinghua.edu.cn/ubuntu-ports/xenial-updatesmainrestri
A210菜鸡一哥·2020-08-21 06:55

flink1.11 学习篇--DataStream API

特别是有良好支持的Avro。Ja
大D饲养员·2020-08-21 04:55

Hadoop系统通信协议介绍

Hadoop的通信是建立在RPC的基础上，关于RPC的详解介绍大家可以参照[url=http://www.tbdata.org/archives/1413]"hadooprpc机制&&将avro引入
kdnuggets·2020-08-21 04:48

org.apache.flume.FlumeException: NettyAvroRpcClient { host: localhost, port: xxxxx }: RPC connection

multiple_bindingsforanexplanation.SLF4J:Actualbindingisoftype[org.slf4j.impl.Log4jLoggerFactory]20/03/1011:15:44INFOapi.NettyAvroRpcClient
gym02·2020-08-21 03:33

Hive与HBase整合

HiveHBaseIntegrationHiveHBaseIntegrationAvroDataStoredinHBaseColumnsIntroductionStorageHandlersUsageColumnMappingMultipleColumnsandFamiliesHiveMAPtoHBaseColumnFamilyHiveMAPtoHBaseColumnPrefixHidingCol
小徐xfg·2020-08-20 20:09

mavros安装后 catkin build错误

问题CMakeErrorat/opt/ros/kinetic/share/catkin/cmake/catkinConfig.cmake:83(find_package):Couldnotfindapackageconfigurationfileprovidedby"geographic_msgs"withanyofthefollowingnames:geographic_msgsConfig.c
spurmoon·2020-08-20 18:54

我想尝试改回ACfly+T265

我想尝试改回ACfly+T265这个能锻炼一下我写驱动串口通信STM32等等方面的能力，对于我目前找工作可能有些用，我也能学到一些目前用得上的东西，相比于我把MAVROS研究很透彻目前工作可能用不上啊。
诗筱涵·2020-08-20 18:59

mavros中的一些坑

固件：px4控制：通过对mavros发布mavros/setpoint_raw/local话题控制无人机飞行。
kenhuyang·2020-08-20 16:50

PX4之Gazebo多机仿真尝试

Px4源码中已经包含了二机的仿真，运行以下命令：roslaunchpx4multi_uav_mavros_sitl.launch修改Launch相关代码，实现四机仿真：模仿单机UAV1的写法，完成UAV1
爆炒小肥牛·2020-08-20 14:24

阿木/苍穹四轴的那款pixhawk（APM固件）+树莓派+T265的教程（其实是APM官方教程里翻译的）

他们的教程也是用了vision_to_mavros这个功能包！！！！！简直了！！！！这里面也是看vision_pose/pose我感觉我又有机会把SLAM无人机做出来了
诗筱涵·2020-08-20 14:24
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他