海量数据处理

大数据处理

DMCTextFilter和HTMLFilter数据过滤器我们已经进入了大数据处理时代，需要快速、简单的处理海量数据，海量数据处理的三个主要因素：大容量数据、多格式数据和速度，DMCTextFilter
hyfsoft·2014-06-25 17:56

大数据处理

DMCTextFilter和HTMLFilter数据过滤器我们已经进入了大数据处理时代，需要快速、简单的处理海量数据，海量数据处理的三个主要因素：大容量数据、多格式数据和速度，DMCTextFilter
hyfsoft·2014-06-25 17:56

海量数据处理

1，海量数据面临的问题：无法在较短时间内迅速解决；无法一次性装入内存。2，解决方法针对时间，搭配合适的数据结构，如Bloomfilter/Hash/bit-map/堆/数据库或倒排索引/trie树；针对空间，大而化小：分而治之/hash映射。分而治之/hash映射+hash统计+堆/快速/归并排序；双层桶划分；Bloomfilter/Bitmap；Trie树/数据库/倒排索引；外排序；分布式处理之
pakko·2014-06-19 12:00

大数据处理

DMCTextFilter和HTMLFilter数据过滤器  我们已经进入了大数据处理时代，需要快速、简单的处理海量数据，海量数据处理的三个主要因素：大容量数据、多格式数据和速度，DMCTextFilter
hyfsoft·2014-06-13 18:03

大数据处理

DMCTextFilter和HTMLFilter数据过滤器我们已经进入了大数据处理时代，需要快速、简单的处理海量数据，海量数据处理的三个主要因素：大容量数据、多格式数据和速度，DMCTextFilter
hyfsoft·2014-06-13 18:03

大数据处理

DMCTextFilter和HTMLFilter数据过滤器我们已经进入了大数据处理时代，需要快速、简单的处理海量数据，海量数据处理的三个主要因素：大容量数据、多格式数据和速度，DMCTextFilter
hyfsoft·2014-06-10 10:06

大数据处理

DMCTextFilter和HTMLFilter数据过滤器我们已经进入了大数据处理时代，需要快速、简单的处理海量数据，海量数据处理的三个主要因素：大容量数据、多格式数据和速度，DMCTextFilter
hyfsoft·2014-06-10 10:06

MapReduce原理

MapReduce 是由Google公司的JeffreyDean 和 SanjayGhemawat 开发的一个针对大规模群组中的海量数据处理的分布式编程模型。MapR
牵着老婆满街逛·2014-06-10 00:00

MapReduce原理

MapReduce 是由Google公司的JeffreyDean 和 SanjayGhemawat 开发的一个针对大规模群组中的海量数据处理的分布式编程模型。MapReduce实现了两个功
杨粼波·2014-06-09 16:00

海量数据处理面试题集锦

说明：本文转自 http://blog.csdn.net/v_july_v/article/details/6685962十七道海量数据处理面试题与Bit-map详解作者：小桥流水，redfox66，July
JXH_123·2014-06-05 16:00

内功修炼

最后，除了程序员编程艺术系列外，再推荐一些资料、书籍和讲座给大家，供大家参考：程序员编程艺术http://blog.csdn.net/column/details/taopp.html；秒杀99%的海量数据处理面试题
dfb198998·2014-05-31 10:00

大数据量、海量数据处理方法总结

  大数据量的问题是很多面试笔试中经常出现的问题，比如baidu google 腾讯这样的一些涉及到海量数据的公司经常会问到。下面的方法是我对海量数据的处理方法进行了一个一般性的总结，当然这些方法可能并不能完全覆盖所有的问题，但是这样的一些方法也基本可以处理绝大多数遇到的问题。下面的一些问题基本直接来源于公司的面试笔试题目，方法不一定最优，如果你有更好的处理方法，欢迎与我讨论。1.Bl
mxdxm·2014-05-28 23:00

[置顶] 收藏一些好网站

将看到的好网站放到这里，以供方便查询1：详细讲解数据结构的网站详细讲解各类数据结构和算法白话经典算法系列算法导论学习总结数据结构源码汇总数据结构与算法系列目录TankyWoo算法专题《算法导论》笔记汇总2：海量数据处理教你如何迅速秒杀掉
a45872055555·2014-05-27 17:00

企业邮箱服务优化软件

阅读更多我们已经进入了大数据处理时代，需要快速、简单的处理海量数据，企业邮箱服务也面临着大数据处理，海量数据处理的三个主要因素：大容量数据、多格式数据和速度。
hyfsoft·2014-05-27 15:00

企业邮箱服务优化软件

阅读更多我们已经进入了大数据处理时代，需要快速、简单的处理海量数据，企业邮箱服务也面临着大数据处理，海量数据处理的三个主要因素：大容量数据、多格式数据和速度。
hyfsoft·2014-05-27 15:00

企业邮箱服务优化软件

我们已经进入了大数据处理时代，需要快速、简单的处理海量数据，企业邮箱服务也面临着大数据处理，海量数据处理的三个主要因素：大容量数据、多格式数据和速度。
hyfsoft·2014-05-27 15:00

十道海量数据处理面试题与十个方法大总结

第一部分、十道海量数据处理面试题1、海量日志数据，提取出某日访问百度次数最多的那个IP。
ticojj·2014-05-26 16:00

十道海量数据处理面试题与十个方法大总结

第一部分、十道海量数据处理面试题1、海量日志数据，提取出某日访问百度次数最多的那个IP。
ticojj·2014-05-26 08:00

从hadoop框架与MapReduce模式中谈海量数据处理

  从hadoop框架与MapReduce模式中谈海量数据处理前言   几周前，当我最初听到，以致后来初次接触Hadoop与MapReduce这两个东西，我便稍显兴奋，觉得它们很是神秘，而神秘的东西常能勾起我的兴趣
guoxiaoqian8028·2014-05-17 23:00

海量数据处理之经典实例分析

有关海量数据处理的一直以来都是互联网企业笔试面试的重点，此类题目也非常多，但归纳起来，主要有以下3类：topK问题、重复问题、排序问题。以下将分别对这3类问题进行详细的分析。
zclau·2014-05-17 00:00

海量数据处理利器之Hash——在线邮件地址过滤

一、需求现在我们需要设计一个在线过滤垃圾邮件地址的方案，我们的数据库里面已经有10亿个合法的邮件地址（称为合法地址集S），当有新的邮件发过来时，要检查这个邮件地址是不是在我们的数据库里面，如果在，我们接收邮件，如果不在，我们就把它当做垃圾邮件过滤掉。二、直觉想到的方法一拿到这个问题，我就想到了用log(n)的折半查找，先将10亿个邮件地址排序，当收到一个邮件地址时，我利用折半查找，看邮件地址是否在
wenyusuran·2014-05-13 14:00

公开数据集

相应之下，目前对于海量数据处理人才的需求也在不断增多，此类人才可谓炙手可热！越来越多的开发者把目光转移到海量数据的处理上。但是不是所有人都能真正接触到，或者有机会去处理海量数据
disappearedgod·2014-05-13 08:49

海量数据解决思路之Hash算法

另外，探讨一下Hash算法在海量数据处理方案中的通用性。最后，从源代码出发，具体分析一下Hash算法在MapReduce框架的中的应用。
zengzhaozheng·2014-05-12 09:36

海量数据解决思路之Hash算法

另外，探讨一下Hash算法在海量数据处理方案中的通用性。最后，从源代码出发，具体分析一下Hash算法在MapReduce框架的中的应用。
zengzhaozheng·2014-05-12 09:36

高并发网站解决方案

海量数据处理分析笔者在实际工作中，有幸接触到海量的数据处理问题，对其进行处理是一项艰巨而复杂的任务。原因有以下几个方面：一、数据量过大，数据中什么情况都可能存在。
u013805103·2014-05-08 22:00

十道海量数据处理面试题与十个方法大总结

第一部分、十道海量数据处理面试题1、海量日志数据，提取出某日访问百度次数最多的那个IP。
long458·2014-05-06 17:00

海量数据处理：十道面试题与十个海量数据处理方法总结

转自：http://blog.csdn.net/v_JULY_v/article/details/6279498第一部分、十道海量数据处理面试题1、海量日志数据，提取出某日访问百度次数最多的那个IP。     
l1258914199·2014-05-01 11:00

海量数据处理与Bit-map详解

 第一部分、十五道海量数据处理面试题1.给定a、b两个文件，各存放50亿个url，每个url各占64字节，内存限制是4G，让你找出a、b文件共同的url？
dong_007_007·2014-04-21 16:00

十道海量数据处理面试题与十个方法大总结

第一部分、十道海量数据处理面试题1、海量日志数据，提取出某日访问百度次数最多的那个IP。
mysee1989·2014-04-17 23:00

教你如何迅速秒杀掉：99%的海量数据处理面试题

标题含有“秒杀”，“99%”，“史上最全/最强”等词汇的往往都脱不了哗众取宠之嫌，但进一步来讲，如果读者读罢此文，却无任何收获，那么，我也甘愿背负这样的罪名，:-)，同时，此文可以看做是对这篇文章：十道海量数据处理面试题与十个方法大总结的一般抽象性总结
okiwilldoit·2014-04-17 20:00

海量数据处理 Bit-map详解

第一部分、十五道海量数据处理1.给定a、b两个文件，各存放50亿个url，每个url各占64字节，内存限制是4G，让你找出a、b文件共同的url？
dong_007_007·2014-04-16 11:00

海量数据处理算法—Bit-Map

1.BitMap算法简介     来自于《编程珠玑》。所谓的Bit-map就是用一个bit位来标记某个元素对应的Value，而Key即是该元素。由于采用了Bit为单位来存储数据，因此在存储空间方面，可以大大节省。2、BitMap的基本思想    我们先来看一个具体的例子，假设我们要对0-7内的5个元素(4,7,2,5,3)排序（这里假设这些元素没有重复）。那么我们就可以采用Bit-map的方法来达
dong_007_007·2014-04-15 15:00

教你如何迅速秒杀掉：99%的海量数据处理面试题

   教你如何迅速秒杀掉：99%的海量数据处理面试题作者：July出处：结构之法算法之道blog前言  一般而言，标题含有“秒杀”，“99%”，“史上最全/最强”等词汇的往往都脱不了哗众取宠之嫌，但进一步来讲
liu515714312·2014-04-10 23:00

架构纵横谈之二 ---- 架构的模式与要点

业务从简单到复杂，应用也在实践中不断扩展，为了解决网站在发展过程中面临的高并发访问、海量数据处理、高可用、高可靠运行等一系列问题与挑战，很多公司在实践中提出了许多的思路与解决方案，这些思路与解决方案在实践的检验中
xjsunjie·2014-04-08 21:08

海量数据处理常用数据结构及方法

大数据时代，海量数据的分析也成为了各大公司面试的热点问题。本文总结了几种常用的方法。 数据结构 bitmap 适用范围：可进行数据的快速查找，判重，删除，一般来说数据范围是int的10倍以下基本原理及要点：使用bit数组来表示某些元素是否存在；判重一般采用2-bitmap，即采用两个bit位来表示一个数据出现的次数（00表示未出现、01表示出现一次、10表示出现两次及其以上） 堆 这里的堆不是我们
IT_PCode·2014-04-02 23:00

十道海量数据处理面试题与十个方法大总结

           海量数据处理：十道面试题与十个海量数据处理方法总结本文之总结：教你如何迅速秒杀掉：99%的海量数据处理面试题。出处：http://blog.csdn.net/v_JULY_v。
吟啸_徐行·2014-04-02 20:00

十道海量数据处理面试题与十个方法大总结

 海量数据处理：十道面试题与十个海量数据处理方法总结作者：July、youwang、yanxionglu。时间：二零一一年三月二十六日本文之总结：教你如何迅速秒杀掉：99%的海量数据处理面试题。
zwx19921215·2014-04-01 22:00

海量数据处理：十道面试题与十个海量数据处理方法总结

 海量数据处理：十道面试题与十个海量数据处理方法总结作者：July、youwang、yanxionglu。时间：二零一一年三月二十六日本文之总结：教你如何迅速秒杀掉：99%的海量数据处理面试题。
u010454729·2014-03-30 22:00

大数据量的算法面试题

时间：二零一一年三月二十六日说明：本文分为俩部分，第一部分为10道海量数据处理的面试题，第二部分为10个海量数据处理的方法总结。有任何问题，欢迎交流、指正。
myhadoop·2014-03-29 13:00

大数据量的算法面试题

时间：二零一一年三月二十六日说明：本文分为俩部分，第一部分为10道海量数据处理的面试题，第二部分为10个海量数据处理的方法总结。有任何问题，欢迎交流、指正。
myhadoop·2014-03-29 05:00

从Hadoop框架与MapReduce模式中谈海量数据处理（含淘宝技术架构）

 从hadoop框架与MapReduce模式中谈海量数据处理前言   几周前，当我最初听到，以致后来初次接触Hadoop与MapReduce这两个东西，我便稍显兴奋，觉得它们很是神秘，而神秘的东西常能勾起我的兴趣
csliuruidongdn·2014-03-27 10:00

来广州传智播客学Hadoop需要什么基础

来广州传智播客学Hadoop需要什么基础  随着云计算和大数据的发展，产业界正在经历一次重大变革，特别是基于云计算的海量数据处理，改变着工程师思考的方式和习惯，开发者们越来越有必要了解Hadoop的构架与设计原理
test_client·2014-03-19 17:00

Hadoop其他知识_网络拓扑(25)

在海量数据处理中，其中主要限制因素是节点之间数据的传输速率---带宽很稀缺，这里的想法是将两个节点间的带宽作为举例的衡量标准。                                    
肖鋭·2014-03-16 20:00

大数据量的算法面试题

原链接：http://blog.csdn.net/v_july_v/article/details/7382693何谓海量数据处理？  所谓海量数据处理，无非就是基于海量数据上的存储、处理、操作。
wodeyijia911·2014-03-13 18:00

IT旅途――程序员面试经验分享

[1]教你如何迅速秒杀掉：99%的海量数据处理面试题 本文分成两部分。
280441589·2014-03-08 11:00

Hadooper-Map/Reduce编程模型实现海量数据处理—数字求和

Map/Reduce编程模型型的原理是：利用一个输入key/valuepair集合来产生一个输出的key/valuepair集合。MapReduce库的用户用两个函数表达这个计算：Map和Reduce。HadoopMap/Reduce实现主要是通过继承Mapper和Reducer两个抽象类，并实现map和reduce两个方法实现的。MapperMapper 将输入键值对(key/valuepair
today20080808·2014-02-28 09:00

教你如何迅速秒杀掉：99%的海量数据处理面试题

 教你如何迅速秒杀掉：99%的海量数据处理面试题作者：July出处：结构之法算法之道blog前言  一般而言，标题含有“秒杀”，“99%”，“史上最全/最强”等词汇的往往都脱不了哗众取宠之嫌，但进一步来讲
zhu_9527·2014-02-20 21:00

从hadoop框架与MapReduce模式中谈海量数据处理

MapReduce这两个东西，我便稍显兴奋，觉得它们很是神秘，而神秘的东西常能勾起我的兴趣，在看过介绍它们的文章或论文之后，觉得Hadoop是一项富有趣味和挑战性的技术，且它还牵扯到了一个我更加感兴趣的话题：海量数据处理
u013703188·2014-02-20 08:00

Hash表的一种实现

Hash是在数据统计和海量数据处理中经常使用到的一个方法和数据结构。Hash支持的外部操作：插入新数据、查找数据。
luckyjoy521·2014-02-17 09:00

从1亿个ip中找出访问次数最多的IP

看了教你如何迅速秒杀掉：99%的海量数据处理面试题一文，的确是挺有收获的，特别是对这种海量数据的处理，的确是有了一个挺清晰的思路，特别感谢原文博主July。
foolsheep·2014-02-16 18:00
上一页 24 25 26 27 28 29 30 31 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他