Chapter about This Book License

MapReduce

MapReduce is a two-step approach to data processing. First you map, and then you reduce. The mapping step

transforms the inputted documents and emits a key=>value pair (the key and/or value can be complex). Then,

key/value pairs are grouped by key, such that values for the same key end up in an array. The reduce gets a key and

the array of values emitted for that key, and produces the final result. The map and reduce functions are written in

JavaScript.

With MongoDB we use the

mapReduce

command on a collection.

mapReduce

takes a map function, a reduce function

and an output directive. In our shell we can create and pass a JavaScript function. From most libraries you supply a

string of your functions (which is a bit ugly). The third parameter sets additional options, for example we could filter,

sort and limit the documents that we want analyzed. We can also supply a

finalize

method to be applied to the

results after the

reduce

step.

You probably won’t need to use MapReduce for most of your aggregations, but if you do, you can read more about it

on my blog

and in

MongoDB manual

.

52

---

In This Chapter

In this chapter we covered MongoDB’s

aggregation capabilities

.

Aggregation Pipeline is relatively simple to write

once you understand how it’s structured and it’s a powerful way to group data. MapReduce is more complicated to

understand, but its capabilities can be as boundless as any code you can write in JavaScript.

53

---

54

---