Contenido principal

Esta página se ha traducido mediante traducción automática. Haga clic aquí para ver la versión original en inglés.

Arreglos altos y mapreduce

R2026b
Analizar conjuntos de Big Data en paralelo con arreglos altos y datastores de MATLAB® o mapreduce en clusters de Spark™ y Hadoop®, y grupos paralelos

Puede utilizar Parallel Computing Toolbox™ para evaluar expresiones de arreglos tall en paralelo con un grupo paralelo en el equipo de escritorio. Los arreglos altos permiten ejecutar aplicaciones de Big Data que no caben en la memoria de la máquina. También puede utilizar Parallel Computing Toolbox para escalar el procesamiento de arreglos tall conectándose a un grupo paralelo que se ejecuta en un cluster de MATLAB Parallel Server™. Como alternativa, puede utilizar un cluster de Hadoop habilitado para Spark que ejecute MATLAB Parallel Server. Para obtener más información, consulte Big Data Workflow Using Tall Arrays and Datastores.

Funciones

expandir todo

tallCreate tall array
datastoreCreate datastore for large collections of data
mapreduceProgramming technique for analyzing data sets that do not fit in memory
mapreducerDefine parallel execution environment for mapreduce and tall arrays
partitionPartition a datastore
numpartitionsNumber of datastore partitions

Clases

expandir todo

parallel.PoolGrupo paralelo de workers
parallel.cluster.HadoopHadoop cluster for mapreducer, mapreduce and tall arrays
parallel.cluster.SparkSpark cluster for mapreducer, mapreduce and tall arrays (Desde R2022b)

Temas

Ejemplos destacados