以编程方式导入大数据
从关系数据库导入大数据到MATLAB中®使用命令行工作空间
你可以使用DatabaseDatastore
对象导入大数据到MATLAB工作空间。要创建此对象,请使用databaseDatastore
函数。在将数据导入MATLAB工作区之后,您可以使用高数组来分析数据。此外,MapReduce编程技术在分析大数据时提供了更大的灵活性。
要将一个SQL查询拆分为多个SQL页查询并按块导入大数据,请使用splitsqlquery
函数。您可以通过使用数据库工具箱™函数或并行池(需要并行计算工具箱™)访问大型数据。
功能
主题
- 处理大型数据集
导入和导出存储在数据库中的大型数据集。
- 使用DatabaseDatastore对象导入大数据
创建一个
DatabaseDatastore
对象,用于访问存储在关系数据库中的数据集合。 - 使用高数组分析数据库中的大数据
通过使用高表在大数据集中找到最小值。
- 利用MapReduce分析数据库中的大数据
编写用于分析大数据的mapper和reducer函数
DatabaseDatastore
对象。