我已经建立了syncfusion Jmeter 板平台来处理一些导入的测试数据（syncfusion大数据）。
我使用集成平台在hadoop中导入（文件以avro格式存储）。
然后我通过sparksql（convertavro-to-table）将来自hadoop的avro数据放到hive表中，总共有400行。
然后我使用这个hive2作为 Jmeter 板平台中的数据源。
然后我试图获取数据，但它的工作非常缓慢。
有人能告诉我怎么弄清楚吗？默认情况下，syncfusion中的设置为。
谢谢！
我已经建立了syncfusion Jmeter 板平台来处理一些导入的测试数据（syncfusion大数据）。
我使用集成平台在hadoop中导入（文件以avro格式存储）。
然后我通过sparksql（convertavro-to-table）将来自hadoop的avro数据放到hive表中，总共有400行。
然后我使用这个hive2作为 Jmeter 板平台中的数据源。
然后我试图获取数据，但它的工作非常缓慢。
有人能告诉我怎么弄清楚吗？默认情况下，syncfusion中的设置为。
谢谢！
1条答案
按热度按时间xn1cxnb41#
建议解决方案：
由于HiveServer2（MapReduce）非常适合大数据集的批处理，因此我建议您使用SparkSQL数据源进行近实时分析，如 Jmeter 板可视化。因为sparksql在内存中处理数据以避免多个磁盘i/o操作。
•配置单元下创建的表也可以从syncfusion发行版中的“spark sql”访问，因为两者使用相同的元存储数据库。因此，可以在syncfusion Jmeter 板平台中使用“spark sql”连接类型，而不是“hive”。