jhonefer的博客

1. 通过Databricks 连接AWS,拿到的数据表内容是DataFrame. 我们需要用toPandas()方法来进行数据转化 df = data_df.toPandas() 2.获取某一指定的列： test = df['test'] # 获取test 整个列 3. 遍历某一指定列的值： for i in test: print("列值： %s" % i) 4. 比较...

首先逻辑测试在代码层进行。查看开发的SQL代码并进行验证，这样才能确保内部的逻辑的正确性，从而验证： 1）逻辑是否完整 2）利用逆推思维，从where验证SQL 的正确性 开发工具可以在本地也可以在云端，但是在测试前要确保拿到最新的代码。 因为本地连接问题，目前我的测试是在databricks进行连接测试，从而加速测试进度。 测试步骤： 1. 连接获取我要使用的数据表,使用 sp...