- 1unity入门教程（非常详细）从零基础入门到精通，看完这一篇就够了_unity完全自学教程
- 2IDEA教程_config your intellisence settings to help主要是干什么的
- 32024年最全Windows下MySQL的详细安装教程_mysql windows安装教程csdn，太厉害了_windows安装mysql
- 4Intel FPGA高速设计代码原则总结
- 5基于bert的中文语义匹配模型,判断两句话是不是同一个意思
- 6算法沉淀——BFS 解决最短路问题（leetcode真题剖析）_leetcode bfs题
- 7com.fasterxml.jackson.databind.JsonMappingException: (was java.lang.NullPointExcepti 单属性VO在序列化时空指针异常
- 8华为OD机试C卷-- 贪吃的猴子（Java & JS & Python & C）
- 9动手学深度学习 - 3.11. 模型选择、欠拟合和过拟合_动手学深度学习 3.11
- 10MySQL的视图（介绍、创建、修改、更新、重命名和删除）MySQL的存储过程（入门、变量定义、参数传递和流程控制）_mysql 修改视图
windows系统pyspark安装、测试_清华开源下载winutils
赞
踩
自动安装即可
1.下载winutils（替换hadoop的bin文件）
2.下载hadoop安装包（清华镜像）
3.解压（管理员权限）
4.在winutils中找到对应的hadoop版本
将winutils目录下的bin文件复制到hadoop中替换bin文件
5.配置环境
安装pyspaark
1.下载安装包（清华镜像）
2.解压（管理员打开）
3.配置环境
4.将spark文件夹下的pyspark文件复制（我的路径D:\SPARK-HADOOP-WINUTILS\hadoop\spark-3.3.4-bin-hadoop3\python\pyspark）
5.将pyspark文件粘贴到python项目路径下（我的路径 D:\pythonProject\venv\Lib\site-packages）这里各有不同，试一试总能试出来的。
6.安装py4j（直接终端pip，我没有用conda，用conda的可以再找找）ps：如果上面第5步路径找不到，也可以先安装py4j然后找py4j的目录，然后复制过去也行。
检查是否安装成功
这样就是成功了！
注意！我个人在第一次使用的时候产生了一个报错信息24/01/05 16:10:42 ERROR Executor: Exception in task 4.0 in stage 0.0 (TID 4) java.io.IOException: Cannot run program "python3": CreateProcess error=2，我的解决办法是将python.exe复制一份并改名为python3.exe，成功运行。
我在本地写了一个简单的粒子群测试，开了三个线程。
在相同的迭代次数下使用spark的粒子群计算耗时没有增加，但是求解结果分布更紧密，解集质量更高。
这是求解结果的目标空间分布情况
看到最后，如果对你有帮助的话，点个赞吧~
