摘要: 今天大数据测验,分为数据清洗,数据分析,数据展示三个部分 数据清洗用python清洗的,速度快,然后编写容易,然后将清洗的数据上传到虚拟机,使用hive去分析,最后将结果导出到mysql,最后使用echarm图表可视化。 因为数据量小,2000左右的数据,导致用大数据的技术,比不用还要慢,(也可能是 阅读全文
posted @ 2025-12-15 23:38 臧博涛 阅读(0) 评论(0) 推荐(0)
摘要: 1. 工厂方法模式 核心意图:定义一个用于创建对象的接口,但让子类决定将哪一个类实例化。工厂方法模式使一个类的实例化延迟到其子类。 解决的问题:依赖具体类:在代码中直接 new一个具体对象,使得客户端代码严重依赖于具体类。一旦需要更换对象,修改起来非常麻烦。违反开闭原则:当需要增加新的产品类型时,必 阅读全文
posted @ 2025-12-12 23:30 臧博涛 阅读(6) 评论(0) 推荐(0)
摘要: uniapp体验。 uniapp属于手机端多平台的统一开发,它用一个项目的代码就能打包发布到各个平台上去,如微信,抖音,安卓软件等。 并且是以vue组件的形式去写uniapp,美化程度高,写的难度低,相比原生安卓程序上手难度低 阅读全文
posted @ 2025-12-11 22:52 臧博涛 阅读(5) 评论(0) 推荐(0)
摘要: 设计模式还有不到两周就要考试了,现在需要抓紧复习,这方面知识点少。 主要就是uml建模,类图,设计原则,23种设计模式,需要记的东西多,还需要理解着去记,还需要跟代码实际结合。虽然学过一遍,但是好像掌握不了设计模式的精髓,也用不到项目里面去,或者已经用到了,但是不知道是什么。 设计模式有很多年了,但 阅读全文
posted @ 2025-12-10 23:23 臧博涛 阅读(8) 评论(0) 推荐(0)
摘要: 今天把大数据的作业写完。 基础层 (实验1-2): 环境与存储 技能获取: 熟练使用 Linux Shell 和 Hadoop HDFS Shell 进行系统与分布式文件管理。 核心认知: 理解分布式文件系统(HDFS)的核心思想——数据分块、多副本存储,并掌握其基础API操作。这是所有大数据计算的 阅读全文
posted @ 2025-12-09 23:27 臧博涛 阅读(10) 评论(0) 推荐(0)
摘要: 之前安装过mongodb,我也记得发过安装教程和启动教程,但是博客园就是找不到,现在来记录一下怎么启动的 1.首先到Bin里面打开命令行 然后输入特定指令,这个指令与路径有关,后面的需要写你对应存储的路径 .\mongod.exe --dbpath "E:\Program Files\mongodb 阅读全文
posted @ 2025-12-08 17:26 臧博涛 阅读(10) 评论(0) 推荐(0)
摘要: 今天尝试用ai生成爬取京东评论的程序,但是怎么整也不行,这反扒机制太强了,然后参考舍友的一篇博客的代码。里面有一项新的技术DrissionPage,这种是完全模拟用户行为来获取想要的数据 优点是能完美解决反爬问题,因为就是平常用户看评论,在浏览器上打开京东,打开评论区,看评论,和传统爬虫直接发送请求 阅读全文
posted @ 2025-12-07 23:29 臧博涛 阅读(9) 评论(0) 推荐(0)
摘要: 今天写机器学习的作业,不调用库的算法实现训练,一启动编译器就卡的动不了。之前没这种情况,而在之后发现了问题,改成调用库函数。然后就没有那么卡了。 今天重新看心理咨询的设计,想着重构一下,功能上实际上没那么多,但是由于缺少甲方这么一个角色,对于业务逻辑的掌控,设计上面不行,只能完成一些基础的,表面上符 阅读全文
posted @ 2025-12-05 23:42 臧博涛 阅读(8) 评论(0) 推荐(0)
摘要: 设计软件案例分析项目的文档。 目前思路是先开发业务逻辑简单,完成不依赖于其他表的表,完成其增删改查。 🏠 系统核心功能模块(简化版) 1. 用户登录与首页概览 登录功能 简单登录窗口:用户名、密码输入框 + [记住密码]复选框 + 登录按钮 登录成功后跳转到首页 首页概览 显示关键数据卡片:商品总 阅读全文
posted @ 2025-12-03 23:07 臧博涛 阅读(8) 评论(0) 推荐(0)
摘要: 目前由于自动写代码trae,cursor等工具出现,导致写代码也不需要cv了,直接输入问题让ai改。 对于小型项目,trae能实现快速原型,就是速度慢。我的想法的以后的能力提升侧重于如何设计,然后再把设计喂给trae自动生成。 阅读全文
posted @ 2025-12-02 23:45 臧博涛 阅读(11) 评论(0) 推荐(0)