IronBro - 博客园

2024年4月

摘要： 1. 出现问题当通过nvm切换nodejs版本为16以上时，npm install [package]报错：Unexpected token '.' 2. 问题原因该问题不是npm的问题，也不是nodejs的问题，是nvm-windows的问题。 3. 解决问题 nvm-windows已经更新版阅读全文

posted @ 2024-04-29 23:40 IronBro 阅读(833) 评论(0) 推荐(0)

2024年2月

漫谈架构读后感

摘要：今年，新开了一门软件工程的专业课，名字叫做软件体系结构。软件体系结构是具有一定形式的结构化元素，即构件的集合，包括处理构件、数据构件和连接构件。而软件体系结构中最为重要的是对架构的理解和应用。架构作为这门课程的重要的词语，在王概凯Kevin的架构漫谈中有了更加深刻的理解，对于架构也有了一个初步的新的阅读全文

posted @ 2024-02-28 17:10 IronBro 阅读(15) 评论(0) 推荐(0)

2024/2/23学习进度笔记

摘要：贪心算法（又称贪婪算法）是指，在对问题求解时，总是做出在当前看来是最好的选择。也就是说，不从整体最优上加以考虑，算法得到的是在某种意义上的局部最优解。贪心算法不是对所有问题都能得到体最优解，关键是整贪心策略的选择贪心算法一般按如下步骤进行： ①建立数学模型来描述问题。 ②把求解的问题分成若干阅读全文

posted @ 2024-02-23 23:55 IronBro 阅读(50) 评论(0) 推荐(0)

2024/2/17学习进度笔记

摘要：今天终于把git这玩意整好了，半年多都用不了的git clone终于可以用了。。。。。。这半年来真是给我带来了不少的额外任务量在最开始我的git clone其实是能用的，可能是有段时间clone的太慢，我就配置了一个代理，但是配置出了点问题，就导致git clone一直瘫痪至今这一套方案确实是管阅读全文

posted @ 2024-02-17 16:10 IronBro 阅读(17) 评论(0) 推荐(0)

2024/2/16学习进度笔记

摘要： Spark Streaming 支持的数据输入源很多，例如：Kafka、 Flume、Twitter、ZeroMQ 和简单的 TCP 套接字等等。数据输入后可以用 Spark 的高度抽象原语如：map、reduce、join、window 等进行运算。而结果也能保存在很多地方，如HDFS，数据库等。阅读全文

posted @ 2024-02-16 23:20 IronBro 阅读(66) 评论(0) 推荐(0)

2024/2/12学习进度笔记

摘要： spark rdd持久化 from pyspark import SparkContext, SparkConf import os import re from pyspark.storagelevel import StorageLevel os.environ['SPARK_HOME'] = 阅读全文

posted @ 2024-02-12 23:17 IronBro 阅读(52) 评论(0) 推荐(0)

2024/2/11学习进度笔记

摘要：今天学了很多RDD的api 放个目录吧阅读全文

posted @ 2024-02-11 23:14 IronBro 阅读(45) 评论(0) 推荐(0)

2024/2/10学习进度笔记

摘要： RDD，学名可伸缩的分布式数据集（Resilient Distributed Dataset）。是一种对数据集形态的抽象，基于此抽象，使用者可以在集群中执行一系列计算，而不用将中间结果落盘。而这正是之前 MR 抽象的一个重要痛点，每一个步骤都需要落盘，使得不必要的开销很高。对于分布式系统，容错支持阅读全文

posted @ 2024-02-10 23:11 IronBro 阅读(75) 评论(0) 推荐(0)

2024/2/9学习进度笔记

摘要： pychram配置远程虚拟环境阅读全文

posted @ 2024-02-09 23:50 IronBro 阅读(46) 评论(0) 推荐(0)

2024/2/7学习进度笔记

摘要：为什么要用非线性函数要解释这个问题，可以反过来思考一下，为什么激活函数不能使用线性函数。如果使用线性函数，每一层输出都是上层输入的线性函数，无论神经网络有多少层，输出都是输入的线性组合。加深神经网络的层数就没有什么意义了。线性函数的问题在于不管加深层数到多少，总是存在与之等效的「无隐藏层」的神经阅读全文

posted @ 2024-02-07 18:33 IronBro 阅读(44) 评论(0) 推荐(0)

公告