2024总结 工作因为产品推广的需要出差到迪拜和新加坡参加口腔展。 因为需要横向扩展产品线,集成不同的硬件系统,对软件的结构做了一系列的改造,就是重构。 针对客户反馈的问题和测试人员的反馈,针对主要业务的模块进行了代码重构,使得架构的可扩展性,可维护性提升,避免不同功能的相互耦合导致的问题。重构的笔记 个人学习2024年的下半年开始, 成为微信读书的重度用户。 下面是一部分书的笔记: 《园丁与木匠》 《置身事 2025-01-08 年度总结 #年度总结
学习RL(二) 第四章节 动态规划4.1 策略评估讨论的是如何在已知策略的情况下计算状态价值函数,从而得到采用该策略的价值有多大。 在DP当中policy evaluation的评估首先要计算状态价值函数,也就做prediction problem。 这里讨论的是如何计算状态价值函数,该函数是从初始的状态迭代计算的,不能无限制地一直迭代下去,这样严重影响实时性,所以上图提出了一种停止计算的终止条件。 还有一个具 2024-10-18 RL #控制算法
《园丁与木匠》 关于作者:艾莉森·高普尼克(Alison Gopnik)是美国加州大学伯克利分校儿童发展心理学教授,也是该领域全世界最顶尖的学者之一。她不仅是一位实验心理学家,也是一位哲学家,一生致力于以跨学科的视角研究儿童的认知与成长。她养育了三个儿子,现有三个不到5岁的孙辈。 本书的框架 这本书我觉得最大的特点是将理论研究和实践结合起来,给父母一个很清晰的框架,在这个框架下,指导父母如何去爱孩子,如何 2024-09-06 Book #读书
学习RL(一) 第二章和第三章文章通过多臂老虎机的问题来展示强化学习的基本概念。对于老虎机来讲,有多种操作选择,每一种操作对应的奖励是不同的,我们不知道操作和奖励的对应关系,但是我们手中拥有很多次机会,来对每次的操作进行选择。每次操作完可以立刻看到奖励,但我们不清楚这个操作对应的奖励在整个奖励的分布是最大、最小还是居于中间状态。 基础概念 行动价值(value of action)就是某种行动的价值或者说奖励分数 2024-07-26 RL #控制算法
《置身事内:中国政府与经济发展》 我作为一个经济和政府运作逻辑的小白,最近看到了一本很多人推荐的书《置身事内:中国政府与经济发展》。希望以此为切入点,了解中国政府在中国经济发展中发挥了什么作用。 我很喜欢两部国产电视剧,一部是《大明王朝1566》,一部是《走向共和》。这两部剧有个共同点:开场第一集中,那些历史上赫赫有名的大人物们,出场都没有半点慷慨激昂或阴险狡诈的样子,反倒都在做世上最乏味的事——算账。大明朝的阁老们在算国库的 2024-07-25 Book #读书
设计模式之“状态模式” 由来最近的项目当中,需要添加新的功能来满足产品需求。因为我们的产品是一个特殊的器械,在机器运行的任何时刻,都可能会有人的操作和介入,所以之前的代码对于各种从外部进来的输入都是使用if else的结构来解决。困难是随着功能的增加,这个if else的代码块会越来越多,并且新的代码可能会把原来的功能破坏掉。为了解耦不同状态下的操作,并且让系统有正确的输出,我们决定重构这一部分的代码。 最近的体会雷军作 2024-07-23 Design Pattern #设计模式
《禅与摩托车维修艺术》 作为一部自传体小说,斐德洛的故事,其实正是本书作者罗伯特·M. 波西格的人生。在《柏拉图对话集》中,斐德洛是一个爱好哲学的普通雅典青年。而在本书中,斐德洛重返人间。他曾经是学哲学的学生,同时也是教修辞学的教师,但是由于哲学理念与文化的世界观冲突,他终于因精神崩溃而住院。出院后,他希望从狭窄而受限的自我解脱,于是开始了一场骑着摩托车横跨美国大陆的万里长旅,一路经过复杂经验与反省思考,终于暂时恢复 2024-07-15 Book #读书
Nvidia Chat With RTX 安装部署 软件下载地址 安装界面 一路点击下一步安装即可。 安装界面2 安装过程需要耐心等待,我可能等了差不多两个小时,最后安装成功。 安装完成之后,在桌面会出现NVIDIA Chat with RTX快捷方式,就是一个启动脚本。 如果是默认路径安装的话,需要修改path: C:\Users\Yang\AppData\Local\NVIDIA\ChatWit 2024-02-20 AI #GPT offline
迪拜AEEDC2024展会 初到迪拜的印象 北京时间早上6点半的航班,首都机场T3航站楼早6:30出发,到达迪拜机场时间是北京时间下午三点。 迪拜的地铁经过市区比较繁华的区域,因为我们参展的迪拜会展中心在城市中心地带,所以从机场可以很方便乘坐地铁到达我们的ibis酒店。 提前办理好的漫游服务,到了迪拜无法使用,后来才知道是当地的服务商选择错误,选上DU的就可以了。 迪拜位置 位于阿拉伯半岛,紧邻阿拉伯海湾。隔海 2024-02-05 Exhibitions #Dubai AEEDC
《思考,快与慢》 第6章 意料之外与情理之中讲系统1如何对发生的事件做判断的,分析了它的工作机理和存在的缺陷 讲了心理学家乔恩的故事,从第一次的惊喜到第二次的习以为常,因果关系的推导在系统1看来,会因为之前发生了一次小概率事件而把之后再次发生类似事件认为习以为常,我个人认为就是条件概率在第二次采样的时候被系统1无意识地调高了。 第16章 因果关系比统计学更有说服力在16章节当中,列举了出租车逃逸的事例。这个问题是要 2023-12-24 Book #读书