Lianz Blog

「天地之化日新」

Math RL

西湖大学赵世钰老师 Ch0 Introduction Ch1-3 基础概念、贝尔曼 Ch4-8 用不同的方式去计算value Ch9 直接优化policy Ch10 结合policy和value Ch1 Basic Concepts in Reinforcement Learning Markov Decision Process Markov：Marko...

Posted by Lianz on June 28, 2024

代码随想录

题目顺序来源https://programmercarl.com/ [toc] 1.数组 @20240605 1.1数组理论基础数组是存放在连续内存空间上的相同类型数据的集合。数组可以方便的通过下标索引的方式获取到下标下对应的数据。注意：数组下标从0开始数组内存空间的地址是连续的数组内存空间连续，增删...

Posted by Lianz on June 5, 2024

强化学习

根据知乎用户@heaven的系列博客整理（https://www.zhihu.com/people/yu-xin-hang-22/posts?page=4）目录 [toc] 1.1 什么是强化学习强化学习主要是属于机器学习范畴的一类问题，通常会为这类问题定义以下几个元素：智能体 Agent 环境 Environment 动作 Action 状态 ...

Posted by Lianz on September 10, 2023

Leetcode solution using Python

题目顺序来源https://neetcode.io/practice [toc] Arrays & Hashing Problem 217. Contains Duplicate Given an integer array nums, return true if any value appears at least twice in the array, and ...

Posted by Lianz on July 2, 2023

安装Picgo

安装Picgo时，提示已损坏，无法打开，请移至废纸篓目录 [toc] 安装环境 m1 pro，ventura 13.1 安装包 PicGo-2.3.1-arm64.dmg 下载链接：https://github.com/Molunerfinn/PicGo/releases/tag/v2.3.1 解决方案第一步，因为Mac在安装来自第三方的软件时，会进行验证。在S...

Posted by Lianz on June 6, 2023

Mac Shell切换

关于如何切换Mac的shell命令目录 [toc] 1. 查看所有的shell 以下两行语句均可查看系统目前可用的shell，区别不大。 1 cat /etc/shells 或者 1 more /etc/shells 2. 查看当前shell版本以本人正在使用的zsh为例。 1 2 # NameOfShell --version zsh --ver...

Posted by Lianz on April 14, 2023

Python-URL-OpenError

关于如何解决以下报错：urllib.error.URLError: <urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: self signed certificate in certificate chain (_ssl.c:997)> 通过URL链接数据集 1 2 3 ...

Posted by Lianz on April 1, 2023

Usage of Typora

Simple usage of typora 块元素段落 Use Return to create a new paragraph 单个换行shift+return 标题 #一级标题 ##二级标题 ######六级标题引用 ”>”即可添加引用，允许嵌套，添加空格即可列表使用来创建无序列表或者+ 或者 - ...

Posted by Lianz on March 29, 2023

Python-Array-Input

如何输入一维、二维数组一维数组 1 2 3 4 5 6 arr = input() 以空格作为间隔 nums = [int(n) for n in arr.split()] 二维数组 1 2 3 4 5 6 7 8 9 n = int(input()) # 输入二维数组的行数和列数 line = [[0]*n]*n # 初始化二维数组 for i in rang...

Posted by Lianz on March 9, 2023