0%
5 天学习 Playwright(Day4):文献信息爬取
发表于:
分类于:
后端技术/Playwright
看了那么多天的 Playwright,准备做一个文献信息爬取,设定的需求如下:
- 爬取 PubMed 上,查询词为 maize(玉米)的 100 篇文献
- 要求近 5 年内、摘要可访问的文献
- 单篇文献应该具有以下字段:
- title(标题)
- authors(作者),以英文逗号和空格间隔
- journal(期刊)
- first affiliation(第一单位)
- abstract(摘要)
- pmid(PubMed 文献编号)
- doi(文献数字对象标识)
- publish date(发表日期)
- pubmed_url(详情地址)
- 按 publish date 降序排列
思路
- 打开列表页,每页 10 个文献,爬取文献的标题和详情页地址(10 次)
- 遍历获得的 100 个文献及详情页地址
- 从详情页获取其它信息
- 全部信息获取完毕后,保存至 CSV 文件
编码
编写用于存储数据的模型和将模式数据写入 CSV 的方法:
5 天学习 Playwright(Day3):视频教程学习
发表于:
分类于:
后端技术/Playwright
文档看得差不多,在 B 站上找了个机构的培训视频,播放量挺多,有 4.4w,作为总结。
视频讲的内容相较于文档,内空是少了很多,但也补充了一些和 Selenium 的差异及其它。
5 天学习 Playwright(Day1):Locator、Action、Assertion、Fixture
发表于:
分类于:
后端技术/Playwright
在一次面试的过程中,问到是否接触过爬虫、是否使用过 Playwright,我其实经验不多,爬取网页数据是有做过 的,但 Playwright 没有用过。在一些岗位的任职要求中,也有描述这一工具,所以我打算趁着这段时间,学习 一个 Playwright。
Ollama:部署与使用
发表于:
分类于:
人工智能/大语言模型
Ollama 是大模型的运行平台,本文主要介绍 Ollama 的安装与使用。
安装
听说 Ollama 类似于 Docker 一样,出了 Desktop 版本,所以这次我选择下载 .dmg 文件方式安装。
访问官网下载页面 https://ollama.com/download
Flowise:本地部署、系统架构、技术实现和应用构建
发表于:
分类于:
人工智能/应用平台
Vue 插槽 <slot>
发表于:
分类于:
前端技术/Vue
插槽(<slot>)是 Vue 组件体系中核心的内容分发机制,其核心作用是允许父组件向子组件传递任意模板片段,子组件可在指定位置渲染这些片段,让组件的结构复用与定制化变得更加灵活。
