本文分类:news发布日期:2024/12/17 12:41:14
相关文章
spark读取普通文件
spark读取普通文件
txt文件
"""
将一行数据当做一个字段,需要自己切割 字段名称为value
表结构 可以从sql中搞
"""
df spark.read.text("../../data/wordcount/input/data.txt")
df spark.read.format("text"…
建站知识
2024/12/17 12:40:13
设计模式学习之——装饰者模式
装饰者模式(Decorator Pattern)是一种结构型设计模式,它允许你动态地向一个现有的对象添加新的行为,同时又不改变其结构。
一、定义与特点 定义:装饰者模式动态地将责任附加到对象上。若要扩展功能,装饰者…
建站知识
2024/12/17 12:33:04
盛元广通畜牧与水产品检验技术研究所LIMS系统
一、系统概述
盛元广通畜牧与水产品检验技术研究所LIMS系统集成了检测流程管理、样品管理、仪器设备管理、质量控制、数据记录与分析、合规性管理等功能于一体,能够帮助实验室实现全流程的数字化管理。在水产、畜牧产品的质检实验室中,LIMS系统通过引入…
建站知识
2024/12/17 12:31:02
数据挖掘与机器学习(part 10)推荐算法Recommendation Algorithm 隐语义模型(LFM) 协同过滤算法 SVD
什么是大数据时代的个性化推荐?
应用场景变化:线下---->线上
数据量变化:少量的客户信息->完备的客户画像
实现方式变化:客户经理的个人判断->数据驱动的智能算法
为什么需要个性化推荐?
长尾分布Long T…
建站知识
2024/12/17 12:30:01
基于Qwen2-VL模型针对 ImageToText 任务进行微调训练 - SA1B-Paired-Captions-Images
基于Qwen2-VL模型针对 ImageToText 任务进行微调训练 - SA1B-Paired-Captions-Images
flyfish
数据说明
from modelscope.msdatasets import MsDatasetds MsDataset.load("Tongyi-DataEngine/SA1B-Paired-Captions-Images",subset_name"default",split…
建站知识
2024/12/17 12:27:57
【conda/cuda/cudnn/tensorrt】一份简洁的深度学习环境安装清单
🚀本文主要总结一下conda、cuda、cudnn、tensorrt的快速安装。至于nvidia显卡驱动的安装,暂且不提。本文适合有一定反复安装经验的读者😂,方便其快速整理安装思路。
NVIDIA Drivers 🌔01conda ⭐️ 注意,c…
建站知识
2024/12/17 12:26:57
第P2周:Pytorch实现CIFAR10彩色图片识别
🍨 本文为🔗365天深度学习训练营 中的学习记录博客🍖 原作者:K同学啊 目标
实现CIFAR-10的彩色图片识别实现比P1周更复杂一点的CNN网络
具体实现
(一)环境
语言环境:Python 3.10 编 译 器: …
建站知识
2024/12/17 12:24:55