一个奇怪又飘来的人 - 理想家
type: channel
link: https://blog.asenser.cn/index.php/author/1/
description: 理想家
items: 一文读懂2025年Google I/O大会：AI大爆发，未来已来！🚀
items: AI 科学家也能 '团战' 了？AgentRxiv 让 AI 协作搞科研！🚀
items: 简单说说R语言做复杂中介
items: 用R帮助你完成毕业论文实证的常规流程
items: 一个矛盾的故事
items: 一些照片
items: AI大模型有效的提示词技巧（一）
items: PyTorch正菜-图像分类（上）
items: 旅行
items: PyTorch一周目（4）数据预处理技巧

一文读懂2025年Google I/O大会：AI大爆发，未来已来！🚀
type: item
date: 2025-05-21T04:51:12+00:00
description: 引言：AI浪潮席卷I/O，未来已触手可及！✨Google I/O 2025开发者大会于5月20日至21日（美国时间）在山景城盛大举行，毫无疑问，今年的主题依然是“AI”！整个大会充满了对人工智能未来图景的描绘，展示了Google在AI模型、硬件、软件和服务方面的最新进展，让全球科技爱好者和行业观察者为之瞩目 。Google首席执行官桑达尔·皮查伊在主题演讲中强调，当前正处于AI平台转型的“新阶段”，数十年的研究成果正变为现实，人工智能将普惠全球人民 。大会期间，“AI”一词被提及多达92次，虽然比2024年略有减少，但其作为核心焦点的地位依然不可撼动，彰显了Google对人工智能领域的坚定投入和引领决心 。Google在大会上阐述了其AI哲学的深刻转变，从过去“让Google帮你搜索”的被动服务模式，转向了“AI作为你的同事和超能力”的主动协作模式 。这种新哲学强调AI需要更多用户互动，旨在自动化繁琐工作，而非取代人类，从而让AI成为日常生活中不可或缺的实用工具 。这意味着人工智能将以前所未有的广度和深度渗透到我们日常生活的方方面面，从信息搜索、人际沟通到创意内容生成，甚至扩展到穿戴设备领域。曾经只存在于科幻电影中的场景，如今正逐渐变为触手可及的现实。Google致力于让更多智能普惠每个人、每个地方，构建一个由AI驱动的全新数字世界 。Google在AI战略上的这一重要调整，并非仅仅是口号上的变化，而是对市场反馈和竞争格局的深思熟虑。早前的报告显示，随着“AI概览”（AI Overviews）等直接给出答案的功能日益普及，Google搜索结果页的点击率在过去一年中下降了近30% 。这表明，纯粹的自动化虽然提升了部分用户体验，但也可能导致用户与开放网络互动减少，进而影响Google赖以生存的广告业务。因此，Google认识到，用户可能需要对AI有更强的掌控感，并希望AI能更像一个“伙伴”而非一个“黑箱”工具。通过鼓励用户更多地参与到AI的“教导”和“重复”中（例如“代理模式”中的“teach and repeat”功能 ），Google不仅能提升AI的个性化和实用性，还能在用户心中建立更强的信任和依赖感。这种信任和依赖对于应对来自ChatGPT等新兴AI搜索选项的日益激烈的竞争至关重要 。如果这一战略调整成功，它将大大提升用户对Google AI的信任度和日常依赖性，使其成为不可或缺的生产力工具。同时，这也可能改变用户与数字世界互动的方式，从被动接收信息转变为主动与AI共同创造和解决问题。AI融入生活：你的日常将如何被AI“升级”？💡搜索大变身：AI模式让你“想搜就搜”！🔍Google搜索正在经历一场由AI驱动的彻底变革。传统的“AI概览”（AI Overviews）功能每月已服务约1.5亿用户，为他们提供对话式摘要 。在此基础上，全新的“AI模式”（AI Mode）已在美国全面上线，它让用户与Google搜索的互动更像是在与一位无所不知的专家进行对话，能够处理更长、更复杂的查询，并提供更高级的推理能力 。例如，它甚至能回答复杂的体育问题，并支持多步骤推理。Google的愿景是，未来AI模式的能力将无缝融入整体搜索体验，让用户几乎感受不到AI的存在，但又无处不在 。更令人兴奋的是“Search Live”功能。结合了Project Astra的强大视觉能力，Search Live让用户能够通过手机摄像头直接提问和搜索现实世界中的物体 。想象一下，当你对着一辆自行车提问如何修理时，AI能实时识别部件并提供分步指导，真正实现了“所见即所得”的搜索体验 。这种搜索模式的颠覆，以及AI模式和Search Live的推出，意味着Google搜索正在从传统的“链接列表”向“直接答案”和“实时互动”转变 。这一转变的核心在于利用AI强大的推理和多模态能力，直接满足用户复杂的、多样的信息需求，从而减少用户在不同网站间跳转的必要。这种模式虽然极大地提升了用户体验，但也带来了潜在的“点击率下降”问题。BrightEdge的报告显示，过去一年Google搜索结果的点击率下降了近30%，原因在于用户对AI概览的满意度增加 。这对于依赖Google搜索流量的网站和广告商来说，无疑是一个巨大的挑战，可能迫使他们重新思考内容策略和商业模式，例如从传统的搜索引擎优化（SEO）转向AI优化（AIO），或直接与AI平台合作。Google需要在这场变革中平衡用户体验和其核心广告业务的收入。这可能导致Google进一步探索AI驱动的广告形式（例如在AI模式中直接推荐商品或服务），或者通过更深度的集成（如AI模式中的购物功能 ）来留住用户和商业价值。同时，这也可能加速互联网内容的生产方式向“AI友好”方向发展，即内容创作者需要考虑如何让AI更好地理解和摘要其内容。购物新…

AI 科学家也能 '团战' 了？AgentRxiv 让 AI 协作搞科研！🚀
type: item
date: 2025-04-17T13:06:00+00:00
description: AI 科学家也能 '团战' 了？AgentRxiv 让 AI 协作搞科研！🚀哈喽，各位小伙伴们！👋今天想跟大家聊一个超级前沿、超级酷的话题！我们都知道 AI 现在能写诗、能画画、能写代码，简直无所不能 🤖。但你有没有想过，AI 也能像顶尖科学家一样，独立进行科学研究吗？🔬没错！现在的 AI 智能体（Agent）已经开始尝试自主探索科学问题了。但一直以来，它们大多像个“独行侠”，自己埋头研究，很少能像人类科学家那样，站在前人的肩膀上，互相学习、互相启发、共同进步。这就像武林高手闭门造车，进步速度自然就慢了 🤔。✨ AgentRxiv 登场：AI 科研界的“中央图书馆” ✨为了解决这个问题，一群聪明的科研人员提出了一个叫做 AgentRxiv 的神奇框架！🎉你可以把它想象成：一个专为 AI 科学家们打造的 arXiv (全球知名的预印本服务器) 📚一个 AI 研究成果的 共享中心 🌐一个 AI 智能体实验室之间 交流协作 的平台 🤝图1：AgentRxiv 框架概览，展示了 AI 实验室围绕共同目标协作。简单来说，一个 AI 实验室搞出了新发现、新方法，就可以把研究报告（就像人类写论文一样）上传到 AgentRxiv。其他的 AI 实验室就能立刻看到这份报告，学习里面的精华，甚至在其基础上进行改进和创新！💡图2：AgentRxiv 工作流程示意，左边实验室检索论文，右边实验室上传研究成果。🚀 AgentRxiv 带来了什么惊人效果？🚀研究人员进行了一系列实验，让 AI 实验室去攻克一些难题（比如超级复杂的数学基准测试 MATH-500 📐），结果发现：协作 = 更强！📈能够访问 AgentRxiv、学习其他 AI 研究成果的智能体，比那些“单打独斗”的智能体表现好得多！准确率提升了整整 11.4%！这证明了知识共享和迭代学习的力量！图3：单个 AI 实验室在使用 AgentRxiv 后，在 MATH-500 任务上准确率逐步提升。知识能泛化！🌐更厉害的是，AI 在解决数学问题时发现的“独门秘籍”（比如一种叫 SDA 的新方法），竟然也能成功应用到其他完全不同的领域，比如物理、化学、生物、医学问答等，并且同样能提升表现！这说明 AI 学到的不仅仅是技巧，更是通用的解决问题的智慧！💪“团战”加速！💨如果让多个 AI 实验室同时开工，并通过 AgentRxiv 实时共享最新进展，那么科研突破的速度会大大加快！比单个实验室快得多，而且最终能达到的高度也更高（准确率相对提升了 13.7%）！简直是开启了科研“加速器”！图4：三个 AI 实验室并行协作，通过 AgentRxiv 共享成果，更快地提升了准确率。🤔 AI 科研的挑战与未来 🤔当然啦，让 AI 自主搞科研也不是一帆风顺的。目前的 AI 有时也会“一本正经地胡说八道”（专业术语叫“幻觉”😅），或者在实验中遇到各种 bug。所以，现阶段还需要人类科学家的监督和引导。🧐但无论如何，AgentRxiv 的出现，为我们描绘了一个激动人心的未来：AI 智能体不再是孤岛，而是可以互相协作、共同进化。科学发现的速度可能会因为 AI 的加入而指数级提升！想象一下，无数 AI 实验室 24 小时不间断地在全球范围内协作攻关，那将是怎样一幅壮观的景象？🤯好啦，今天关于 AI 协作科研的分享就到这里。AgentRxiv 的概念是不是让你对 AI 的未来充满了更多想象？如果你觉得这篇文章有点意思，让你大开眼界了，请别忘了伸出你的小手手，给我点个【赞】👍吧！ 你的每一个赞，都是我持续分享前沿科技的最大动力哦！💖 期待下次再见！👋

简单说说R语言做复杂中介
type: item
date: 2025-01-16T03:53:06+00:00
description: 简单说说R语言做复杂中介前段时间（好像也挺长时间了），某期刊上的一篇文章引发了比较大的讨论，至少我是刷到了不少视频和文章讲这篇文章。这篇文章将组态分析和回归分析结合了起来，就是这文章名字听着着实唬人，我个人观点，在回归分析里面，就是一个简单、标准的中介。简单中介首先说说简单中介，相对于下面的复杂中介，那么其他的中介，都可以称为简单中介了，比如平行中介，链式中介，有调节的中介。这里放几个画的图这些中介模型相信大家都比较熟悉了，就不多阐述了。复杂中介通过对原文的一个阅读，可知复杂中介模型是一种融合了组态视角和多种分析方法的研究工具，旨在解决传统线性中介模型在面对复杂系统问题时的局限性。原文阐述的步骤如下：检验 $X_{i} \to m$ 因果链：通过完整的QCA分析，探究前因条件 $x_{i}$ 与中介变量 $m$ 的必要和充分两类复杂因果关系，发现驱动 $m$ 的不同组态 $X_{i}$ 。若未发现，则停止分析。此步骤基于整体论视角，利用QCA方法挖掘变量间的复杂关系，突破了传统线性分析的局限，能更好地应对复杂系统中多变量相互依赖的情况。赋值组态 $X_{i}$计算案例在组态包含的所有相关条件中的集合隶属度。对于出现的条件，直接使用案例在该条件集合中的隶属度（通过QCA分析中的校准步骤得到）；对于不出现的条件，使用非集运算计算案例在非条件集合中的隶属度（公式为 $\sim x_{j}=1 - x_{j}$ ）。计算案例在组态 $X_{i}$ 中的集合隶属度，公式为 $mX_{i}=min(x_{1},\cdots,x_{j})$ ，即案例在组态中的隶属度是其在所有相关条件集合中隶属度的最小值。通过这一系列运算，将QCA结果转换为回归分析的自变量，为后续混合分析做准备。检验 $x \to y$ 因果链：通过回归分析，检验驱动 $m$ 的不同组态 $X$ （自变量）与因变量 $y$ 的平均效应关系（$y = cX_{i}+e_{1}$ ），分析自变量 $X_{i}$ 对因变量的总效应 $c$ 。此步骤基于还原论视角，分析近似独立子系统层面的简单关系，与前一步骤的整体论分析形成互补，共同构建起复杂中介模型的分析框架。检验 $m \to y$ 因果链：通过回归分析，检验控制自变量（组态 $X$ ）时，中介变量 $m$ 与因变量 $y$ 的平均效应关系（$y = c'X_{i}+bm + e_{3}$ ）。若系数 $b$ 显著，则说明 $m$ 显著影响 $y$ ，表明组态 $X_{i}$ 通过 $m$ 影响 $y$ 的间接效应存在，即 $X_{i} \to m \to y$ 的复杂中介效应存在。进一步可通过观察系数 $c'$ 判断是否存在直接效应。同时，为避免组态相关导致的多重共线性问题，可将不同组态视为自变量，依次进行独立的回归分析。同样的，也放个图：这里面的关键步骤就是组态的结果如何变成一个自变量，也就是第二步，赋值组态$X_i$，因为qca组态分析已经有很多资料了，大家可以自行查询一下，而回归，或者说中介，大家也十分熟悉了。我们先来了解一下组态的结果是什么类型的、组态的结果有一个条件集合，如下面的x1*x3*x4是一个集合，并且每个样本在每个指标下面都有个隶属度。画一个表格来帮助理解一下：IDx1x2x3x4x510.20.30.90.30.5上面就是样本1对于每个指标的隶属度在计算样本对于条件组态的隶属度之前，我们需要了解组态集合之间的运算关系：OR关系(*)：取最小值原则隶属度 = MIN(条件A的隶属度, 条件B的隶属度)例如:如果A=0.8, B=0.6,则A*B=0.6AND关系(+):取最大值原则隶属度 = MAX(条件A的隶属度, 条件B的隶属度)例如:如果A=0.8, B=0.6,则A+B=0.8NOT关系(~):取补集隶属度 = 1 - 原隶属度例如:如果A=0.8,则~A=0.2现在样本1对于条件组态x1*x3*x4的隶属度计算就是在x1,x2,x4中区最小值，因为组态x1*x3*x4里面的逻辑计算都是OR关系，即取最小值。IDx1x2x3x4x5x1*x3*x410.20.30.90.30.50.2假设现在样本1对组态x1*~x2*~x3*x6 又该怎么计算嘞，一步步来。我们将组态翻译一下：(x1正常取)*(x2取补集)*(x3取补集)*(x6正常取)=(x1)*(1-x2)*(1-x3)*(x6)，那么，现在就跟刚才的情况一样了。IDx1x2x3x4x5x1*x3*x4x1*\~x2*\~x3*x510.20.30.40.30.5(0.2)*(0.3)*(0.3)=0.2(0.2)*(1-0.9)*(1-0.4)*(0.5)=0.1依照这个计算方法，现在每个样本对于每个条件组态都有一个值，那么现在条件组态就可…

用R帮助你完成毕业论文实证的常规流程
type: item
date: 2025-01-15T11:09:02+00:00
description: 用R帮助你完成毕业论文实证的常规流程R语言介绍R语言是一种专门用于统计计算和图形展示的编程语言。它由Ross Ihaka和Robert Gentleman于1993年开发，广泛应用于数据分析、统计建模和数据可视化领域。R语言的特点包括：开源免费：R语言是开源的，用户可以免费使用和修改。强大的统计功能：R语言内置了大量的统计函数和包，支持从基础统计到高级机器学习算法的实现。丰富的图形功能：R语言提供了强大的图形系统（如ggplot2），可以生成高质量的统计图表。活跃的社区支持：R语言拥有庞大的用户社区，用户可以轻松找到相关的教程、文档和扩展包。常用的分析模块一篇标准的统计分析文章通常包含以下几个部分：数据描述：对数据集的基本信息进行描述，包括样本量、变量类型等。描述性统计分析：对数据进行初步分析，如计算均值、标准差、频率分布等。假设检验：根据研究问题提出假设，并进行统计检验（如t检验、卡方检验等）。回归分析：探索变量之间的关系，如线性回归、逻辑回归等。模型评估：对统计模型的拟合效果进行评估，如R²、AIC等指标。结果可视化：通过图表展示分析结果，如散点图、箱线图等。描述性统计分析bruceR是一个R语言包，提供了许多便捷的统计分析函数，其中Describe函数可以快速生成描述性统计结果。以下是使用步骤：安装并加载bruceR包：install.packages("bruceR") library(bruceR)加载数据：data <- read.csv("your_data.csv") # 替换为你的数据文件路径使用Describe函数：Describe(data)该函数会输出每个变量的描述性统计信息，包括均值、标准差、最小值、最大值等。Describe函数的常用参数包括：digits：控制输出结果的小数位数。例如，digits = 2表示保留两位小数。na.rm：是否忽略缺失值，默认为TRUE。trim：用于计算截尾均值，默认为0（不截尾）。check：是否检查数据的有效性，默认为TRUE。示例：Describe(data, digits = 2) # 保留两位小数探索性因子分析探索性因子分析一般用来检验题项与因子之间的对应关系，但假若使用经典量表，一般也不报告这部分分析的内容，而是使用验证性因子分析CFA。共同方法偏差的分析一般也可以报告这部分的结果。探索性因子分析（EFA）用于检验题项与因子之间的对应关系。以下是使用bruceR包的EFA函数的步骤：安装并加载bruceR包：install.packages("bruceR") library(bruceR)加载数据：data <- read.csv("your_data.csv") # 替换为你的数据文件路径使用EFA函数：EFA(data, nfactors = 3) # nfactors指定因子数量该函数会输出因子载荷矩阵、特征值、解释方差等结果。验证性因子分析当使用经典量表的时候，这时需要验证量表的有效性，我的理解是这时候经典量表是否适合你的研究模型，或者理解为本地化是否成功。具体的一些检验指标的概念，大家可以去spssau上面搜索了解，这个平台的帮助手册我觉得十分不错。如何开始嘞，这时一般需要跑几个cfa模型，常见的有以你模型为结构标准的基准模型，一因子，二因子，我看见的也有继续做三因子，四因子的，这里做到多少个因子，我的看法是比你基准模型的因子少就行，或者只做到二因子。因为国人常用一个更骚的方法，叫biafactor,双因子模型，似乎也叫ulmc，就是在基准模型上面加一个全局的方法因子来检验共同方法偏差的存在。首先，我们来看基准模型可以报告哪些指标。# 生成CFA结果的辅助函数 generate_cfa_result <- function(label, fit) { #显示总体结果 # summary(bifactorfit,fit.measures="TRUE") #显示所有拟合指数 # fitMeasures(bifactorfit,fit.measures="all",baseline.model=NULL) tibble( ID = label, Chisq = fitMeasures(fit, "chisq"), df = fitMeasures(fit, "df"), `Chisq/df` = Chisq / df, NFI = fitMeasures(fit, "nfi"), CFI = fitMeasures(fit, "cfi"), IFI = fitMeasures(fit, "ifi"), TLI = fitMeasures(fit, "tli"), GFI = fitMeasures(fit, "gfi"), RMSEA = fitMe…

一个矛盾的故事
type: item
date: 2025-01-06T11:22:46+00:00
description: 开篇李明和小芳相恋三年，感情一直很好。然而，当谈到结婚时，小芳的父母提出了高额的彩礼要求。李明家境普通，根本无法满足这个要求。在一次家庭聚会上，小芳的父母再次提出彩礼问题，李明家表示无法满足，气氛顿时紧张起来。“你们家连这点诚意都没有，怎么放心把女儿嫁给你们？”小芳的父亲冷冷地说。李明父亲无奈地回应：“我们家的条件有限，但我们会尽力。”小芳的母亲插话道：“尽力？尽力是多少？我们要求的不多，只是希望女儿能过得好。”李明和小芳在一旁听着，心中五味杂陈。小芳看着李明，眼中满是无奈和痛苦。她知道，这场争吵只是开始，更大的矛盾还在后面。发展接下来的日子里，李明和小芳因彩礼问题多次争吵。小芳夹在爱情与家庭之间，内心痛苦挣扎。她爱李明，但也不想违背父母的意愿。“李明，你能不能想想办法？我父母那边真的很难说服。”小芳哀求道。李明无奈地摇头：“小芳，我真的尽力了。我们家的情况你也知道，我父母已经拿出了所有的积蓄。”小芳的眼泪潸然落下：“那我怎么办？我不想失去你，但也不想让父母失望。”李明心如刀绞，他知道自己无法满足小芳家的要求，但又不愿放弃这段感情。两人陷入了无尽的争吵和冷战。一天晚上，小芳终于崩溃了。她哭着对李明说：“我们分手吧，我受不了了。”李明震惊地看着她：“小芳，你说什么？我们不是说好要一起面对的吗？”小芳痛苦地摇头：“对不起，李明。我真的没办法了。我父母那边压力太大，我承受不了。”李明心如刀绞，他知道这段感情已经无法挽回。他默默地收拾行李，离开了小芳的家。小芳看着他的背影，眼泪止不住地流下来。高潮几个月后，小芳发现自己怀孕了。她心中既惊喜又恐惧，不知道该如何面对这个突如其来的消息。她决定去找李明，告诉他这个消息。然而，当她找到李明时，却发现他已经有了新的女朋友。小芳心如刀绞，痛苦得几乎无法呼吸。“李明，我怀孕了。”小芳颤抖着说。李明震惊地看着她：“小芳，你说什么？”小芳的眼泪潸然落下：“我怀孕了，是你的孩子。”李明沉默了片刻，然后冷冷地说：“小芳，我们已经分手了。这个孩子，你自己处理吧。”小芳绝望地看着他，心如刀绞。她知道，这段感情已经彻底结束了。结束小芳独自一人回到家中，心中充满了绝望和痛苦。她知道，自己必须面对这个现实。她决定独自抚养这个孩子，不再依赖任何人。然而，就在她准备开始新生活的时候，李明突然出现在她面前。“小芳，我错了。我愿意承担一切责任，我们一起抚养这个孩子。”李明诚恳地说。小芳看着他，眼中满是复杂的情绪。她知道，这段感情已经无法回到从前，但她也不想让孩子失去父亲。故事的结局，小芳和李明重新走到了一起，但他们之间的感情已经不再纯粹。小芳心中明白，这段感情充满了伤痕和痛苦，但她别无选择。故事的结尾，小芳看着怀中的孩子，心中充满了复杂的情绪。她知道，未来的路还很长，她必须坚强地走下去。

一些照片
type: item
date: 2024-10-20T02:47:00+00:00

AI大模型有效的提示词技巧（一）
type: item
date: 2024-09-15T15:04:00+00:00
description: 遇见的一些提示词技巧技巧1:与大模型交流无需使用礼貌用语，如“请”、“谢谢”等，直接表达需求即可这条技巧有一定的价值,但需要谨慎考虑。价值:简洁性: 去掉礼貌用语可以使prompts更加简洁,直接表达核心需求。清晰性: 直接表达需求可以让AI更快理解任务的本质。效率: 在某些情况下,更简短的prompts可能会稍微提高处理速度。需要注意的地方:人性化交互: 虽然AI不需要礼貌用语也能正常工作,但使用礼貌用语可以让交互更自然,更接近人类对话。习惯培养: 保持礼貌可以培养良好的沟通习惯,这在与真人交流时很重要。复杂任务: 对于复杂任务,有时候礼貌用语可以作为语境的一部分,帮助AI更好地理解需求的重要性或紧急程度。举例:直接表达:"分析2023年第二季度销售报告,列出三个主要发现。"带礼貌用语:"请分析2023年第二季度销售报告,并列出三个主要发现。谢谢!"在这个例子中,两种方式都能得到相似的结果。直接表达更简洁,而带礼貌用语的版本可能让交互感觉更自然。结论:这条技巧在技术层面上是有价值的,特别是在追求极度简洁的场景中。但在日常使用中,我建议在直接表达需求和保持基本礼貌之间找到平衡。这样既可以获得清晰有效的回答,又能保持良好的交互体验。技巧2:在提示中指明目标受众，比如说受众是某领域的专家这条技巧确实非常有价值。指明目标受众可以显著提高AI回答的质量和相关性。价值：专业度匹配：指定受众可以让AI调整回答的专业程度，使用适当的术语和概念。内容相关性：AI可以根据目标受众的背景知识和兴趣定制内容。沟通风格调整：AI可以采用更适合特定受众的语气和表达方式。避免解释已知信息：对于专家受众，AI可以跳过基础解释，直接深入核心内容。举例：不指定受众："解释DNA复制过程。"指定受众（专家）："为分子生物学研究生解释DNA复制过程中的复制叉动力学。"指定受众（普通人）："为高中生解释DNA复制的基本步骤，使用简单的类比。"在这个例子中：对专家的解释会涉及更深入的细节，如复制叉的具体机制、各种酶的作用等。对高中生的解释则会使用更基础的术语，可能会用"复印机"或"拉链"等类比来解释过程。另一个例子：不指定受众："描述机器学习在金融中的应用。"指定受众（金融专业人士）："为对冲基金经理解释如何使用深度学习模型优化投资组合配置。"在这个例子中，指定受众为金融专业人士后，AI的回答会更加聚焦于具体的金融应用，使用行业术语，并可能涉及到具体的模型和策略。结论：指明目标受众是一个非常有效的技巧，它能够显著提高AI回答的针对性和实用性。这种方法可以确保你获得的信息不仅准确，而且恰好符合你或你的目标受众的知识水平和需求。在准备演讲、撰写文章或者只是寻求特定深度的信息时，这个技巧尤其有用。技巧3：把复杂任务拆解成一系列简单的提示，以进行交互式对话这条技巧非常有价值，是提高AI交互效果的重要策略。价值：提高准确性：将复杂任务拆解可以让AI更专注于每个小步骤，减少错误和遗漏。增强控制力：你可以在每个步骤后检查和调整，确保过程朝着正确的方向发展。灵活性：允许根据中间结果调整后续步骤，使整个过程更加动态和适应性强。更好的理解：通过逐步推进，你可以更清晰地理解整个过程和AI的思考方式。避免上下文限制：防止单个复杂提示超出AI的处理能力或上下文限制。举例：假设你想创建一个综合的营销计划。复杂单一提示："为一个新的科技创业公司制定完整的营销策略，包括市场分析、目标受众定位、营销渠道选择、预算分配和ROI预测。"拆解成一系列简单提示："让我们为一个新的科技创业公司制定营销策略。首先，请列出进行市场分析需要考虑的5个关键因素。""好的，基于这些因素，请简要描述我们的目标市场。""现在，让我们确定目标受众。请创建2-3个典型的客户角色。""基于这些客户角色，推荐3-5个最有效的营销渠道。""对于这些营销渠道，请提出一个初步的预算分配方案，假设总预算是10万美元。""最后，请为每个渠道设定一个可衡量的ROI目标。"通过这种方式，你可以：在每一步后检查和调整策略更深入地探讨每个方面根据前面的回答调整后续问题避免遗漏重要细节另一个例子：假设你想写一部小说。复杂单一提示："写一个3000字的科幻短篇小说，包括人物描述、情节发展和结局。"拆解成一系列简单提示："让我们一起构思一个科幻短篇小说。首先，请提出3个可能的主要角色，每个角色都有独特的背景和特点。""选择一个角色作为主角。详细描述这个角色的外貌、性格和动机。""现在，让我们设定故事的背景。描述一个未来世界的场景，包括一些科技元素。""基于这个背景，提出一个主角可能面临的主要冲突或挑战。""列出3-5个可能的情节转折点。""选择一个结局。详细描述主角如何解决（或未能解决）面临的挑战。""现在，让我们把所有元素组合起来，写出小说的开头300字…

PyTorch正菜-图像分类（上）
type: item
date: 2024-09-02T16:56:42+00:00
description: 在当今的数字时代，图像分类已经成为人工智能和机器学习领域中不可或缺的一部分。无论是自动驾驶汽车的实时环境感知，还是社交媒体平台上的内容管理，图像分类都在背后默默地发挥着关键作用。尤其是在我们日常生活中，图像分类的应用无处不在。你或许没有注意到，当你用手机拍摄照片时，手机会自动识别图像内容，并为照片添加相应的标签。这一看似简单的功能，实际上背后隐藏着复杂的算法和强大的计算能力，而这正是图像分类的魅力所在。图像分类并不仅仅是技术人员的专利。随着技术的不断发展，它正逐渐渗透到各行各业。无论是医疗领域的癌症诊断，还是零售行业的商品识别，图像分类正在改变我们的生活方式。理解图像分类的基本原理，不仅可以帮助我们更好地应用这些技术，还能启发我们在实际工作中找到更多创新的应用场景。1 图像分类的基础概念图像分类，顾名思义，就是将一幅图像归类到特定的类别中。这种分类可以是二分类（例如识别图片中是否有猫），也可以是多分类（例如识别图片中的不同动物种类）。在计算机视觉领域，图像分类是最基础但又最重要的任务之一，因为很多更复杂的视觉问题都可以归结为图像分类的子问题，例如物体检测、场景识别等。那么，图像分类的应用场景有哪些呢？事实上，它的应用几乎覆盖了所有涉及图像处理的领域。比如，在医疗影像学中，图像分类被用于自动诊断癌症，通过对X光片或MRI扫描的图像分析，辅助医生做出诊断。再比如，在自动驾驶领域，图像分类帮助车辆实时识别路标、行人、其他车辆等，从而确保驾驶安全。而在社交媒体上，图像分类则被广泛用于内容审核和推荐系统，帮助平台自动识别和标记用户上传的照片内容。为了让这个概念更贴近我们的日常生活，让我们来看一个简单的例子。你是否注意到，当你用智能手机拍照时，手机会自动为照片中的物体添加标签？比如，当你拍摄天空时，手机会自动识别并打上“多云”或“晴天”的标签。这正是图像分类在起作用。智能手机内置的图像分类模型，能够识别拍摄场景中的不同元素，并将其归类到相应的标签下。这样的功能不仅可以帮助我们管理照片，还能在某些应用中根据标签推荐相关内容，比如滤镜效果或场景优化建议。2 感知机模型与神经元要理解图像分类的实现原理，我们首先需要了解感知机模型以及其中的核心单元——神经元。感知机模型可以被看作是人工神经网络的基本构建块，它模仿了生物神经元的工作原理，旨在通过简单的数学运算来解决分类问题。感知机的基本结构感知机模型最早由Frank Rosenblatt在1958年提出，是一种用于二分类问题的线性分类器。感知机的结构简单，可以看作是由一层或多层神经元组成的网络。最简单的感知机模型只有输入层和输出层，输入层接受输入信号（即特征向量），而输出层则输出分类结果。感知机的工作过程如下：输入层的每一个输入节点代表一个特征，输入信号通过加权求和（即每个输入乘以一个权重，然后所有加起来），然后通过一个激活函数处理，最后输出分类结果。这个输出结果可以是一个类别的标签，也可以是一个概率值。神经元的作用与计算方式在感知机模型中，神经元是核心运算单元。每个神经元会接受多个输入信号，并为每个输入分配一个权重，这些权重是通过模型训练得到的。神经元将输入信号和对应的权重相乘后求和，得到一个线性组合值。接下来，这个值会经过一个激活函数处理，生成神经元的输出。激活函数的作用是引入非线性因素，使得模型可以处理更复杂的分类问题。数学上，单个神经元的计算公式如下：$$ y = \delta\left(\sum_{i=1}^{n} w_i \cdot x_i + b\right) $$其中，$x_i$ 表示第 $i$ 个输入，$w_i$ 是对应的权重，$b$是偏置项，而 $\delta$ 是激活函数。常见的激活函数包括ReLU（Rectified Linear Unit）、Sigmoid和Tanh等。一个简单的例子是，当我们输入一张图片到感知机模型中时，模型会根据每个像素的值和对应的权重计算出一个结果，这个结果经过激活函数处理后，就得到了该图片属于某个类别的概率。通过不断地调整权重和偏置项，感知机模型逐渐学会如何准确地分类输入图片。Softmax 函数与概率转换在感知机模型中，我们已经了解了如何通过线性组合和激活函数来处理输入信号并得到输出值。然而，这些输出值通常并不能直接用于分类，尤其是在多分类问题中。为了将这些输出值转化为概率，我们需要引入一个关键的函数——Softmax 函数。Softmax 函数的原理Softmax 函数是一种归一化函数，它的主要作用是将一个包含任意实数的向量转换为一个概率分布。具体来说，Softmax 会将输出的数值映射到 [0, 1] 的区间内，并确保所有输出的总和为 1，这样就可以将这些输出解释为各个类别的概率。数学上，给定一个向量 $\mathbf{z} = [z_1, …

旅行
type: item
date: 2024-09-01T17:42:48+00:00

PyTorch一周目（4）数据预处理技巧
type: item
date: 2024-09-01T15:55:00+00:00
description: 数据预处理技巧欢迎来到深入学习PyTorch的一周目课程！本周，我们将探讨数据预处理的关键部分。数据预处理是深度学习项目中不可或缺的步骤之一，它有助于准备数据，以便模型能够有效地进行训练和泛化。在这篇博客文章中，我们将详细讨论数据预处理的技巧和最佳实践。数据预处理的重要性在深度学习中，数据通常是杂乱无章的，包含各种不一致的格式、大小和质量。因此，数据预处理是确保模型获得高质量输入的关键步骤。以下是数据预处理的一些重要目标：数据清洗（Data Cleaning）：处理缺失数据、异常值和噪声，以确保数据的质量。特征工程（Feature Engineering）：选择、构造和转换特征，以提取有用的信息并减少冗余。标准化（Normalization）：对数据进行缩放，以确保不同特征的值具有相似的范围，避免模型受到特征尺度的影响。编码（Encoding）：将分类数据（如文本或类别）转换为数值形式，以便模型能够处理。划分数据（Data Splitting）：将数据划分为训练集、验证集和测试集，以进行模型训练、验证和评估。数据增强（Data Augmentation）：在训练期间通过一些变换（如旋转、翻转等）扩充数据，以提高模型的鲁棒性。批处理（Batching）：将数据划分为小批次，以加速训练过程。数据清洗数据清洗是数据预处理的第一步，旨在处理无效、不一致或缺失的数据。常见的数据清洗任务包括：处理缺失数据：对于缺失数据，可以选择删除包含缺失值的样本、填充缺失值（如均值、中位数或众数），或使用插值方法进行估算。处理异常值：异常值可能会干扰模型的训练，因此需要识别和处理它们。可以使用统计方法、可视化或离群值检测算法来发现异常值。噪声降低：噪声数据可能会对模型性能产生负面影响，因此可以考虑平滑数据，例如使用移动平均或高斯滤波器。特征工程特征工程是数据预处理的关键部分，它有助于提取有用的信息并减少冗余。以下是一些特征工程的技巧：特征选择：选择最相关的特征，以减少维度和降低模型复杂性。特征构造：创建新特征，以捕捉潜在的模式和信息。例如，从时间戳中提取年份、月份和季度作为新特征。特征转换：对特征进行转换，以改变其分布或尺度。常见的转换包括对数变换、正态化和标准化。标准化标准化是确保不同特征的值具有相似范围的重要步骤。标准化通常涉及计算特征的均值和标准差，然后使用这些统计数据对特征进行缩放，使它们具有零均值和单位方差。from sklearn.preprocessing import StandardScaler scaler = StandardScaler() X_train = scaler.fit_transform(X_train) X_test = scaler.transform(X_test)编码深度学习模型通常只能处理数值数据，因此需要将分类数据（如文本或类别）转换为数值形式。常见的编码方法包括独热编码（One-Hot Encoding）和标签编码（Label Encoding）。from sklearn.preprocessing import OneHotEncoder, LabelEncoder # 独热编码 encoder = OneHotEncoder() X_encoded = encoder.fit_transform(X) # 标签编码 encoder = LabelEncoder() y_encoded = encoder.fit_transform(y)划分数据为了训练、验证和评估模型，通常将数据划分为训练集、验证集和测试集。训练集用于模型的训练，验证集用于调整模型超参数，测试集用于评估模型性能。from sklearn.model_selection import train_test_split X_train, X_valid, y_train, y_valid = train_test_split(X, y, test_size=0.2, random_state=42) X_valid, X_test, y_valid, y_test = train_test_split(X_valid, y_valid, test_size=0.5, random_state=42)数据增强数据增强是在训练期间通过一些变换来扩充数据的技巧，以提高模型的鲁棒性。数据增强通常应用于图像数据，包括旋转、翻转、缩放和裁剪等操作。from torchvision import transforms # 定义数据增强操作 data_augmentation = transforms.Compose([ transforms.RandomHorizontalFlip(), transforms.RandomRotation(10),…