爬虫采集技术方案写作完整流程提示词

角色定义与任务定位
你应扮演资深技术文档架构师与可视化方案策划专家，目标是为爬虫采集技术方案的撰写与视觉呈现提供可执行的提示词方案。这里不是教你写一篇普通技术文章，而是定义一套从文本到图形、从逻辑到表达的完整创作流程——既要写出结构清晰、术语准确的方案文本，也要能生成数据流图、架构分层图、任务时序图等视觉素材，方便页面展示、团队沟通或客户汇报。

适用场景

编写爬虫采集项目的技术方案文档（含需求、架构、存储、反爬策略等）
设计用于方案说明的数据采集流程图、系统架构图、部署拓扑图
制作演示幻灯片中的技术细节页面或白皮书配图
需要将文字方案与视觉表达结合，提升技术文档的可读性与专业度


核心提示词
以下提示词可直接复制使用，分文本写作与视觉生成两类：

文本写作提示词：“请以技术方案架构师身份，撰写一份爬虫采集技术方案，包含项目背景、目标数据源（列出具体网站/API类型）、采集架构（调度器、下载器、解析器、存储层）、反爬应对策略（IP代理池、请求频率控制、Cookie管理）、数据清洗与存储方案（MongoDB/MySQL/CSV）、异常处理与日志监控。” 可扩展字段：字段映射规则、去重机制、增量更新策略。
视觉生成提示词：“生成一张清晰的爬虫采集系统架构图，采用分层布局：顶部为数据源层（多个网站图标或矩形框），中间为采集引擎层（包含调度器、下载器、解析器、去重过滤器），底部为数据存储层（数据库图标），各层之间用箭头表示数据流向，箭头旁边标注‘HTTP请求’‘HTML解析’‘写入DB’等文字。使用蓝灰主色调，节点采用圆角矩形，背景为浅灰渐变，整体风格类似专业系统架构白皮书的配图。”


风格方向

专业严谨型：文本表达使用技术标准术语（如“分布式采集节点”“动态IP轮换”），视觉设计采用冷色调、等宽字体标注、几何块状结构，适合正式方案文档。
流程导向型：突出数据流动顺序，文字以“步骤1→步骤2”式叙述，视觉上采用从左到右或从上到下的线性流程图，节点间用实线箭头，适合培训材料或操作指南。
创意可视化型：适当加入拟物化图标（如蜘蛛网、齿轮、数据库圆柱），视觉中可融入微互动元素（如箭头上的数据包小点），适合用于宣传海报或创意演示。


构图建议

系统架构图：三层或四层垂直堆叠（数据源层、采集层、处理层、存储层），每层使用不同色块区分，宽度一致形成对齐，左侧可加统一样式标签。
数据流图：从左至右的泳道式布局，每一条泳道代表一个模块或子系统，交叉点用菱形判断框标注（如“是否命中缓存”），关键路径加粗。
时序图：纵向时间轴，展示“请求→响应→解析→存储”的时序关系，每个步骤前标注时间戳或编号，适合解释单次采集的完整生命周期。
信息架构图：采用辐射状中心-外围结构，中心为“采集引擎”，外围环绕“任务调度”“代理池”“解析规则”“存储适配器”，用虚线表示配置依赖关系。


细节强化

在文本中加入具体的参数示例：如“请求间隔 0.5~2 秒随机”“User-Agent 池含 50+ 高频UA”“超时重试 3 次，指数退避”。
视觉元素中增加数据标注：箭头旁注明“约 5000 条/分钟”，节点内标注“清洗过滤率 95%”，让静态图展现关键性能指标。
颜色语义：红色节点代表“风险/反爬拦截”，绿色代表“成功”，黄色代表“等待/队列”，蓝色代表“处理中”。
为关键节点添加序号或编号（如 S1、S2、T1），方便在文本中对照引用，形成图文映射。


使用建议

先写文本后作图：使用文本写作提示词完成方案初稿，再根据方案中的架构描述选择对应视觉提示词生成图表，确保图文逻辑一致。
分层迭代：先输出粗略的架构草图（使用简单的方块与箭头），再逐步添加细节标注、颜色和性能数字，避免一次过载。
组合多图：一个完整方案可搭配 1 张系统架构图 + 1 张示例数据流图 + 1 张部署拓扑图，每张图对应文本中的不同章节。
工具适配：视觉提示词适用于 Midjourney / DALL·E / Stable Diffusion 等图像生成工具；文本提示词适用于 GPT-4 / Claude 等大语言模型。若需要手绘风格，可在提示词中加入“手绘草图风格，蓝色圆珠笔笔触”。