爬虫（又称蜘蛛、机器人）是搜索引擎的自动化程序，核心作用是浏览互联网、发现网页、收集信息并存储到索引中，支撑搜索查询响应。

robots.txt是存于网站根目录的文本文件，核心作用是通过特定语法告知搜索引擎爬虫可访问或需忽略的页面/目录，帮助优化爬行效率、节省爬行预算。

爬行、抓取、索引、收录是搜索引擎处理网页的四个连续核心步骤，依次递进且各有明确分工：爬行是发现URL，抓取是下载内容，索引是分析存储内容，收录是页面进入索引可被搜索展示。

nofollow是链接属性，核心作用是阻止权重传递；noindex是页面元标签，核心作用是阻止页面被索引，二者应用对象与效果完全不同。

国内外存在诸多优质SEO论坛，是从业者获取行业知识与资源的关键渠道。国内有SEOWHY、A5 站长网等知名平台，涵盖SEO问答、工具分享等内容；国际有WebmasterWorld等专业社区，覆盖多元营销话题。这些论坛可提供算法动态、技术教程、实战案例等资源，还能获得专家指导与合作机会，助力提升SEO实操能力

PR 值（PageRank）是Google开发的0-10分网页重要性评估指标，曾通过外链数量和质量计算，是衡量网页重要性、影响Google排名及评估网站交易与广告价值的关键指标。但自2016 年Google停止公开更新后，其重要性大幅下降，仅作为算法内部参考和网站权威性辅助判断，如今无需过分关注，更应聚焦网站质量、内容价值与用户体验。