小红书禁止所有搜索引擎抓取其内容 只能通过站内手动

小红书禁止所有搜索引擎抓取其内容 只能通过站内手动搜索 目前并不清楚小红书为什么禁止搜索引擎抓取内容，从 SEO 角度来说，允许搜索引擎抓取有助于给小红书带来更多流量，毕竟现在百度都索引了 7 亿多个网页。而且小红书是去年 4 月修改的，所以估计也不是因为防止被抓取内容训练 AI 吧？但小红书目前的内容库拿去训练 AI 确实很有价值，毕竟巨量文字和图片内容。不过 robots.txt 文件只是君子协定，属于防君子不妨小人的那种，除了会导致用户无法从搜索引擎直接查询小红书内容外，其实帮助也不大，毕竟其他非搜索引擎的爬虫也会继续抓取内容，小红书肯定也做了反爬措施了。现在国内的网站禁止搜索引擎抓取已经是个很常见的事情，或者专门预留一些层级目录供搜索引擎抓取想要获得一些流量，更有甚者甚至别说搜索引擎了，就连正常的用户访问也会被拦截，必须注册账号登录后才能继续访问，这显然不是一个好事情。附小红书 2023 年 4 月 2 日的 robots.txt 信息：下面是小红书最新的 robots.txt 信息： ... PC版： 手机版：

内容简介· · · · · ·

内容简介· · · · · · 《春潮纪实系列日本生活困境启示录（套装共3册）》内容简介： 《有恨意但不离婚的妻子们》内容简介：朝日新闻：2014年，丈夫坦白36年前的出轨后，遭70岁妻子殴打致死 日本网络：在搜索引擎搜“丈夫”，最先自动显示的关联词是“去死” 小林美希的采访：虽程度不同，受访者都有过希望丈夫“去死”的念头。 小林美希用跨十年的追踪调查、案例、数据，描摹婚姻真实的裂痕，透过15位采访对象的遭遇，持续追问：夫妻是什么/婚姻是什么/家是什么。原貌记录女性视角，同时补充男性观点，省思固化观念的同时，也向职场文化、社会环境提问，给各年龄段读者一次深入思考婚姻和个人、社会和家庭的机会。 《加害人家属》内容简介：“发生在加害人家属身上的悲剧，追根究底，源自加害人犯下的罪行。加害人没想过自己的行为会把家人卷进来，害家人受苦。如果加害人能事先想到这一点，或许就不会一时冲动而犯罪了。” 铃木伸元无意高声呼吁加害人家属的权利， 但他认为，让大众了解加害人家属的遭遇是有意义的。身为媒体工作者， 因为本书而开启的各项采访，也令铃木伸元再次意识到应该时刻注意媒体的角色与影响力。 《如果一年后，我不在这世上》内容简介：作者将癌症看作思考自我、思考生死的契机，从心理学、临床医学、个人经验等层面为我们上了一堂直抵人心的死亡课。并向所有人发问：倘若无常宣判，我们接下来会选择怎样的生活？ 《成为波伏瓦》内容简介：这本开创性的传记引入波伏瓦此前从未被出版的日记和信件等全新材料，把她从萨特的阴影中拉出来，使她站在属于自己的聚光灯下。这本传记将为读者呈现一个更为真实立体的波伏瓦，也让我们重新看待波伏瓦和萨特的关系。 《人生由我》内容简介：她15岁次登台，22岁结婚，31岁成为破产的单身母亲，随后辗转于3个国家的多个城市开展自己的事业，独立培养出3个出色的子女，同时获得了两个硕士学位。60多岁的她重返模特舞台，在头发变白的时候走红，69岁时，她的形象在美国时代广场独占4个广告牌。她是72岁的“网红”，是众多女性眼中的励志偶像，也许她最出名的标签是“硅谷钢铁侠”、特斯拉公司创始人埃隆·马斯克的母亲，但她更是自己人生的女王，她是梅耶·马斯克。 你很难想象，这样的她也曾因为害怕而多年默默忍受丈夫的家暴，身为令众人艳羡不已的超模却说自己衣品差，在看中名气和年龄的职场圈不断遭遇歧视，拥有成功的后半生但至今仍未遇到可与之共度余生的人。 梅耶在书中真诚地分享了关于美丽、职场、家庭、教育和健康等人生问题的经历和建议，我们或许无法避免遇到与之相似的困境，但可以像她一样积极应对。 《力量从哪里来：面对每一个不敢》内容简介：我是李一诺。回看我的轨迹，是一次次不得不“面对”每一个“不敢”后，得到力量的旅程。这本书虽然讲的是我的故事，但对你肯定不陌生。希望你也能在这里找到自己的内心金矿、光和力量。 《向前一步（珍藏版）》内容简介：在这本全新升级珍藏版中，谢丽尔·桑德伯格不仅为即将毕业的大学生提供了非常实用的职场技巧，同时也增加了很多真实案例，真诚地鼓励所有年龄段的女性勇敢地面对生活的挑战，从事她们真正热爱的职业，并全身心地投入到自己想要的生活之中，体验真正的幸福。 《另一种选择》内容简介：2015年，谢丽尔·桑德伯格的丈夫戴维·格德伯格突然离世，这让她和两个孩子悲痛欲绝，谢丽尔甚至认为，她永远不会拥有真正的快乐，也找不到生活的意义了。几周后，谢丽尔向朋友谈起孩子要参加一个父子互动的活动，朋友们给了她一些建议。谢丽尔说：“我只想要戴维。”朋友抱着她说：“A选择是不可能了，让我们看看B选择吧。”很多人都经历过不同的B选择。我们每天都在面对种种挫折：失业、失恋、失去生活的目标。问题不在于这些挫折是否会发生，因为它们必然会发生，关键在于我们如何面对他们。生活不仅包括我们拥有的，还包括去学习如何从困境中挣扎起身，继续往下走。 《无惧非凡：写给坚持梦想、乘风破浪、向前一步的你》内容简介：这本书讲述了令人鼓舞、扣人心弦的真实故事：在硅谷风投圈这个残酷的、高风险的、由男性主导的、改变经济并塑造我们日常生活的世界里，四位女性如何通过勇气和智慧，克服薪酬不平等、各种打击和背叛，挑战性别歧视观念和巨大风险，在工作、家庭、权力、男人、金钱、离婚、孩子、疾病等挑战中披荆斩棘，目睹并参与投资了脸书、推特等科技企业的创立与崛起，成长为硅谷的明星人物，打破并重新制定游戏规则，塑造了今天的硅谷科技行业格局。从中我们不仅能看到女性的个人奋斗、事业、婚姻家庭、创造财富、投资智慧、交易法则、改变规则等的博弈与进化，韧性与谦逊，成功与失败，经验与教训，还能看到硅谷风投圈与科技圈的真实运作模式。这本书不仅反映了女性追求自我与探索世界的奋斗历程，还再现了硅谷风投与科技企业演进的脉络。四位鼓舞人心的女性，折射出一幅真实的硅谷创业创新生态图景。 《我们选择的自己》内容简介：作者在书里分享了12个自己的个人成长经历和故事，同时从她们在南极进行的三周考察期间对几十名同船的世界各地女性科学家的采访中，精选了8个有代表性的人生故事。 她们的故事和感悟能激励和帮助女性提升自我，增强自身影响力和领导力，同时启发读者关注环境和气候变化问题，为生态文明和可持续发展贡献自己的力量。 《自我赋能》内容简介：作为一个职业女性，相信你会有如下困惑： * 照顾家人，打理家务，是女性天生的职责？ * 在事业的发展上，是否要夫唱妇随？ * 辛苦了一天回到家，面对如山的家务事，如何发泄心中的怨气？ * 如何克服自己想掌控一切的妄念？ * 如何与另一半分担家庭责任，抛出手中的“球”？ * 如何让自己更有力量，从容应对人生？ 蒂法尼用自己的人生故事告诉我们，只有抛开“做完 美女人”的妄想，成为一个内在有力量的人，从周围获得更多支持，才能实现自己的职业梦想，拥有成功幸福的人生。 《做自己人生的CEO：人人都需要的管理术》内容简介： 她从爱哭的职场小白到年轻CEO，只用了6年 她懂得“管理老板”，曾是财经大咖吴晓波器重的左膀右臂 对于管理，她有实战经验，更有**成功案例熟稔于心 她是投资人和成功创业者，更是幸福家庭的CEO 她告诉所有正在为人生拼搏的年轻人：“如果我可以，那么你也可以，通过这12个实用的人生管理术，实现自己想要的人生。”

这位砸人饭碗的开发者，为什么会被网友吹爆？

这位砸人饭碗的开发者，为什么会被网友吹爆？ 为什么要让普通用户多花 30 块钱？于是他熬了一周夜，写了款录屏工具 QuickRecorder。和他的初衷一样，QuickRecorder 完全免费且开源。一个月内，软件不仅在 GitHub 上收藏数超过了 1900 ，还帮到了众多国内外网友，其中也包括我。时间回到几天前，我学妹发来信息问 Mac 录屏怎么没声音。原因我也知道，Mac 自带的录屏就是没法录进系统音频，除非借助第三方工具。由于我自用的是款付费 App ，安装也有点复杂，不太适合学妹。一顿搜索后，我在小众软件论坛里看到了艾洛开发的 QuickRecorder ，同时也被他 “ 暴躁 ” 的开发契机给吸引了，决定试一试。简单体验后觉得挺不错的，于是在 520 那天推荐给了学妹。（ 兄弟萌，我做得对吗？ )咳咳，言归正传。首先 QuickRecorder 支持录制系统和麦克风声音。录屏范围支持全屏、选定区域、特定应用程序，甚至是手机屏幕。一些扩展功能它也有，比如录屏时高亮鼠标，录屏结束后修剪。这样一款软件，体积才不到 5 MB 。如果你是一个普通 Mac 用户，只想要一款简约且免费的录屏工具，那么 QuickRecorder 非常合适你。值得一提的是，我发现艾洛还开发了多款软件。它们不光实用，而且全部都免费开源。比如这款叫 AirBattery 的软件，可以让 Mac 菜单栏、 Dock 栏实时显示所有设备电量（ 包括 iPad 、 iPhone 、手表、耳机 ），简直是苹果全家桶用户秀装备的福音。如果你经常被一些没有深色模式的 App 闪瞎眼，还可以试试艾洛的 AppDimmer ，它可以强制任何 App 适配深色模式。要是你经常误触? Q/ ? W 而不小心关闭应用窗口，可以试试 QDelayer ，它通过 “ 延时确认 ” 确保你不是误触快捷键。另外还有一些主打美观的工具比如 Pixboard，它能在桌面放置一些模拟 LED 像素屏 / 老式 CRT/VFD 显像管的小挂件。具体的我不多介绍了，大家感兴趣可以去 GitHub 搜搜。其实在互联网上类似艾洛这样的开发者并不少，他们也都写出了各种好用工具，并免费分享给所有人。倒是一直以来，我很想知道：到底是什么驱动着他们选择了开源，坚持用爱发电呢？抱着好奇心，我联系上了艾洛。本以为艾洛是个程序员，只是在业余时间开发点小工具。可让人惊讶的是，艾洛从未系统性的学习过任何一门编程语言，也没听过编程教学课程，连主业也与编程没有任何关系艾洛只是一名在学校信息处上班，偶尔负责监考的老师，编程是他的业余爱好。艾洛的工位  ▼纯靠自学，就能到这水平吗？艾洛表示，自己是一个兴趣驱动的学习者。就是他为了解决自己的需求，会去学习对应的编程技术。往往在解决一个需求时，会发现更多新需求，就会学习更多技术。当年 QQ （ Mac 端 ）没适配深色模式，夜晚使用时 be like ：由于在网上找不到合适的解决办法，艾洛寻思自己写一个。于是一款叫 QQDimmer 的软件出现了，它能强行让 QQ 显示深色模式。迭代几个版本后，艾洛发现既然能做 QQ 深色模式，同样也可以做其他 App 的。没过多久，可以让所有 App 适配深色模式的 AppDimmer ，出现在大家面前。在开发这款工具之前，艾洛对苹果的 CoreImage 和 CoreGraphics 框架几乎一无所知，但凭着一股莽劲，他就扎进去了，边学边开发。当然他也遇过研究不明白的时候，这时他都会自行搜索，参考别人的代码，还不行再去找人问。艾洛说君子报仇 10 年不晚， bug 解决不了是自己技术不过关，等修炼好了再回来弄死这些 bug 。就这样，他的编程技术一天天成熟。反正我听完了，只剩两字：佩服。要知道，学习编程是一个累积到爆发的过程。你在前期很长一段时间学的知识，几乎不能解决任何问题。如果无法获得及时反馈，那么在爆发之前，很多人就会觉得困难、枯燥而选择放弃。除非你有着强烈的兴趣爱好，来平衡这般痛苦，才能继续学下去。艾洛，正是这样的人。小时候的艾洛最期待的事，是每周两次的信息课。在他看来，显示屏那头，就是一个充满趣味的新世界。不过，艾洛家里为了防止他沉迷网络，没有购入电脑，也不安装宽带。直到初中的某一天，艾洛攒了一些零花钱跑到旧货市场，用 50 元买了一台 2000 年的古董 ThinkPad 。那是 2012 年， Intel 推出了第三代酷睿处理器， NVIDIA 的 GTX 670 也刚面世， 8GB 内存正成为主流。而艾洛的配置是：单核奔腾 M+128M 内存 +10G 硬盘。“ 这玩植物大战僵尸都卡的配置，装 Windows 也白费了。 ” 于是艾洛选择了 Linux 系统。可一玩不了游戏，二也上不了网，空有一台设备咋办呢？小艾洛只能捣鼓起了系统。由于 Linux 系统里，很多操作都要靠命令行实现，于是在各种机缘巧合下，刚上初中的小艾洛 “ 被迫 ” 触到了编程。一开始他学的是 Bash 脚本，后来为了解决更大的需求，他开始一点点学习 Python ，再之后就到 Swift 。初中毕业后，经过艾洛软磨硬泡，家里给他买来一台 09 年 MacBook Pro ，之后便渐渐走上了开发之路。除了文章前面提到的 Mac 工具，艾洛还在 16-20 年做过几个黑苹果圈爆款的小工具比如 CPU-S ， VGTab ，江湖人送外号 “ 帽子哥 ” 。到现在，你在搜索引擎里还能看到一些帽子哥的痕迹。艾洛曾套 Macintosh 外壳做了黑苹果一体机  ▼至于开发一款录屏软件，要砸别人家饭碗这事。艾洛说，其实他并不是原教旨主义的自由软件支持者，不认为所有软件都应免费开放，自己也做过写爆款 App 后一夜暴富的白日梦。“ 开发者吃饱了饭, 才有力气写出更多好代码。 ”当然这个收费，它必须得合理。这点我也认同。所有的东西背后总有成本，不是你出，就是别人出。适当付费，是对开发者劳动成果的尊重，是对创新的支持。艾洛选择把自己的 App 免费，是因为这些没带来经济压力，也没影响他的生活。在这种情况下，如果能帮到更多人，何乐不为呢？在和艾洛对话里我也发现，他更看重的是情绪价值。放在 GitHub 上收藏数破千，放在 App Store 售卖变现破万，他会选择前者，这是对自己技术最好的证明。艾洛游大明湖  ▼当被问到为什么选择开源，艾洛回答很简单承载了开源太多的恩情。这么多年来，艾洛一身的编程技术都是从开源代码里一点点学来的。没有前辈们的开源，他就不可能学到这些，更别提会有这些 App 。所以艾洛希望自己也能成为这种人，能够帮到想钻进编程世界的年轻人，帮到更多的 “ 小艾洛 ” 。这些话让我想起之前和大家介绍的一个天才程序员 Sindre Sorhus。他是 GitHub 上星星（ 收藏 ）最多的男人，开发了 40 多款软件， 30 多款免费开源。现在看来，艾洛和 Sindre Sorhus 有诸多相似的地方：兴趣驱动，为自身需求写工具，软件轻量化。但 Sindre 毕竟是个天才，也对钱不感兴趣，曾经还拒绝别人的打赏。我觉得，与其希望世上能多几个 Sindre 这样的赛博菩萨，倒不如更实际一点，期待艾洛这样的人能多一点。因为我们身边本就有很多艾洛。这些人平日里也许并不起眼，可能只是你小时候邻居家的大哥哥，长大后仅有一面之缘的同事。他们也做着寻常的工作，每天在为生活奔波，偶尔还帮人修修电脑，内心同样渴望一夜暴富。看起来，他们和我们没啥不一样。但在另一个宇宙里，他们默默地传承着互联网精神，让技术共享，让知识传播，确保每一个 “ 曾经的自己 ” 在踏入这个世界时不受阻碍，稳步前行，也帮无数陌生人享受到了便利。时代车轮滚滚向前，互联网浪潮也一浪接一浪。潮水褪去，留下淡淡痕迹，既为后浪... PC版： 手机版：