怎样从零开始训练一个AI车手？

怎样从零开始训练一个AI车手？如何快速理解强化学习的概念？驯只猫就行。比如下面这位爷，巨皮。整天就是跑酷、尿炕、抓沙发，搞到人头皮发麻、心态爆炸。直到你忍不了了，决定对它进行残酷的猫德教育。方案是：允中发自凹非寺以后在家，每当它表现出一次守猫德的行为，就奖励一根猫条；而每当它皮一次，你就立刻扑过去，咬它的头……这样反复拉扯两个月之后，你的猫再也不敢皮了——这个过程里发生的事情，就是“强化学习”：一个智能体（你的猫）在与环境（有你的你家）互动的过程中，在奖励（猫条）和惩罚（咬头）机制的刺激下，逐渐学会了一套能够最大化自身收益的行为模式（安静，躺平）。所以其实，养猫跟搞人工智能，道理是一样的。强化学习最著名的代表当然是AlphaGo：几万盘棋，左右互搏，最后无师自通成了独步天下的围棋之神。如果把AlphaGo看作上面例子里的猫，那在训练里，决定它能否获得“猫条”的每盘棋最终的对弈结果——赢了就有好东西吃，输了就要被吃（bushi）。另外，DeepMind开发出过一个能在57款雅达利游戏上都超越人类玩家的智能体，背后依靠的同样是强化学习算法。不过这里的奖励和惩罚机制就要根据不同的游戏来具体设计了。比如玩最简单的吃豆人，就可以对每次吃到豆子的行为进行奖励，对撞到幽灵gg的状况给予惩罚。而除了在游戏领域天空海阔之外，强化学习，其实还能拿来搞自动驾驶。如何训练AI司机为了更方便地说明这件事怎么实现，这里我们借用一个道具：来自亚马逊云科技的AmazonDeepRacer。一辆看上去很概念的小车，跟真车的比例是1比18。车上安装了处理器、摄像头，甚至还可以配置激光雷达，为的就是实现自动驾驶——当然，前提就是我们先在车上部署训练好的强化学习算法。算法的训练需要在虚拟环境中进行，为此AmazonDeepRacer配套了一个管理控制台，里面包含一个3D赛车模拟器，能让人更直观地看到模型的训练效果。有了这套东西，我们就能自己尝试从零开始训练一个AI司机。具体怎么做呢？重点来了：假设这是模拟器里的一条完全笔直的赛道，以及虚拟环境里的AmazonDeepRacer赛车。我们的目标是让赛车以最短的时间冲刺到终点——那么对于这条赛道而言，最好的选择就是让车尽量沿着中线跑，避免因绕路或出界而导致增加时长。为此，我们可以把赛道切分成多个网格，然后给这些网格赋予不同的分数：靠近中间的，给更高的分；在两侧的，稍微意思一下；超出赛道范围的部分属于无效区域，如果碰到，就要从头再来。开跑之后，一开始，赛车并不知道哪一条是最佳路线，只是在像无头苍蝇一样四处乱撞，很多时候还会冲出赛道。但后面，随着试错的次数越来越多，在奖励函数的“指挥”下，赛车会逐渐探索出一条能够获得最高累积分数的路线。理想状况下，一段时间的训练、迭代之后，算法就会学会“直线”最快这条真理。而再把算法部署到车上，我们就能收获一辆会跑直线的赛车。当然跑直线只是一种最简单的情...PC版：https://www.cnbeta.com/articles/soft/1311641.htm手机版：https://m.cnbeta.com/view/1311641.htm

#美国 #芝加哥餐厅 #米其林餐厅

#美国#芝加哥餐厅#米其林餐厅下一家米其林—Cariño其实是之前的BrassHeart主厨Norman卷土重来开的新店，来之前其实有点忐忑，因为最后一次去主厨的旧餐厅时感觉一切都很咸。但没想到新餐厅出人意料的不错。图二是炸猪皮，搭配的是土荆芥芝士酱和涂了辣椒粉的青柠。图三是帝王三文鱼和黄瓜丁/辣椒汁和木槿花做成的鱼生。鱼肉的肥美和黄瓜的清爽形成了鲜明对比。图四泡沫下是玉米黑粉菌和松露做的意大利饺子，旁边的玉米须/玉米粒/玉米慕斯整体甜甜的，大爱。图五从左到右依次是鸡肝酱炸taco/油封鸭肉醋栗tetelas（和传统的不太一样，没用猪肉豆子）/牛油果三文鱼籽tostada(跟几天前吃的Diego有异曲同工之妙）。图六是青椒冰加鱼籽酱，但其实不辣，感觉是很神奇的味道，比之前在Oriole吃的彩椒冰淇淋更合我的胃口。图七是黑麦面包做的quesadilla,里面是黑蒜和瓦哈卡奶酪。主厨说还在优化用到的奶酪，之后可能又不一样了。图八的虾让我想起了ElChe，酸辣的同时还加入了碎香肠。图九的小牛胸腺因为炸过所以很香！像花一样的是炸芭蕉，但感觉味道基本在外面。图十的羊排加入了甜菜和木槿调味，微甜。图十一是鹅肝酱churro搭配鸭汤冲泡的咖啡，对我来说咸了，但能很好的洗掉油脂感。图十二是主厨之前就有的甜点芝士饼，加了番石榴所以酸酸的，但吃到这里已经撑到吃不动了[失望R]后面还有一道巧克力冰淇淋也很不错，忘记拍了…吃到差不多的时候，老板把酒摆了一桌子请我们老客人喝，包括尾图这张[偷笑R]用朋友的话说这叫“饮弹自尽”。很多酒是主厨从墨西哥人肉背回来的，外面很难找到，感兴趣的小伙伴可以试试。毫不夸张地说，新店比旧店BrassHeart更具备拿一星的潜质，我的flag就放这里了～唯一的顾虑是主厨还有家餐厅在坎昆，会经常飞过去，不知道未来餐厅质量把控如何，但目前强烈推荐。餐厅也会参加餐馆周，推出65刀五道菜的简短菜单，强烈推荐抓住机会试试。Cariño:4662NBroadway,Chicago,IL60640

SUNO V3 有点像 Midjourney 的 V3，GPT 的 3.0 版本，给音乐产业带来了很多变化的可能：

SUNOV3有点像Midjourney的V3，GPT的3.0版本，给音乐产业带来了很多变化的可能：1）UGC音乐平台：音乐是创作者头部效应最明显的产业之一，在pre-AI时代，普通人拍的视频可能是具备被消费价值的，因为拍摄的对象可能很有意思，但是普通人创作的音乐或者翻唱的歌是完全达不到及格线的。所以之前做音乐UGC平台的公司基本都没有起来，音乐版权拥有者赚钱很容易，天下苦三大久已。但现在SUNO为代表的AI作曲工具，有点像摄影的发展从一开始要用胶片拍摄和冲洗，变成了数码相机，再变成了手机摄像头。当大量的人突然可以按照自己的想法和歌词生成达到及格线的音乐时，这里面就可能会诞生新的音乐家和大作。于此同时，SUNO也是AIGC应用里面难得的可以形成「内容生产者+消费者闭环」的平台。妙鸭和Midjourney的问题都在于AI产生的内容在本平台上的再消费价值不大。一个人用MJ生成的图片一般来说只对这个生产者本人有价值，但用SUNO生成的音乐不一定。我发现我很自然地就在SUNO上开始听推荐的音乐了，有的还真的有点意思：例子：https://app.suno.ai/song/5c16c93d-0c60-4be1-a65f-c0fafe001a1b这个应该是用了自定义歌词，但听起来真挺可以的。2）个性化音乐：70分的音乐单独听可能价值不大，因为我总可以去听95分的佳作，实际上只有音乐存在「单曲循环」的场景，我们会不断的听最好的歌。但70分的音乐配合合适的场景可能是有用的，尤其是可以随时生成个性化歌词音乐的时候。例子：https://www.bilibili.com/video/BV1Xu4y1n7Jd用AI产生自定义音乐点评电影。3）背景音乐生成器：有一些场景是70分音乐也OK的场景，并且感觉器乐会更容易，因为音乐底层和数学其实是很像的？想起小时候有个假乐队叫班得瑞，就是台湾一个乐队公司把很多风格类似的器乐包装在一起出专辑，而SUNO现在生成的钢琴曲质量已经不错了，感觉凑合可以作为很多咖啡厅的背景声。例子：https://app.suno.ai/song/a0f12ca5-0833-49ce-97f1-cd6094510f2c4）音乐人的Copilot：就跟我们不能现在要求Chatgpt直接写出一部小说一样，对SUNO的要求也不应该是直接生成一首完整的歌，而是作为再创作的起点。SUNO可以首先作为音乐创作者的Copilot。这个地方看起来难点是如何生成专业创作者需要的工程文件（和3D生成遇到的问题类似），分轨的原始音乐素材也是现在最难获得的训练数据。

我记得我第二次从精神病院出院的时候，有个女孩偷偷塞了一张纸条给我，上面写了她妈妈的电话号码，她说告诉她她在里面过的很痛苦，她

我记得我第二次从精神病院出院的时候，有个女孩偷偷塞了一张纸条给我，上面写了她妈妈的电话号码，她说告诉她妈妈她在里面过的很痛苦，她想出去，我出去以后打了那个电话，电话对面的女人说啊啊我也知道她在里面的情况，但她这个情况很复杂嘛我们也没有办法，挂了电话我觉得心都碎了，她以为她还在里面是因为外面的人不知道里面是什么样的，但其实外面的人都知道，正事因此才把她送进去的。忘了是哪一年了，但是是个夏天，我上吊到一半被父母揪下来，他们打了110又打了120，两个警察把又尖叫又踢打的我抓到救护车上开走了，救护车上的人说里面的设备很如果我不乖不能呆在里面，但进去的时候我已经放弃了，没有力气了。宛平南路总部那个时候人满了，我在本区的分部住的，没有特需男女也是分开住的，里面中老年女性的比例吓到我了，因为宛平南路还是有很多年轻人的，分部就像老人院一样，甚至有一个特殊的病房是临终的人呆的，她们二十四小时都躺着，到死都不能自由。其实里面大多数的女人根本就没有病，或者就是轻度抑郁和焦虑，她们的家人把她们送起来只是因为懒得管她们或者嫌她们情绪不好的时候麻烦。把亲人关起来就是这么简单，基本上添油加醋一番精神病院就会收容，因为患者本人说什么都是没人信的，而且医生不会主动放你出去，只有你亲人愿意让你出去你才能出去。我震惊为什么让人失去人权是这么简单，轻松的一句话就能把人送进或者揪出地狱，进去是不能带任何东西的，只能穿病号服和拖鞋，口袋里头发里的东西都给你翻出来，脸盆，牙刷，厕纸，水杯都没有，只能你家人给你带，家人不给你带就是没有了。精神病人是不被当成人看待的，厕所没有门，上厕所就面对着所有其他人，所有人都能看到，每天到点起来，然后集体走到一个像教室一样全是桌子的房间里，然后就坐在桌子旁边，什么都不能做，没有理由也不能起来，到点吃一些煮熟的烂白菜和肉丸，然后到点吃药，到点睡觉。有时候外面的人会运一叠一叠的纸盒子进来，里面的人可以叠纸盒，据说叠一个有几分钱，但是又哪里可以用钱呢，大家叠纸盒只是为了有点事情做而已。我出院的时候看到一个卡车拉着一个个叠好的月饼纸盒出去，心情是那些人过节吃着桌上的月饼的时候，应该想不到是一群精神病人叠的吧。我记得我进去的那天，因为很年轻又有一些乱七八糟的穿孔，很多人都来看热闹，有一个还挺漂亮的女人兴奋地跟我讲她外婆是民国的大小姐，诸如此类，我不知道她外婆知道自己子孙这样会不会开心。我第一次住院的时候遇到一个女孩，她在里面已经呆了十年了，当初是大学生，因为跳楼被送进来，她给我看她的本子，里面写了各种各样的歌词，应该是她能记起来的青春和一切美好的事情了，有多久都没有听过真的歌了呢，耳机因为有线是肯定不能带进去的，鞋带都不能。我后来跟别的住过宛平南路的人聊起，他们都对那个女孩有印象，因为她半只眼球是露在外面的，当初因为想出去，用手指把自己的眼球挖出来，想着趁送医院的时候逃走，但是也没逃走，送回来了，代价是每天睡觉的时候都用束腹带绑在床上，吃饭的时候也要绑在椅子上。她应该还在那里吧，我记得我走的时候她说叫我给她带个菠萝，她好久没有见到菠萝了。我最后也没有给她带那个菠萝，因为我实在不愿意想起来那里的任何事情了，不愿意去想象用手指把自己的眼球硬生生抠出来有多痛，我曾经想过末日来临也许是件好事，也许没有人管她们能逃出来，但那些临终病房躺在床上的人呢，就真的死在那里了吗，曾经好想把整座城市的人一把火烧掉，然后不去想到底谁有资格断定一个人到底是不是人类了【网评】宛平南路出的月饼曾经是网红物，“精神病院月饼”，拿来打卡拔草。那些月饼盒有博主的劳动吗？

重庆发生林火 大批志愿者骑电单车支援灭火行动

重庆发生林火大批志愿者骑电单车支援灭火行动中国重庆本月因持续高温发生山火，经各方共同努力，明火已全部扑灭。除了消防员到场灭火之外，也有一群骑着摩多单车运送不同物资的志愿者上前支援。综合新华社、中新社和《新京报》报道，中国自8月9日以来出现罕见的极端高温天气，重庆市北碚、巴南、大足、长寿、江津等地先后发生多起森林火灾。在北碚缙云山，骑士们顶着40摄氏度的高温，颠簸在崎岖的山林小路，一个又一个摩托车骑手，把油门踩到底，不顾自身安危，第一时间赶到火灾现场。他们有的是专业路试员，有的是摩托车爱好者，有的是外卖员，有的是刚成年的学生，虽然来自四面八方，素不相识，但是都觉得自己比任何人更有理由站出来。只要工作人员拿着喇叭一喊，“谁可以运盒饭”“哪里有空车”“沙滩车来几台”，骑手们便会不约而同地发动车辆，按一声喇叭，扯开嗓子吼上一声，“这里！”不管火势有多凶猛，摩托车骑手们载着物资就往山上冲，碾过碎石子，开上陡山坡，扬起厚尘土。在北碚的山火现场，摩托车轰鸣声几乎从未间断。这些摩托车骑手们，从21日开始在山火现场接力运输。虽被许多人视为英雄，但骑手们反复强调，他们做的事不值一提，真正的英雄不是他们，并提到了很多没有出现在现场的好心人。有的餐厅老板免费提供盒饭，并且在厨房里反复强调，“多点肉，少点黄豆”；有的加油站为这些志愿上山的骑手，免费加油；有的修理店老板，维修完车后，分文不收；有的出租车司机知道乘客是上山帮忙时，直接免单；有的重庆人不能赶去现场，一直在找渠道捐款；有的老乡拦住外地消防员的车不让他们走，一定要把“土特产”塞到他们车里。骑手们也提到了和他们一起并肩战斗的骑友。其中一名志愿者陈晓蛟说：“我知道有些年轻孩子车和油钱都是借来的，自己其实条件并不好，但还是坚持要来现场出一份力。他们这么多天，都没有工资拿，还要自己付油钱。”他们还说到了冲进火线的消防员。其中一名志愿者感叹道，“这么热的高温下，这些消防员就这样径直地走进了火里，一待就是好几个小时。我不敢想象他们是怎么做到的。”...发布：2022年8月28日5:58PM

今天吃饭的时候跟老p聊富士康工厂的事情。说到为什么工人离开，我竭尽自己在微博和其他平台的见闻给他解释，内容包括但不仅限于：

今天吃饭的时候跟老p聊富士康工厂的事情。说到为什么工人离开，我竭尽自己在微博和其他平台的见闻给他解释，内容包括但不仅限于：据说厂区里食堂都关了，工人在里面如果不上工就没饭吃或者吃不饱。留下来的工人更多，没有停工，工资还发着，上工有激励工资。走的人有的是吃不饱，有的是怕感染。虽然青壮年感染没那么可怕，但是有过阳性记录以后再打工可能要被歧视。这个担心其实是很合理的。超话里也有人说为什么没有像上海一样“静默”或者成都那样停工，但是他们本来没多少渠道能得到正确讯息。目前的情况是富士康厂区有大巴可以送人回去，有的地方欢迎工人回老家，有的地方要他们自费隔离。说了一会儿我真是觉得，这事情真的好复杂啊，是我见过的最复杂的社会事件之一。但从一开始，十几万二十万人集中在一个“厂区”里，这本来就是不合理的，这么多人至少是个镇子的规模了（我现在住的这个所谓的city就六七万人），但是医疗、社会支持、教育培训、商业、餐饮、文化娱乐，统统被简化成了“厂区”。以前大型国有企业搞企业办社会虽然公认效率低下应该被淘汰，但好歹还有个“社会”，这个“厂区”环境是高度同质和单一的。这个环境的存在本身就是不合理的。但是为什么从N连跳那会儿就有人说这个环境不合理，到现在它还存在着，印象中一直有人给它辩护，也一直有人在批判，这又很复杂了。【网评】一方面宣传长期后遗症，影响性功能大脑啦，一方面又歧视阳性患者再找工作，同时隔离啥的又条件恶劣吃不好睡不好，一个字“怕”，但是又很难说到底在怕什么……