读算法霸权笔记12_数据科学

2024-01-06 13:52

本文主要是介绍读算法霸权笔记12_数据科学,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1. 公平与公正

1.1. 公平大多数时候只是副产品

1.2. 由贪婪或偏见导致的不公正一直发生在我们身边

1.2.1. 如果承认法律面前人人平等,或者作为选民的大众应该被平等对待,我们就不能允许模型把我们分为不同的群体进行区别对待

1.3. 对于数学模型来说,公平和公共利益也是如此,其价值难以用数字体现

1.4. 公平和公共利益是仅存在于人脑中的概念,无法量化

1.5. 虽然更高水平的公平和正义肯定有利于提升社会的整体利益,但单个企业无法从中获得实际的收益

1.6. 进步有一个可怕的阴暗面

1.6.1. 进步的动力来源于被极度剥削的工人,其中甚至有很多是儿童

1.6.2. 自由市场无法控制这些剥削行为

2. 成功的模型应用?

2.1. 一个模型的成功与否往往以利润、效率或者违约率等,为标准这几乎都是一些可以计算的标准

2.2. 站在谷歌的角度,用户每点击一次广告就会产生25美分、50美分甚至几美元的收入,因此,这的确是成功的

2.3. 站在社会的角度,穷人只是搜索了一下政府服务就被锁定了,很多穷人因此深陷虚假承诺和高利率贷款的泥潭

2.3.1. 人们需要食品券这一事实首先就表明了市场经济的萧条

2.3.2. 政府企图利用大众缴纳的税款弥补这种萧条带来的损失,并寄希望于食品券能让申请者实现自给自足

2.4. 没有任何法规明确阻止信用评分公司把地理位置这一种族因素的替代变量纳入评估模型

2.5. 相比较于汽车贷款申请,房屋按揭贷款的申请筛选更容易发生种族偏见

2.5.1. 种族身份是申请表中必填的一项

2.6. 教师的教学表现对于数学模型来说是一个太过复杂的概念,可用来训练模型的数据都是一些粗糙的替代变量

2.6.1. 只有当我们的模型是一个拥有积极反馈回路的生态系统时,我们才有可能利用数据改善教育

2.6.2. 在此之前,评估模型只是一种惩罚性的工具

2.6.3. 内部模型的输出结果(在教师评估案例中就是对教师的评价)也必须要接受公平性方面的审查

3. 数学杀伤性武器总结

3.1. 承诺效率和公平,却扭曲了高等教育,推高了债务,助长了大规模监禁,在每一个人生的重大关头打击穷人,破坏民主

3.2. 会互相滋养、固化

3.2.1. 穷人更可能信用差,居住在犯罪高发区,周围的人也都是穷人

3.2.1.1. 贫穷越发有害并且摆脱代价巨大

3.2.2. 富人则感觉到这个世界似乎越来越智能便捷了

3.2.2.1. 把富人送去阿鲁巴岛度假,让他们竞争沃顿商学院的入学名额
3.2.2.2. 向他们推送意大利熏火腿和基安蒂红葡萄酒的促销信息
3.2.2.3. 在亚马逊金牌会员服务的主页上为他们推荐新上映的大电影
3.2.2.4. 引导富人探寻某个处于曾经的贫民街区的咖啡馆

3.3. 暗箱操作,把民众整体进行分组归类

3.3.1. 在幕后对我们的远亲近邻施加伤害,而且是极为广泛的伤害

3.3.2. 穷人首当其冲,中产阶级也难逃一劫

3.3.2.1. 穷人是最容易下手的目标,他们获取信息的渠道更少,有更多的人正处于绝望当中
3.3.2.2. 穷人遭受了大范围的伤害,而上层阶级则称之为不可避免的牺牲
3.3.2.3. 贫穷更像是一种疾病,通常采取的做法是隔离它,防止这种疾病传播到中产阶级

3.3.3. 大多数受害者经济实力欠缺,缺乏律师资源,也没有资金充足的政治组织为他们而战

3.3.4. 富人阶层也难逃一劫,盯上他们的是政治模型还有大学入学申请的评估模型

3.3.4.1. 真正做的只是破坏高等教育的公平性

3.4. 创造惊人利润空间的数学杀伤性武器不太可能长期在小范围内运作,这不符合市场的规律

3.4.1. 它们会进化、传播,寻找新的机会

3.5. 数学杀伤性武器为搜索引擎、顾客开发商、市场营销商创造了巨额收入,但其实质上是国家整体经济的血吸虫

3.5.1. 针对数学杀伤性武器建立的监管系统必须衡量这些潜在成本,同时还要体现更多的非数值价值

3.6. 合理的应对方式似乎就是一个一个解除这些武器

3.6.1. 拆除数学杀伤性武器并不总能带来明显的回报

3.6.2. 要想消灭数学杀伤性武器,我们不仅仅要在数据行业确立最佳范例,还要推行相关的法律条例

3.6.3. 规定收集任何数据都必须经过用户的批准,用户具有选择权

3.6.3.1. 防止我们的医疗信息数据被雇主、健康应用程序以及其他的大数据公司随意地收集和利用
3.6.3.2. 欧洲模式还禁止将数据重新用于其他目的
3.6.3.3. “不可重复使用”条款的约束力则非常强大
3.6.3.3.1. 该条款将销售用户数据定义为非法行为
3.6.3.3.2. 有效避免了数据落入数据中间商之手,后者往往利用手中掌握的用户数字档案支持有害的电子评分系统以及总统竞选活动中的微目标锁定行动

3.6.4. 那些对我们的生活有重大影响的模型,包括信用评分系统和各类电子评分系统,都应该对公众公开

3.6.4.1. 审查者经常面临来自互联网巨头的阻挠,尽管互联网巨头公司建设的平台是我们利用数据的最便捷渠道

3.7. 并不是所有模型都是恶性的

3.7.1. 美国网络新闻机构ProPublica创立了“短信机器”(Message Machine),短信机器借助众包的方式逆向解码奥巴马竞选团队的定向政治广告所使用的模型

3.7.1.1. 通过大众提供信息,消除竞选背后的模型的神秘感,短信机器有效地减少了(哪怕一点点的)谣传和猜测

3.7.2. 作者团队设计模型的目标是维护公共利益

3.7.2.1. 致力于利用这些发现帮助受害者,减少无家可归、生活绝望的人

4. 数据科学家

4.1. 应该停止我们的科技乌托邦幻想,即无根据地寄希望于用算法和科技解决一切问题

4.1.1. 想让算法更好地服务于人类,我们必须承认算法不是全能的

4.2. 数据科学家应该像医生一样遵守希波克拉底氏誓言,尽可能防止或避免对模型可能的误用和误解

4.2.1. 坚定的价值观和自我约束只对谨慎的人有效

4.3. 数据科学家在寻求他们的老板所需求的具体答案时面对的实际压力

4.4. 数据科学家面对的挑战是理解他们猛烈抨击的大数据生态系统,而且不仅要找出问题所在,还要给出可能的解决方案

4.5. 数据科学家的工作就是在你挖掘得不够充分的时候,继续深入挖掘数据

4.6. 数学比数学杀伤性武器的价值大得多,民主也是如此

4.7. 大数据目的是寻找人类肉眼看不见的模式

4.7.1. 数据不会消逝,计算机也不会,数学更不会

4.7.2. 大数据程序只能将过去编入代码,而不会创造未来

4.8. 人类的决策虽然经常有缺陷,却也有一个主要的优点,即人类的决策是可以改善的

4.8.1. 创造未来需要道德想象力,而想象力只有人类才有

4.9. 存在证实性偏差,更容易看到他们想看到的东西

这篇关于读算法霸权笔记12_数据科学的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/576553

相关文章

大模型研发全揭秘:客服工单数据标注的完整攻略

在人工智能(AI)领域,数据标注是模型训练过程中至关重要的一步。无论你是新手还是有经验的从业者,掌握数据标注的技术细节和常见问题的解决方案都能为你的AI项目增添不少价值。在电信运营商的客服系统中,工单数据是客户问题和解决方案的重要记录。通过对这些工单数据进行有效标注,不仅能够帮助提升客服自动化系统的智能化水平,还能优化客户服务流程,提高客户满意度。本文将详细介绍如何在电信运营商客服工单的背景下进行

不懂推荐算法也能设计推荐系统

本文以商业化应用推荐为例,告诉我们不懂推荐算法的产品,也能从产品侧出发, 设计出一款不错的推荐系统。 相信很多新手产品,看到算法二字,多是懵圈的。 什么排序算法、最短路径等都是相对传统的算法(注:传统是指科班出身的产品都会接触过)。但对于推荐算法,多数产品对着网上搜到的资源,都会无从下手。特别当某些推荐算法 和 “AI”扯上关系后,更是加大了理解的难度。 但,不了解推荐算法,就无法做推荐系

基于MySQL Binlog的Elasticsearch数据同步实践

一、为什么要做 随着马蜂窝的逐渐发展,我们的业务数据越来越多,单纯使用 MySQL 已经不能满足我们的数据查询需求,例如对于商品、订单等数据的多维度检索。 使用 Elasticsearch 存储业务数据可以很好的解决我们业务中的搜索需求。而数据进行异构存储后,随之而来的就是数据同步的问题。 二、现有方法及问题 对于数据同步,我们目前的解决方案是建立数据中间表。把需要检索的业务数据,统一放到一张M

关于数据埋点,你需要了解这些基本知识

产品汪每天都在和数据打交道,你知道数据来自哪里吗? 移动app端内的用户行为数据大多来自埋点,了解一些埋点知识,能和数据分析师、技术侃大山,参与到前期的数据采集,更重要是让最终的埋点数据能为我所用,否则可怜巴巴等上几个月是常有的事。   埋点类型 根据埋点方式,可以区分为: 手动埋点半自动埋点全自动埋点 秉承“任何事物都有两面性”的道理:自动程度高的,能解决通用统计,便于统一化管理,但个性化定

使用SecondaryNameNode恢复NameNode的数据

1)需求: NameNode进程挂了并且存储的数据也丢失了,如何恢复NameNode 此种方式恢复的数据可能存在小部分数据的丢失。 2)故障模拟 (1)kill -9 NameNode进程 [lytfly@hadoop102 current]$ kill -9 19886 (2)删除NameNode存储的数据(/opt/module/hadoop-3.1.4/data/tmp/dfs/na

异构存储(冷热数据分离)

异构存储主要解决不同的数据,存储在不同类型的硬盘中,达到最佳性能的问题。 异构存储Shell操作 (1)查看当前有哪些存储策略可以用 [lytfly@hadoop102 hadoop-3.1.4]$ hdfs storagepolicies -listPolicies (2)为指定路径(数据存储目录)设置指定的存储策略 hdfs storagepolicies -setStoragePo

Hadoop集群数据均衡之磁盘间数据均衡

生产环境,由于硬盘空间不足,往往需要增加一块硬盘。刚加载的硬盘没有数据时,可以执行磁盘数据均衡命令。(Hadoop3.x新特性) plan后面带的节点的名字必须是已经存在的,并且是需要均衡的节点。 如果节点不存在,会报如下错误: 如果节点只有一个硬盘的话,不会创建均衡计划: (1)生成均衡计划 hdfs diskbalancer -plan hadoop102 (2)执行均衡计划 hd

康拓展开(hash算法中会用到)

康拓展开是一个全排列到一个自然数的双射(也就是某个全排列与某个自然数一一对应) 公式: X=a[n]*(n-1)!+a[n-1]*(n-2)!+...+a[i]*(i-1)!+...+a[1]*0! 其中,a[i]为整数,并且0<=a[i]<i,1<=i<=n。(a[i]在不同应用中的含义不同); 典型应用: 计算当前排列在所有由小到大全排列中的顺序,也就是说求当前排列是第

csu 1446 Problem J Modified LCS (扩展欧几里得算法的简单应用)

这是一道扩展欧几里得算法的简单应用题,这题是在湖南多校训练赛中队友ac的一道题,在比赛之后请教了队友,然后自己把它a掉 这也是自己独自做扩展欧几里得算法的题目 题意:把题意转变下就变成了:求d1*x - d2*y = f2 - f1的解,很明显用exgcd来解 下面介绍一下exgcd的一些知识点:求ax + by = c的解 一、首先求ax + by = gcd(a,b)的解 这个

综合安防管理平台LntonAIServer视频监控汇聚抖动检测算法优势

LntonAIServer视频质量诊断功能中的抖动检测是一个专门针对视频稳定性进行分析的功能。抖动通常是指视频帧之间的不必要运动,这种运动可能是由于摄像机的移动、传输中的错误或编解码问题导致的。抖动检测对于确保视频内容的平滑性和观看体验至关重要。 优势 1. 提高图像质量 - 清晰度提升:减少抖动,提高图像的清晰度和细节表现力,使得监控画面更加真实可信。 - 细节增强:在低光条件下,抖