学大专题
跟张良均老师学大数据人工智能|企业项目试岗实训开营
我国高校毕业生数量连年快速增长，从2021年的909万人到2022年的1076万人，再到2023年的1158万人，预计到2024年将达到1187万人，2024年高校毕业生数量再创新高。 当年高校毕业生人数不等于进入劳动力市场的高校毕业生人数，需要扣除2024年的升学人数，即专升本、研究生招生人数，2024年实际进入劳动力市场的高校毕业生人数大约在990万人左右。2024年就业形势
![[动手学大模型应用开发第一章笔记] 大模型简介](/front/images/it_default2.jpg)
[动手学大模型应用开发第一章笔记] 大模型简介
动手学大模型应用开发学习资料地址 之前对 LLM、RAG 和 LangChain 有过一定的了解，本章的主要收获是： 了解了 LLM 应用开发的整体流程，在完成设计和架构搭建后，针对 Bad Case 进行 Prompt 迭代是十分重要的一环。了解了向量数据库在大模型时代的优势，以及一些常见的向量数据库。向量数据库学习资料之前多模态研究主要偏视觉这块，所以第一次听说 NLTK 这个库，大概了解了
上海交通大学《动手学大模型》编程实战课，课件ppt+教程
来了来了！上海交通大学的大模型超超超级牛掰的大模型编程实战课公开了，课件+教程,本套实战教程旨在提供大模型相关的入门编程参考。通过简单实践，帮助同学快速入门大模型，更好地开展课程设计或学术研究。 另外非常感谢以下老师和同学对本项目的支持与贡献: 上海交通大学 袁童鑫 上海交通大学 马欣贝 上海交通大学 何志威 上海交通大学 杜巍 新加坡国立大学 费豪 😝有需要的小伙伴，可以V扫描下方二维码
动手学大模型应用开发--Chapter 05如何评估大模型应用
文章目录 前言一、学习目标二、学习知识点概要三、总结四、参考资料 前言 本学习笔记为datawhale动手学大模型应用开发的第五章，学习链接为： https://datawhalechina.github.io/llm-universe/ 一、学习目标 学习大模型的评估方法和思路。 二、学习知识点概要 ToDo 三、总结 ToDo 四、参考资料 ToDo
动手学大模型应用开发--Chapter 04部署知识库助手
文章目录 前言一、学习目标二、学习知识点概要三、总结四、参考资料 前言 本学习笔记为datawhale动手学大模型应用开发的第四章，学习链接为： https://datawhalechina.github.io/llm-universe/ 一、学习目标 LLM接入LangChain，构建检索问答链，部署知识库助手。 二、学习知识点概要 ToDo 三、总结 ToDo
动手学大模型应用开发--Chapter 03搭建并使用向量数据库
文章目录 前言一、学习目标二、学习知识点概要2.1 什么是词向量2.2 词向量的意义2.3 文本转为词向量的方法 三、总结四、引申阅读 前言 本学习笔记为datawhale动手学大模型应用开发的第三章，学习链接为： https://datawhalechina.github.io/llm-universe/ 一、学习目标 理解向量库，学习如何搭建向量库。 二、学习知识点
动手学大模型应用开发--Chapter 02 提示词工程
文章目录 前言一、学习目标二、学习知识点概要1.1 Prompting1.2 Prompting tuning1.3 Prompting Learning1.3.1 定义1.3.2 运作原理 三、总结四、引申阅读 前言 本学习笔记为datawhale动手学大模型应用开发的第二章，学习链接为： https://datawhalechina.github.io/llm-univ
动手学大模型LLM应用开发之提示词工程（Prompt Engineering）
目录 一、什么是提示词工程(Prompt Engineering)？二、Prompt 设计的原则及使用技巧原则一：编写清晰、具体的指令1、使用分隔符清晰地表示输入的不同部分2、寻求结构化的输出3、要求模型检查是否满足条件4、提供少量示例 原则二：给模型时间去思考1、指定完成任务所需的步骤2、指导模型在下结论之前找出一个自己的解法 三、参考资料 一、什么是提示词工程(Prompt
动手学大模型应用开发--Chapter 01 大模型概念
文章目录 前言一、学习知识点概要1.1 LLM1.3 ChatGPT1.3 LangChain 前言 本学习笔记为datawhale动手学大模型应用开发的学习内容，学习链接为： https://datawhalechina.github.io/llm-universe/ 一、学习知识点概要 1.1 LLM 大语言模型（LLM） **定义：**接受过大量文本语料库训练
datawhale动手学大模型应用开发-第一章-大模型简介
一. 常见的大模型简介 1.1 常见闭源大模型简介 名称简介地址 ChatGPT ChatGPT是OpenAI推出的基于GPT-3.5和GPT-4的聊天机器人，擅长对话、编程、解答等，具有丰富的知识基础和上下文理解能力。https://chat.openai.com/ GPT-4 GPT-4是OpenAI推出的多模态大型语言模型，具有更高的参数量和性能，支持长上下文，提供安全响应，需付费使用
一起重新开始学大数据-hadoop先导篇-Day38-安装配置maven，Git
一起重新开始学大数据-maven篇-Day38-maven先导篇 科普部分-maven maven 概述 如今,我们构建一个项目需要用到很多第三方的类库，如写一个使用Spring的Web项目就需要引入大量的jar包。一个项目Jar包的数量之多往往让我们瞠目结舌，并且Jar包之间的关系错综复杂，一个Jar包往往又会引用其他Jar包，缺少任何一个Jar包都会导致项目编译失败。 以往开
一起重新开始学大数据-MySQL篇-Day37-sql(5)-shell操作MySQL，java操作MySQL、附带JDBC的NullPointerException
一起重新开始学大数据-MySQL篇-Day37-sql(5) shell操作mysql shell操作mysql #!/bin/shMYSQL="mysql -hmaster -uroot -p123456"sql="select * from bigdata.students where sex='0'"result="$($MYSQL -e "$sql")"echo
一起重新开始学大数据-MySQL篇-Day36-case值替换，备份表，稍微了解一下视图，事务
一起重新开始学大数据-MySQL篇-Day36-sql(4) case:值的替换 格式: case when 条件 then 为true的结果 [when 条件 then 为true的结果] [else 为false的结果] end 背景：发现查询性别的时候，写的是0或1 解决：使用case，进行值得替换 SELECT name, CASE WHEN sex=1 TH
一起重新开始学大数据-MySQL篇-Day35-练习题
一起重新开始学大数据-MySQL篇-Day35-练习题 练习： 将下列数据插入mysql表,完成所给查询需求 创建员工表 DROP TABLE IF EXISTS `emp`;CREATE TABLE `emp` (`EMPNO` int(4) NOT NULL,`ENAME` varchar(10) DEFAULT NULL,`JOB` varchar(9) DEFAULT
一起重新开始学大数据-MySQL篇-Day34-日期函数、计算、排序分组筛选、连表联查等
一起重新开始学大数据-MySQL篇（2） 日期函数 获取当前日期: current_timestamp;–所有 current_timestamp();–所有 CURRENT_DATE();-- 年月日 CURRENT_DATE;-- 年月日 CURRENT_TIME();-- 时分秒 CURRENT_TIME;-- 时分秒 时间转str 格式:
一起重新开始学大数据-MySQL篇-Day33-SQL、建库建表、增删查改、聚合函数等
一起重新开始学大数据-MySQL篇-(1) 什么是数据库 数据库是数据的仓库 与普通的数据仓库不同的是,数据库依据数据结构来组织数据,因为数据结构的存在,所以看到的数据时条理化的 数据库和普通文件系统的区别在于:数据库拥有数据结构,能都快速查找对应的数据 常说的XX数据库,其实就是XX数据库管理系统:数据库管理系统是一个软件,是数据库服务的体现 数据库分为关系型数据库和非关
一起重新开始学大数据-Linux篇-Day32-shell脚本（2）、时间、定时器、安装MySQL
一起重新开始学大数据-Linux篇-Day32-shell脚本（2）、时间、定时器、安装MySQL shell 脚本（2） 函数 格式: function 方法名(){方法体return 数字;} 注意: function和return可加可不加 $0…$n表示接收参数,$0永远是脚本名称(忽略) 方法的调用直接使用方法名不加() return只能返回数字范围
一起重新开始学大数据-Linux篇-Day31-shell脚本（1）
一起重新开始学大数据-Linux篇-Day31-shell脚本（1） Shell 介绍 前言： 计算机只能认识（识别）机器语言(0和1)，如（11000000 这种）。但是，我们的程序猿们不能直接去写01这样的代码，所以，要想将程序猿所开发的代码在计算机上运行，就必须找"人"（工具）来翻译成机器语言，这个"人"(工具)就是我们常常所说的编译器或者解释器。 编译和解释型语言区别 1
一起重新开始学大数据-Linux篇-Day30-克隆虚拟机（续）-修改ip，添加映射关系，配置ssh免密，启动模式
Day30-克隆虚拟机（续）-修改ip，添加映射关系，配置ssh免密，启动模式 克隆两台虚拟机加master 三台组成一个集群 所克隆的虚拟机需要修改主机名,ip 永久修改主机名 hostnamectl set-hostname node1或node2 例如：(在node2的虚拟机中) ip 方式1: 通过可视化界面直接修改 方式2: vim /etc/syscon
一起重新开始学大数据-Linux篇-Day29 shell命令（2）、用户组、Linux下jdk、克隆虚拟机
day29 shell命令（2）、用户组、Linux下jdk、克隆虚拟机 使用工具： xshell 链接：https://pan.baidu.com/s/1KTMbmVLfszkHwepgYiT88g 提取码：fztd xftp 链接：https://pan.baidu.com/s/1_OjPjk-Fsf5eK_dDmUSNQg 提取码：1i38 安装提示： 先安装
大数据分析与挖掘——跟张良均老师学大数据
大数据分析与挖掘已经成为大数据时代重要的技能之一，社会对这方面的人才的需求随着数据的增长而不断增长。数据分析师这个职业变得越来越重要，数据分析能力也变得尤为重要。 大数据已经渗透到每一个行业和业务职能领域，逐渐成为重要的生产要素，人们对于海量数据的运用将预示着新一轮生产率增长和消费者盈余浪潮的到来。大数据分析技术将帮助企业用户在合理的时间内攫取、管理、处理、整理海量数据，为企业经营决策提
e学大HD版评测：一款平板教育应用
K12教育大鳄学大教育进军在线教育之后可谓马不停蹄，不仅战略布局O2O初见成效，更是在近期对e学大智能平台进行了全面升级。以笔者而见，升级最大的亮点莫过于，e学大Pad版本的全新上线，不仅更加契合用户需求和应用场景，同时也无缝地对教学、体验、资源和管理的升级进行了落地。 笔者近日对“e学大”HD版进行了试用，体验究竟如何呢？ 手机大屏化已是当下的流行趋势，苹果便冒着乔布斯被三星嘲笑的风险进军大
AI大模型提供商有哪些？学大模型是每个程序员必备的技能.
AI大模型提供商：引领人工智能创新浪潮 随着人工智能技术的迅猛发展，AI大模型成为了推动行业变革和创新的核心驱动力之一。作为AI领域的重要参与者，AI大模型提供商扮演着关键的角色。本文将围绕这一主题，介绍几家在AI大模型领域具有重要影响力的公司。 首先，OpenAI是当今最著名的AI大模型提供商之一。作为一个以人类利益为导向的组织，OpenAI致力于开发先进的AI技术，让其受益于全人类。他
学大数据之后可以做些什么工作？工作内容如何？
很多小伙伴都有这样的疑问，那就是学大数据之后可以做些什么工作？工作内容如何？很多小伙伴不清楚自己的就业方向，所以迷茫是正常的，今天小编就带大家一起来了解一下吧。 学习大数据，可以从事的工作有很多，下面这几个题主可以看看： 1.数据挖掘工程师 职责：熟练搭建数据分析框架，掌握和使用相关的分析常用工具，提取、分析、呈现数据的商业意义，需要业务理解和工具应用能力。 2.大数据开发工程师
学历低可以学大数据吗
近来不少想转行IT的学员在跟科多老师的交流中诉说到:想做IT行业，但是学历太低啦。怕花了时间和精力来学习IT相关知识，最后却找不到相应的工作，一起努力都付诸东流。 1. 因为大数据是IT行业中比较炙热的项目，现在各个用人单位对于大数据相关的人才需求量特别的大。相关统计数据显示，未来3~5年，中国需要180万数据人才，但目前只有约30万人。所以相比其他岗位的饱和状态而言，大数据处于蓝海，学习大数据
