1.Google Drive云端硬盘在中国大陆能正常使用吗?
2.系列教程 | 用Jina搭建PDF搜索引擎Part 1
3.零基础学习前端开发要怎么开始
Google Drive云端硬盘在中国大陆能正常使用吗?
不能正常使用。百搜由于Googledrive和GoogleDocs的端源整合,以及GoogleDocs过去被中国屏蔽,码百中国用户将很难访问Googledrive。搜全要正常使用谷歌硬盘云硬盘,云端源码用需要使用加速器切换到美国节点正常使用。百搜量能指标源码
切换节点的端源方法如下:
1、可以百度搜索一款软件,码百下载安装即可。搜全
2、云端源码用在安装和操作之后,百搜注册已登录并选择U.S.节点连接。端源(新用户开始是码百免费的)
3、此时,搜全可以打开Googledrive和其他与Google相关的云端源码用服务。
扩展资料:
GoogleDrive的优点:
1、从任意地点访问。
简而言之,可以使用任何Internet设备访问文件(PC、手机、平板电脑等)。优点是可以随时随地查看和管理上传到谷歌硬盘的数据。例如,带来的业务文档、公司章程和任务要求。如果忘记了,可以随时访问并编辑。
2、安全存储文件。
将个人或企业数据上传到云硬盘。对数据传输过程进行加密以保证安全性。当设备因意外故障意外格式化重要数据,如客户信息、联系人信息、公司机密文件等时,如果文件以前已同步到Google drive,只要登陆到该帐户,jsdelivr 源码就可以将丢失的文件从Google drive返回到设备,从而进行安全备份数据的作用。
3、共享与协作。
用户间上传文件的共享与协同管理。例如,公司文件需要全体员工的共同努力,共同编辑和完善文件。然后,通过同步到Googledrive并设置授权,可以指定要由团队共享的文件,以便授权人员可以参与文件的编辑和改进,还可以在网上留下评论和讨论。
百度百科-Google Drive
系列教程 | 用Jina搭建PDF搜索引擎Part 1
PDF Search 系列教程启动,Part 1 将带领您学习如何从 PDF 文件中提取、处理和存储图像与文本。
随着神经搜索技术的发展,越来越多的开发者开始使用 Jina 解决非结构化数据的索引与搜索问题。本系列教程将展示如何使用 Jina 构建一个 PDF 搜索引擎。
具体内容包括:
* Part 1:介绍从 PDF 中提取、处理和存储图像及文本的方法。
* Part 2:演示如何将这些信息输入到 CLIP 模型中,CLIP 是一个能够理解图像和文本的深度学习模型。提取 PDF 图像及文本信息后,CLIP 将生成索引,输入图像或文本即可进行语义相似性搜索。
* Part 3:通过客户端及 Streamlit 前端,对索引进行搜索。
* Part 4:展示其他相关演示,如提取元数据等。
预期目标与技术栈:本教程旨在搭建一个 PDF 搜索引擎,用户可输入文本或上传,搜索引擎将返回相似的和文本片段,并附带原始 PDF 链接。本文将着重讲解如何将一个超过 页的 PDF 文件处理成可供搜索的向量。本教程涉及以下技术栈:
DocArray:一个用于非结构化数据的源码集锦数据结构。通过这个工具可以封装 PDF 文件、文本块、图像块以及搜索引擎的其他输入/输出。
Jina:为 DocArray Document 搭建流水线及神经搜索引擎,并将其扩展到云端。
Jina Hub:无需逐一创建处理单元,可直接使用云端可复用模块。
教程详解:提取 PDF 中的文本及图像:提取 PDF 中的文本及图像有以下方法可供选择:
1. 使用 Jina Hub 上的 PDFSegmenter Executor,提取 PDF 中的文本块和图像块。
2. 使用 ImageMagick 和 OCR 对 PDF 中的每一页进行截图。
3. 将 PDF 转换为 HTML,提取到目录,再次将 HTML 转换为文本(这里我们使用的是 Pandoc)。
本文将使用方法 1,提取 PDF 中的文本及图像。
1、创建 PDF(也可使用已有文件):首先,我们需要一个示例文件,从维基百科中选择一个词条,并导出为 PDF 作为示例文档。本教程中我们用到的是 Rabbit 词条(也可以称为文章)。本教程中使用的浏览器为 Chrome。
注意:禁用页眉、页脚等设置,以免索引中出现类似 4/ 页等无关信息。可以尝试通过改变页面大小来避免分页。
2、提取 PDF 中的文本及图像:借助 Jina Hub 中的 Executor,在 Flow 中运行并提取 PDF 中的数据。在 Jina 中,Flow 是执行重要任务的 Pipeline,可以建立可搜索的 PDF 文档索引,或通过索引进行搜索。
每个 Flow 包括多个 Executor,每个 Executor 负责一个小任务。这些 Executor 串联在一起,源码透析对 Document 进行端到端的处理。
这里我们用到了 Jina Hub 上的 Executor-- PDFSegmenter。
使用 Jina Sandbox,即可释放本地资源,将运行转移到云端:将 PDF 文档转换为 DocumentArray 形式。在 Jina 中,每一段数据(文本、图像、PDF 等)都是一个 Document,一组 Document 组成一个 DocumentArray。
通过 documentary.from_files() 即可从一个目录自动加载所有内容。
DocumentArray 输入到 Flow 后,处理过的 DocumentArray 将存储在 indexed_docs 中。
在 rabbit.pdf 中, Indexed_docs 只包含了一个包括文本块和图像块的 Document。
下图为 DocumentArray 摘要,其中包含了 indexed_docs.summary()。
通过 indexed_docs[0].chunks.summary() 查看部分文本块或图像块:
如上图所示,Document 中一共包括 个块,分为 tensor(图像)和字符串(文本)。
从每个 chunk 中打印 chunk.content。
3、处理数据:对数据进行以下处理:
* 将文本片段分片为更小的块,如句子。上述长字符串包含了过多信息,通过 sentencize,可以从每一个文本块中得到一个明确的语义信息。
* 对图像进行归一化处理,便于后续在深度学习模型中进行编码。
3.1 将文本进行分句 (sentencizing):句子示例如下:
* It was a dark and stormy night.
* What do a raven and a writing desk have in common?
* Turn to p. to read about J.R.R. Tolkien pinging google.com in 3.4 seconds.
使用 Jina Hub 的 Sentencizer Executor,运行这些字符串。
输入上述三个句子后,得到以下输出:
上图可知 p. 中的标点符号,被识别成了句号。这里可以借助 SpacySentencizer 进行优化。
SpacySentencizer 是datanode源码一个 Executor,可以将 spaCy 的 sentencizer 集成到 Jina。
只需修改第 行代码如下:
现在的结果如下图所示:
将 Executor 添加到 Flow 中:
3.2 对图像进行归一化处理:1-6: 通用 Executor 调用代码。第 5 行规定 Executor 只在有调用索引 endpoint 时才能处理 Document。
8: 通过 [ ... ] 启用递归,依次对 chunk 进行处理。
9: 出现 blob 后将其转换为张量,以适应 CLIP 编码器。
-: 假设出现张量,我们需要把未处理张量的数据 uri 添加到元数据(即 tags)中,以便于后续检索并在前端展示图像。
为了防止文本块与图像块互相干扰:
通过上述过程,我们实现了:
* 构建一个全新的 PDF
* 将 PDF 分成文本和图像两部分
* 进一步将文本块分割成句子块
* 对图像进行归一化处理
效果如下图所示:
通过一个新的 Executor--ChunkMerger,将文本块和图像块放在同一个 level:
完成分句 (sentencize) 后,将其直接放到 Flow 中,代码如下:
以上就是本系列教程 Part 1 的全部内容。在 Part 2 中,我们将为 Flow 添加一个编码器,使用 CLIP 将文本和图像编码为向量,从而简化语义搜索的过程。
欢迎大家关注 Jina AI,持续关注本系列教程更新~
零基础学习前端开发要怎么开始
这里整理了一份web前端学习路线的思维导图,需要掌握和学习的内容如下:第一阶段:专业核心基础
阶段目标:
1. 熟练掌握HTML5、CSS3、Less、Sass、响应书布局、移动端开发。
2. 熟练运用HTML+CSS特性完成页面布局。
4. 熟练应用CSS3技术,动画、弹性盒模型设计。
5. 熟练完成移动端页面的设计。
6. 熟练运用所学知识仿制任意Web网站。
7. 能综合运用所学知识完成网页设计实战。
知识点:
1、Web前端开发环境,HTML常用标签,表单元素,Table布局,CSS样式表,DIV+CSS布局。熟练运用HTML和CSS样式属性完成页面的布局和美化,能够仿制任意网站的前端页面实现。
2、CSS3选择器、伪类、过渡、变换、动画、字体图标、弹性盒模型、响应式布局、移动端。熟练运用CSS3来开发网页、熟练开发移动端,整理网页开发技巧。
3、预编译css技术:less、sass基础知识、以及插件的运用、BootStrap源码分析。能够熟练使用 less、sass完成项目开发,深入了解BootStrap。
4、使用HTML、CSS、LESS、SASS等技术完成网页项目实战。通过项目掌握第一阶段html、css的内容、完成PC端页面设计和移动端页面设计。
第二阶段:Web后台技术
阶段目标:
1. 了解JavaScript的发展历史、掌握Node环境搭建及npm使用。
2. 熟练掌握JavaScript的基本数据类型和变量的概念。
3. 熟练掌握JavaScript中的运算符使用。
4. 深入理解分支结构语句和循环语句。
5. 熟练使用数组来完成各种练习。
6.熟悉es6的语法、熟练掌握JavaScript面向对象编程。
7.DOM和BOM实战练习和H5新特性和协议的学习。
知识点:
1、软件开发流程、算法、变量、数据类型、分之语句、循环语句、数组和函数。熟练运用JavaScript的知识完成各种练习。
2、JavaScript面向对象基础、异常处理机制、常见对象api,js的兼容性、ES6新特性。熟练掌握JavaScript面向对象的开发以及掌握es6中的重要内容。
3、BOM操作和DOM操作。熟练使用BOM的各种对象、熟练操作DOM的对象。
4、h5相关api、canvas、ajax、数据模拟、touch事件、mockjs。熟练使用所学知识来完成网站项目开发。
第三阶段:数据库和框架实战
阶段目标:
1. 综合运用Web前端技术进行页面布局与美化。
2. 综合运用Web前端开发框架进行Web系统开发。
3. 熟练掌握Mysql、Mongodb数据库的发开。
4. 熟练掌握vue.js、webpack、elementui等前端框技术。
5. 熟练运用Node.js开发后台应用程序。
6. 对Restful,Ajax,JSON,开发过程有深入的理解,掌握git的基本技能。
知识点:
1、数据库知识,范式,MySQL配置,命令,建库建表,数据的增删改查,mongodb数据库。深入理解数据库管理系统通用知识及MySQL数据库的使用与管理,为Node.js后台开发打下坚实基础。
2、模块系统,函数,路由,全局对象,文件系统,请求处理,Web模块,Express框架,MySQL数据库处理,RestfulAPI,文件上传等。熟练运用Node.js运行环境和后台开发框架完成Web系统的后台开发。
3、vue的组件、生命周期、路由、组件、前端工程化、webpack、elementui框架。Vue.js框架的基本使用有清晰的理解,能够运用Vue.js完成基础前端开发、熟练运用Vue.js框架的高级功能完成Web前端开发和组件开发,对MVVM模式有深刻理解。
4、需求分析,数据库设计,后台开发,使用vue、node完成pc和移动端整站开发。于Node.js+Vue.js+Webpack+Mysql+Mongodb+Git,实现整站项目完整功能并上线发布。
第四阶段:移动端和微信实战
阶段目标:
1.熟练掌握React.js框架,熟练使用React.js完成开发。
2.掌握移动端开发原理,理解原生开发和混合开发。
3.熟练使用react-native和Flutter框架完成移动端开发。
4.掌握微信小程序以及了解支付宝小程序的开发。
5.完成大型电商项目开发。
知识点:
1、React面向组件编程、表单数据、组件通信、监听、生命周期、路由、Redux基本概念。练使用react完成项目开发、掌握Redux中的异步解决方案Saga。
2、react-native、开发工具、视图与渲染、api操作、Flutter环境搭建、路由、ListView组件、网络请求、打包。练掌握react-native和Flutter框架,并分别使用react-native和Flutter分别能开发移动端项目。
3、微信小程序基本介绍、开发工具、视图与渲染、api操作、支付宝小程序的入门和api学习。掌握微信小程序开发了解支付宝小程序。
4、大型购物网站实战,整个项目前后端分离开发;整个项目分为四部分:PC端网页、移动端APP、小程序、后台管理。团队协作开发,使用git进行版本控制。目期间可以扩展Three.js 、TypeScript。
这已经是一套非常完备的Java学习路线了,零基础学习Java完全自学的话还是比较吃力的,建议还是找专业的机构系统学一下,可以点 击 头 像 了解一下。