新项目管理
这是一个故障恢复 npm 注册表到 Algolia 索引复制过程。它将所有 npm 包复制到 Algolia 索引并保持最新。复制的状态保存在 Algolia 索引设置中。
复制应该始终运行。每个 Algolia 索引只能同时运行一个实例。如果该过程失败,请重新启动它,复制过程将在它记住的最后一点继续。
Algolia 索引目前由一些选定的项目免费使用(例如:yarnpkg.com、codesandbox.io、jsdelivr.com 等)。
如果您想将此索引包含到您的项目中,请在此处创建支持请求:Algolia 支持。
该产品是社区的开源产品,不受 Algolia 支持。
要符合资格,您的项目必须满足以下要求:
您还可以使用代码或公共 docker 镜像来运行您自己的镜像(截至 2021 年 9 月,它将创建约 300 万条记录 x4)。
对于每个 NPM 包,我们都会在 Algolia 索引中创建一条记录。生成的记录具有以下架构:
{
name : 'babel-core' ,
downloadsLast30Days : 10978749 ,
downloadsRatio : 0.08310651682685861 ,
humanDownloadsLast30Days : '11m' ,
jsDelivrHits : 11684192 ,
popular : true ,
version : '6.26.0' ,
versions : {
// [...]
'7.0.0-beta.3' : '2017-10-15T13:12:35.166Z' ,
} ,
tags : {
latest : '6.26.0' ,
old : '5.8.38' ,
next : '7.0.0-beta.3' ,
} ,
description : 'Babel compiler core.' ,
dependencies : {
'babel-code-frame' : '^6.26.0' ,
// [...]
} ,
devDependencies : {
'babel-helper-fixtures' : '^6.26.0' ,
// [...]
} ,
repository : {
url : 'https://github.com/babel/babel/tree/master/packages/babel-core' ,
host : 'github.com' ,
user : 'babel' ,
project : 'babel' ,
path : '/tree/master/packages/babel-core' ,
branch : 'master' ,
} ,
readme : '# babel-corenn> Babel compiler core.nnn [... truncated at 200kb]' ,
owner : {
// either GitHub owner or npm owner
name : 'babel' ,
avatar : 'https://github.com/babel.png' ,
link : 'https://github.com/babel' ,
} ,
deprecated : 'Deprecated' , // This field will be removed, please use `isDeprecated` instead
isDeprecated : true ,
deprecatedReason : 'Deprecated' ,
isSecurityHeld : false , // See https://github.com/npm/security-holder
badPackage : false ,
homepage : 'https://babeljs.io/' ,
license : 'MIT' ,
keywords : [
'6to5' ,
'babel' ,
'classes' ,
'const' ,
'es6' ,
'harmony' ,
'let' ,
'modules' ,
'transpile' ,
'transpiler' ,
'var' ,
'babel-core' ,
'compiler' ,
] ,
created : 1424009748555 ,
modified : 1508833762239 ,
lastPublisher : {
name : 'hzoo' ,
email : '[email protected]' ,
avatar : 'https://gravatar.com/avatar/851fb4fa7ca479bce1ae0cdf80d6e042' ,
link : 'https://www.npmjs.com/~hzoo' ,
} ,
owners : [
{
email : '[email protected]' ,
name : 'thejameskyle' ,
avatar : 'https://gravatar.com/avatar/8a00efb48d632ae449794c094f7d5c38' ,
link : 'https://www.npmjs.com/~thejameskyle' ,
} ,
// [...]
] ,
lastCrawl : '2017-10-24T08:29:24.672Z' ,
dependents : 3321 ,
types : {
ts : 'definitely-typed' , // definitely-typed | included | false
definitelyTyped : '@types/babel__core' ,
} ,
moduleTypes : [ 'unknown' ] , // esm | cjs | none | unknown
styleTypes : [ 'none' ] , // file extensions like css, less, scss or none if no style files present
humanDependents : '3.3k' ,
changelogFilename : null , // if babel-core had a changelog, it would be the raw GitHub url here
objectID : 'babel-core' ,
// the following fields are considered internal and may change at any time
_downloadsMagnitude : 8 ,
_jsDelivrPopularity : 5 ,
_popularName : 'babel-core' ,
_searchInternal : {
alternativeNames : [
// alternative versions of this name, to show up on confused searches
] ,
} ,
}
如果您想了解有关 Algolia 排名算法如何工作的更多信息,您可以阅读这篇博文。
我们将搜索限制为仅使用属性的子集:
_popularName
name
description
keywords
owner.name
owners.name
Algolia 提供默认的前缀搜索功能(仅匹配开头的单词)。对于owner.name
和owners.name
属性禁用此功能。
Algolia 提供默认的拼写错误容忍度。
使用 Algolia 的optionalFacetFilters
功能,我们可以增强包名称的精确匹配,以便始终位于结果的顶部。
对于每个包,我们使用过去 30 天内的下载次数作为 Algolia 的customRanking
设置。这将用于对彼此具有相同文本相关性的结果进行排序。
例如,搜索babel
并匹配babel-core
和babel-messages
。从文本相关性的角度来看,这两个包以相同的方式完全匹配。在这种情况下,Algolia 将依赖customRanking
设置,因此将过去 30 天内下载次数最多的软件包放在前面。
如果某些软件包比其他软件包下载“更多”,则它们将被视为受欢迎。目前,如果满足以下任一条件,我们认为某个软件包很受欢迎:
0.005%
以上,这个popular
标志还用于提高一些记录而不是非流行的记录。
yarn
apiKey=... yarn start
要从特定点(或从头开始)重新启动:
seq=0 apiKey=... yarn start
当您想要完全重新同步 npm 注册表时,这非常有用,因为:
seq
表示 CouchDB 术语中的更改序列。
我们这个项目的目标是:
当进程以seq=0
开始时:
复制和监视是分开的,因为:
请参阅 CONTRIBUTING.md