WebDav - Revision history

Hanbi: /* dCache에서 WebDav 프로토콜 및 MACAROONS 인증 사용하기 */

2021-12-06T08:31:42Z

dCache에서 WebDav 프로토콜 및 MACAROONS 인증 사용하기

← Older revision		Revision as of 08:31, 6 December 2021
Line 3:		Line 3:
	향후 GridFTP와 X509 인증을 대체하는 WebDav 프로토콜과 MACAROONS 인증에 대한 소개 문서입니다.		향후 GridFTP와 X509 인증을 대체하는 WebDav 프로토콜과 MACAROONS 인증에 대한 소개 문서입니다.

	~~=== 주의사항 ===~~

	* webdav 프로토콜의 경로가 다음과 같이 변경되었습니다. 사용에 유의하시기 바랍니다.
	* https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID} -> https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/{CERN_ID}

	=== 사전 작업 ===		=== 사전 작업 ===
Line 36:		Line 32:
	-X POST -d '{"caveats": ["activity:DOWNLOAD,LIST"], "validity": "PT1H"}' \		-X POST -d '{"caveats": ["activity:DOWNLOAD,LIST"], "validity": "PT1H"}' \
	-H 'Content-Type: application/macaroon-request' \		-H 'Content-Type: application/macaroon-request' \
	https://cluster142.knu.ac.kr:2880~~/pnfs/knu.ac.kr/data~~/cms/store/user/{CERN_ID}/test/		https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/

	{		{
	"macaroon": "MDA0NmxvY2F0aW9uIE9wdGlvbmFsWy9wbm..............................................................",		"macaroon": "MDA0NmxvY2F0aW9uIE9wdGlvbmFsWy9wbm..............................................................",
	"uri": {		"uri": {
	"targetWithMacaroon": "https://cluster142.knu.ac.kr:2880~~/pnfs/knu.ac.kr/data~~/cms/store/user/dhhan/test/?authz=MDA0NmxvY2F0aW9uIE9wdGlvbm.....................................................",		"targetWithMacaroon": "https://cluster142.knu.ac.kr:2880/cms/store/user/dhhan/test/?authz=MDA0NmxvY2F0aW9uIE9wdGlvbm.....................................................",
	"baseWithMacaroon": "https://cluster142.knu.ac.kr:2880/?authz=MDA0NmxvY2F0aW9uIE9wdGlvbmFsWy9wbm..............................................................",		"baseWithMacaroon": "https://cluster142.knu.ac.kr:2880/?authz=MDA0NmxvY2F0aW9uIE9wdGlvbmFsWy9wbm..............................................................",
	"target": "https://cluster142.knu.ac.kr:2880~~/pnfs/knu.ac.kr/data~~/cms/store/user/{CERN_ID}/test/",		"target": "https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/",
	"base": "https://cluster142.knu.ac.kr:2880/"		"base": "https://cluster142.knu.ac.kr:2880/"
	}		}
	}		}

	* https://cluster142.knu.ac.kr:2880~~/pnfs/knu.ac.kr/data~~/cms/store/user/{my_cern_id}/test/ 경로에 DOWNLOAD,LIST를 할 수 있는 1시간 짜리 마카롱 토큰이 생성되었습니다.		* https://cluster142.knu.ac.kr:2880/cms/store/user/{my_cern_id}/test/ 경로에 DOWNLOAD,LIST를 할 수 있는 1시간 짜리 마카롱 토큰이 생성되었습니다.
	* 발급된 마카롱 토큰은 "MDA0NmxvY2F0aW9uIE9wdGlvbmFsWy9wbm.............................................................." 입니다.		* 발급된 마카롱 토큰은 "MDA0NmxvY2F0aW9uIE9wdGlvbmFsWy9wbm.............................................................." 입니다.

Line 56:		Line 52:


	$ get-macaroon --url https://cluster142.knu.ac.kr:2880~~/pnfs/knu.ac.kr/data~~/cms/store/user/{CERN_ID}/test/ --proxy --permissions DOWNLOAD,LIST --duration PT1H		$ get-macaroon --url https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/ --proxy --permissions DOWNLOAD,LIST --duration PT1H

	Macaroon viewer: /u/cms/bin/view-macaroon		Macaroon viewer: /u/cms/bin/view-macaroon
Line 77:		Line 73:
	* 접근할 수 있는 IP를 제한하는 조건을 추가할 수도 있습니다. 145.100.0.0/16 의 접근만 허용합니다.		* 접근할 수 있는 IP를 제한하는 조건을 추가할 수도 있습니다. 145.100.0.0/16 의 접근만 허용합니다.

	$ get-macaroon --url https://cluster142.knu.ac.kr:2880~~/pnfs/knu.ac.kr/data~~/cms/store/user/{CERN_ID}/test/ --proxy --permissions DOWNLOAD,LIST --duration PT1H --ip 145.100.0.0/16		$ get-macaroon --url https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/ --proxy --permissions DOWNLOAD,LIST --duration PT1H --ip 145.100.0.0/16
	Macaroon viewer: /u/cms/bin/view-macaroon		Macaroon viewer: /u/cms/bin/view-macaroon

Hanbi: Undo revision 2703 by Hanbi (talk)

2021-12-06T08:27:56Z

Undo revision 2703 by Hanbi (talk)

← Older revision		Revision as of 08:27, 6 December 2021
Line 134:		Line 134:
	get-macaroon 으로 다음과 같이 토큰을 생성합니다.		get-macaroon 으로 다음과 같이 토큰을 생성합니다.

	get-macaroon --url https://cluster142.knu.ac.kr:2880~~/pnfs/knu.ac.kr/data~~/cms/store/user/{CERN_ID}/test/ --proxy --permissions DOWNLOAD,LIST --duration PT1H		get-macaroon --url https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/ --proxy --permissions DOWNLOAD,LIST --duration PT1H

	* 경북대에서는 --chroot 옵션이 기본값이 되도록 get-macaroon를 수정하였습니다. 따라서 발급되는 마카롱 토큰은 --chroot 옵션이 적용된 상태로 발급됩니다. 이용에 유의하시기 바랍니다.		* 경북대에서는 --chroot 옵션이 기본값이 되도록 get-macaroon를 수정하였습니다. 따라서 발급되는 마카롱 토큰은 --chroot 옵션이 적용된 상태로 발급됩니다. 이용에 유의하시기 바랍니다.
Line 160:		Line 160:

	* 다음 경로의 모든 파일과 디렉토리를 표시		* 다음 경로의 모든 파일과 디렉토리를 표시
	* https://cluster142.knu.ac.kr:2880~~/pnfs/knu.ac.kr/data~~/cms/store/user/{CERN_ID}/test/		* https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/
	* dCache에 디렉토리를 생성하기 위해서는 토큰을 생성할때 LIST 권한을 추가해야 합니다.		* dCache에 디렉토리를 생성하기 위해서는 토큰을 생성할때 LIST 권한을 추가해야 합니다.

Line 169:		Line 169:

	* 다음 경로와 그 아래의 모든 파일을 표시		* 다음 경로와 그 아래의 모든 파일을 표시
	* https://cluster142.knu.ac.kr:2880~~/pnfs/knu.ac.kr/data~~/cms/store/user/{CERN_ID}/test/		* https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/

	===== copy =====		===== copy =====
Line 176:		Line 176:
	$ rclone --config=rclone.conf copy cluster142:/test.transfer .		$ rclone --config=rclone.conf copy cluster142:/test.transfer .

	* Source: https://cluster142.knu.ac.kr:2880~~/pnfs/knu.ac.kr/data~~/cms/store/user/{CERN_ID}/test/test.transfer		* Source: https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/test.transfer
	* Target: . (현재 디렉토리)		* Target: . (현재 디렉토리)
	* dCache에서 파일을 내려받기 위해서는 토큰을 생성할때 DOWNLOAD 권한을 추가해야 합니다.		* dCache에서 파일을 내려받기 위해서는 토큰을 생성할때 DOWNLOAD 권한을 추가해야 합니다.
Line 200:		Line 200:

	* 다음과 같이 디렉토리가 생성되었습니다.		* 다음과 같이 디렉토리가 생성되었습니다.
	* https://cluster142.knu.ac.kr:2880~~/pnfs/knu.ac.kr/data~~/cms/store/user/{CERN_ID}/test/data2		* https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/data2
	* dCache에 디렉토리를 생성하기 위해서는 토큰을 생성할때 UPLOAD 권한을 추가해야 합니다.		* dCache에 디렉토리를 생성하기 위해서는 토큰을 생성할때 UPLOAD 권한을 추가해야 합니다.

Hanbi: /* rclone 사용법 */

2021-12-06T06:19:12Z

rclone 사용법

← Older revision		Revision as of 06:19, 6 December 2021
Line 134:		Line 134:
	get-macaroon 으로 다음과 같이 토큰을 생성합니다.		get-macaroon 으로 다음과 같이 토큰을 생성합니다.

	get-macaroon --url https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/ --proxy --permissions DOWNLOAD,LIST --duration PT1H		get-macaroon --url https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/{CERN_ID}/test/ --proxy --permissions DOWNLOAD,LIST --duration PT1H

	* 경북대에서는 --chroot 옵션이 기본값이 되도록 get-macaroon를 수정하였습니다. 따라서 발급되는 마카롱 토큰은 --chroot 옵션이 적용된 상태로 발급됩니다. 이용에 유의하시기 바랍니다.		* 경북대에서는 --chroot 옵션이 기본값이 되도록 get-macaroon를 수정하였습니다. 따라서 발급되는 마카롱 토큰은 --chroot 옵션이 적용된 상태로 발급됩니다. 이용에 유의하시기 바랍니다.
Line 160:		Line 160:

	* 다음 경로의 모든 파일과 디렉토리를 표시		* 다음 경로의 모든 파일과 디렉토리를 표시
	* https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/		* https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/{CERN_ID}/test/
	* dCache에 디렉토리를 생성하기 위해서는 토큰을 생성할때 LIST 권한을 추가해야 합니다.		* dCache에 디렉토리를 생성하기 위해서는 토큰을 생성할때 LIST 권한을 추가해야 합니다.

Line 169:		Line 169:

	* 다음 경로와 그 아래의 모든 파일을 표시		* 다음 경로와 그 아래의 모든 파일을 표시
	* https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/		* https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/{CERN_ID}/test/

	===== copy =====		===== copy =====
Line 176:		Line 176:
	$ rclone --config=rclone.conf copy cluster142:/test.transfer .		$ rclone --config=rclone.conf copy cluster142:/test.transfer .

	* Source: https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/test.transfer		* Source: https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/{CERN_ID}/test/test.transfer
	* Target: . (현재 디렉토리)		* Target: . (현재 디렉토리)
	* dCache에서 파일을 내려받기 위해서는 토큰을 생성할때 DOWNLOAD 권한을 추가해야 합니다.		* dCache에서 파일을 내려받기 위해서는 토큰을 생성할때 DOWNLOAD 권한을 추가해야 합니다.
Line 200:		Line 200:

	* 다음과 같이 디렉토리가 생성되었습니다.		* 다음과 같이 디렉토리가 생성되었습니다.
	* https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/data2		* https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/{CERN_ID}/test/data2
	* dCache에 디렉토리를 생성하기 위해서는 토큰을 생성할때 UPLOAD 권한을 추가해야 합니다.		* dCache에 디렉토리를 생성하기 위해서는 토큰을 생성할때 UPLOAD 권한을 추가해야 합니다.

Hanbi: /* get_macaroon을 이용한 토큰 발급 */

2021-12-06T06:18:16Z

get_macaroon을 이용한 토큰 발급

← Older revision		Revision as of 06:18, 6 December 2021
Line 56:		Line 56:


	$ get-macaroon --url https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/ --proxy --permissions DOWNLOAD,LIST --duration PT1H		$ get-macaroon --url https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/{CERN_ID}/test/ --proxy --permissions DOWNLOAD,LIST --duration PT1H

	Macaroon viewer: /u/cms/bin/view-macaroon		Macaroon viewer: /u/cms/bin/view-macaroon
Line 77:		Line 77:
	* 접근할 수 있는 IP를 제한하는 조건을 추가할 수도 있습니다. 145.100.0.0/16 의 접근만 허용합니다.		* 접근할 수 있는 IP를 제한하는 조건을 추가할 수도 있습니다. 145.100.0.0/16 의 접근만 허용합니다.

	$ get-macaroon --url https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/ --proxy --permissions DOWNLOAD,LIST --duration PT1H --ip 145.100.0.0/16		$ get-macaroon --url https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/{CERN_ID}/test/ --proxy --permissions DOWNLOAD,LIST --duration PT1H --ip 145.100.0.0/16
	Macaroon viewer: /u/cms/bin/view-macaroon		Macaroon viewer: /u/cms/bin/view-macaroon

Hanbi: /* curl을 이용한 토큰 발급 */

2021-12-06T06:17:37Z

curl을 이용한 토큰 발급

← Older revision		Revision as of 06:17, 6 December 2021
Line 36:		Line 36:
	-X POST -d '{"caveats": ["activity:DOWNLOAD,LIST"], "validity": "PT1H"}' \		-X POST -d '{"caveats": ["activity:DOWNLOAD,LIST"], "validity": "PT1H"}' \
	-H 'Content-Type: application/macaroon-request' \		-H 'Content-Type: application/macaroon-request' \
	https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/		https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/{CERN_ID}/test/

	{		{
	"macaroon": "MDA0NmxvY2F0aW9uIE9wdGlvbmFsWy9wbm..............................................................",		"macaroon": "MDA0NmxvY2F0aW9uIE9wdGlvbmFsWy9wbm..............................................................",
	"uri": {		"uri": {
	"targetWithMacaroon": "https://cluster142.knu.ac.kr:2880/cms/store/user/dhhan/test/?authz=MDA0NmxvY2F0aW9uIE9wdGlvbm.....................................................",		"targetWithMacaroon": "https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/dhhan/test/?authz=MDA0NmxvY2F0aW9uIE9wdGlvbm.....................................................",
	"baseWithMacaroon": "https://cluster142.knu.ac.kr:2880/?authz=MDA0NmxvY2F0aW9uIE9wdGlvbmFsWy9wbm..............................................................",		"baseWithMacaroon": "https://cluster142.knu.ac.kr:2880/?authz=MDA0NmxvY2F0aW9uIE9wdGlvbmFsWy9wbm..............................................................",
	"target": "https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/",		"target": "https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/{CERN_ID}/test/",
	"base": "https://cluster142.knu.ac.kr:2880/"		"base": "https://cluster142.knu.ac.kr:2880/"
	}		}
	}		}

	* https://cluster142.knu.ac.kr:2880/cms/store/user/{my_cern_id}/test/ 경로에 DOWNLOAD,LIST를 할 수 있는 1시간 짜리 마카롱 토큰이 생성되었습니다.		* https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/{my_cern_id}/test/ 경로에 DOWNLOAD,LIST를 할 수 있는 1시간 짜리 마카롱 토큰이 생성되었습니다.
	* 발급된 마카롱 토큰은 "MDA0NmxvY2F0aW9uIE9wdGlvbmFsWy9wbm.............................................................." 입니다.		* 발급된 마카롱 토큰은 "MDA0NmxvY2F0aW9uIE9wdGlvbmFsWy9wbm.............................................................." 입니다.

Hanbi: /* 주의사항 */

2021-12-06T06:16:46Z

주의사항

← Older revision		Revision as of 06:16, 6 December 2021
Line 5:		Line 5:
	=== 주의사항 ===		=== 주의사항 ===

	* webdav 프로토콜의 경로가 다음과 같이 변경되었습니다.		* webdav 프로토콜의 경로가 다음과 같이 변경되었습니다. 사용에 유의하시기 바랍니다.
	* https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID} -> https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/{CERN_ID}		* https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID} -> https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/{CERN_ID}

Hanbi: /* dCache에서 WebDav 프로토콜 및 MACAROONS 인증 사용하기 */

2021-12-06T06:16:27Z

dCache에서 WebDav 프로토콜 및 MACAROONS 인증 사용하기

← Older revision		Revision as of 06:16, 6 December 2021
Line 2:		Line 2:

	향후 GridFTP와 X509 인증을 대체하는 WebDav 프로토콜과 MACAROONS 인증에 대한 소개 문서입니다.		향후 GridFTP와 X509 인증을 대체하는 WebDav 프로토콜과 MACAROONS 인증에 대한 소개 문서입니다.

			=== 주의사항 ===

			* webdav 프로토콜의 경로가 다음과 같이 변경되었습니다.
			* https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID} -> https://cluster142.knu.ac.kr:2880/pnfs/knu.ac.kr/data/cms/store/user/{CERN_ID}

	=== 사전 작업 ===		=== 사전 작업 ===

Hanbi: /* 토큰의 유효기간 */

2021-11-29T00:52:57Z

토큰의 유효기간

← Older revision		Revision as of 00:52, 29 November 2021
Line 24:		Line 24:

	ex) PT1H : 1시간		ex) PT1H : 1시간
	~~P14D~~ : ~~14일~~		P02D : 2일

	==== curl을 이용한 토큰 발급 ====		==== curl을 이용한 토큰 발급 ====

Hanbi: /* copy */

2021-06-28T08:06:29Z

copy

← Older revision		Revision as of 08:06, 28 June 2021
Line 173:		Line 173:
	* Source: https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/test.transfer		* Source: https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/test.transfer
	* Target: . (현재 디렉토리)		* Target: . (현재 디렉토리)
	* ~~dCache에~~ 파일을 내려받기 위해서는 토큰을 생성할때 DOWNLOAD 권한을 추가해야 합니다.		* dCache에서 파일을 내려받기 위해서는 토큰을 생성할때 DOWNLOAD 권한을 추가해야 합니다.
	* dCache에 파일을 쓰기 위해서는 토큰을 생성할때 UPLOAD 권한을 추가해야 합니다.		* dCache에 파일을 쓰기 위해서는 토큰을 생성할때 UPLOAD 권한을 추가해야 합니다.

Hanbi at 08:06, 28 June 2021

2021-06-28T08:06:13Z

← Older revision		Revision as of 08:06, 28 June 2021
Line 156:		Line 156:
	* 다음 경로의 모든 파일과 디렉토리를 표시		* 다음 경로의 모든 파일과 디렉토리를 표시
	* https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/		* https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/
			* dCache에 디렉토리를 생성하기 위해서는 토큰을 생성할때 LIST 권한을 추가해야 합니다.

	$ rclone --config=rclone.conf ls cluster142:/		$ rclone --config=rclone.conf ls cluster142:/
Line 172:		Line 173:
	* Source: https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/test.transfer		* Source: https://cluster142.knu.ac.kr:2880/cms/store/user/{CERN_ID}/test/test.transfer
	* Target: . (현재 디렉토리)		* Target: . (현재 디렉토리)
			* dCache에 파일을 내려받기 위해서는 토큰을 생성할때 DOWNLOAD 권한을 추가해야 합니다.
	* dCache에 파일을 쓰기 위해서는 토큰을 생성할때 UPLOAD 권한을 추가해야 합니다.		* dCache에 파일을 쓰기 위해서는 토큰을 생성할때 UPLOAD 권한을 추가해야 합니다.