디시인사이드 갤러리

갤러리 이슈박스, 최근방문 갤러리

갤러리 본문 영역

저거 8.46 아이피 저거 보니까 어려울건 없는듯

ㅆㅇㅆ(124.216) 2025.10.14 10:32:19
조회 102 추천 0 댓글 4

이거 전부 보니까 800만개 URL 수집하고, GLOBUS랑 데이터 다운하고 JSON 구조랑 해야하는데 데이터 구조만 알면 딱히 어려운건 없는듯?


보니까 파이썬 스크립트 사용법까지 제공됨


환경 설정(Globus 계정) 데이터셋 다운 파이썬 설정 -30분


스크립트 실행 하고, 데이터셋 7GB 전체 추출하면 경험상 2시간 정도?


코드북 제작 검토하면 얼추 3시간


이렇게 문서화까지 경하면 6~7시간 세트 정도?


디버깅 고려해서 공임 치면 8시간 걸릴듯. 숙련된 개발자 기준이면 3시간 미만도 가능할거고


방법론 자체는 news_extractor.py를 실행해서 csv 변환하는거 밖에 없음


문제는 데이터셋 다운인데, 원격으로 너한테 다운받게 한후에 일부 데이터 나한테 보내서 그 데이터 바탕으로 코드북 작성하면되서 어려울게 없음


원격 조작은 한 3시간 정도 하면될거고


근데 저걸 코드북이랑 CSV 테이블 문서화가 좀 걸리지


기본적으로 프로그래머 공임이 주니어 기준 25000인데, 나는 좀 싸게 18000정도로 받으니까


내 기준이면 단가 12만인데 나한테 맡기면 10만에 해줌 ㅇㅇ


추천 비추천

0

고정닉 0

0

댓글 영역

전체 댓글 0
본문 보기

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

갤러리 리스트
번호 제목 글쓴이 작성일 조회 추천
설문 영포티룩도 멋지게 소화할 것 같은 40대 스타는? 운영자 25/10/27 - -
AD 할로윈 슈퍼위크~!! 운영자 25/10/23 - -
2896098 해결법을 다오. [3] 루도그담당(58.239) 10.13 96 0
2896097 웹상에서 자존감 채우려고 하니까 그따위 허영부리며 사는거야 [2] ㅇㅇ(218.149) 10.13 95 2
2896095 딱봐도 실력없어서 과제대행으로 용돈벌이나 하는 사회 최하층민새끼가 [5] ㅇㅇ(218.149) 10.13 106 2
2896093 개인사업자면 홈텍스를 인증해라.. [2] ㅇㅇ(218.149) 10.13 109 1
2896089 진짜 신기하지 않냐? 124.48 점마는 지가 말할수록 백수라는게 드러남 [1] ㅆㅇㅆ(124.216) 10.13 103 0
2896086 암만봐도 타임라인 진짜 씹쓰레기 같네 [4] 루도그담당(58.239) 10.13 111 0
2896082 전공에서 배운거 실무에서 얼마나 써먹는중? [6] ㅇㅇ갤로그로 이동합니다. 10.13 127 0
2896081 네트워크는 ㅈㅈ쳤다 ㅈㄴ노잼에어렵네 프갤러(14.43) 10.13 62 0
2896080 너네 아직도 그러고 사냐? 프갤러(59.16) 10.13 70 0
2896078 혹시 치킨한마리 나눔해주실분 계십니까. ㅇㅇ(223.39) 10.13 54 0
2896077 마이크로소프트10년동안 발전보다버그투성이가됬누 타이밍뒷통수한방(1.213) 10.13 57 0
2896075 나 오랜마네 바카라 사이트 들어가서 3번 찍었는데 다맞음 ㅇㅅㅇ ㅇㅇ(223.39) 10.13 48 0
2896074 님들아 백준 알고리즘 풀때 유튜브 영상틀어놓거나 노래들으면서 풀음? 프갤러(123.212) 10.13 66 0
2896071 한우물 진득하고 꾸준하게 팔 수 있는거도 재능인거 같다 [6] chironpractor갤로그로 이동합니다. 10.13 97 0
2896070 야애니 ♥덩냥이♥갤로그로 이동합니다. 10.13 74 0
2896068 신문고로 불법주차 신고하는 놈들 중 정상인은 없다는게 팩트임 [11] 야옹아저씨갤로그로 이동합니다. 10.13 245 5
2896067 엔지) 프갤러(211.243) 10.13 64 0
2896062 어제 쓰던글 이어서 쓰려다가 피궁해서 못쓰겟당 ♥덩냥이♥갤로그로 이동합니다. 10.13 65 0
2896060 잼땅 ♥덩냥이♥갤로그로 이동합니다. 10.13 54 0
2896059 술 끊었더니 되려 피로하네 진짜... 존나 졸리네 ㅇㅇ(223.39) 10.13 40 0
2896055 카톡에 야한 사진 올려놓고 친구보고 카톡 음란물 유포로 신고하면 [6] 프갤러(110.8) 10.13 79 0
2896054 환율 1800원 근접 ㄷㅅㄷ 찢두순 ♥덩냥이♥갤로그로 이동합니다. 10.13 85 0
2896053 무능극좌 외교실패 찢두순 국민세금으로 감추기 끝나가는듯? ♥덩냥이♥갤로그로 이동합니다. 10.13 57 0
2896052 ❤✨☀⭐⚡☘⛩나님 시작합니당⛩☘⚡⭐☀✨❤ ♥덩냥이♥갤로그로 이동합니다. 10.13 50 0
2896050 LLM(AI) 활용법 실제 나르시갤로그로 이동합니다. 10.13 93 0
2896048 LLM 기반 AI의 최대 활용법 나르시갤로그로 이동합니다. 10.13 68 0
2896047 LLM 기반 AI는 믿지 마라. 글쓰기 기계라고 생각해 나르시갤로그로 이동합니다. 10.13 39 0
2896042 좆카오톡 개좆같네 전혀 안궁금한 전 회사 사장 스토리가 막 뜨네 [1] 프갤러(211.234) 10.13 62 0
2896038 내 여자친구 사진이야 ㅇㅇ갤로그로 이동합니다. 10.13 68 0
2896036 천오백원 거기가면 진짜 돈 주냐 볼드오이(121.151) 10.13 46 0
2896033 극좌가 망친 한국 영화 망해가는 이유 ♥덩냥이♥갤로그로 이동합니다. 10.13 65 0
2896032 소말리아인가 [3] 볼드오이(121.151) 10.13 76 0
2896031 자바스크립트 코딩완전 첨인데 유료강의 추천좀 부탁.. [1] 프갤러(211.235) 10.13 93 0
2896030 외교천재 찢두순이라게 맞는거임? [3] ♥덩냥이♥갤로그로 이동합니다. 10.13 64 0
2896029 gemini code assist 무려 결제해서 써봤는데 프갤러(183.109) 10.13 69 0
2896026 개씨발련들아 연봉올려 이따구로 시킬거면 [4] ㅇㅇ(223.39) 10.13 95 0
2896024 Ada 프로그래밍: 3.4 구분자 (Delimiter) 나르시갤로그로 이동합니다. 10.13 57 0
2896023 이게 가능함? [19] 프갤러(211.235) 10.13 130 0
2896022 월 1500 캄보디아 해외취업 링크 떳다 [3] 헬마스터갤로그로 이동합니다. 10.13 135 0
2896021 누가 자꾸 나님글에 댓글유령짓 하는것임? ♥덩냥이♥갤로그로 이동합니다. 10.13 48 0
2896020 매끈매끈 미끈미끈 쌔근빡끈 ♥덩냥이♥갤로그로 이동합니다. 10.13 59 0
2896017 Ada 프로그래밍: 3.3.2 문자 리터럴 [1] 나르시갤로그로 이동합니다. 10.13 57 0
2896015 짱깨바가지는 착한바가지⭐ ♥덩냥이♥갤로그로 이동합니다. 10.13 42 0
2896012 이재명 개좇같은새끼 민생지원금 쌀 김치사니깐1초만에 증발했네 [1] 타이밍뒷.통수한방(1.213) 10.13 78 1
2896010 영어공부하는사람있음? ㅇㅇ갤로그로 이동합니다. 10.13 71 0
2896009 리액트 상태관리 좆타이가 좆은것같음 [4] 헬마스터갤로그로 이동합니다. 10.13 98 0
2896007 ❤✨☀⭐⚡☘⛩나님 시작합니당⛩☘⚡⭐☀✨❤ ♥덩냥이♥갤로그로 이동합니다. 10.13 54 0
2896006 윈도우10에서 잘 되던 프로그램이 윈도우11에서 오류나는 이유 아시는분 [2] 프갤러(222.116) 10.13 137 0
2896005 아 에러로그 보고 디버깅 못하는 새끼들 다 짤라야 [1] ㅇㅇ(211.234) 10.13 101 0
2896004 환율 1800원 근접 ㄷㅅㄷ 찢두순 ♥덩냥이♥갤로그로 이동합니다. 10.13 70 0
갤러리 내부 검색
제목+내용게시물 정렬 옵션

오른쪽 컨텐츠 영역

실시간 베스트

1/8

디시미디어

디시이슈

1/2