ProFTPD+iconv

Автор: moonug.

Есть такая неприятная особенность нашего мира: как правило на наших хардах файлы лежат не в любимой виндоусом кодировке CP1251, а в koi8-r или utf-8. Что при использовании фтп приносит некоторую головную боль, т.к виндовые фтп-клиенты в большинстве своем желают видеть на сервере файлы в кодировке CP1251, а поисковик часто идет у них на поводу. Есть два пути решения проблемы: либо хранить файлы у себя уже в CP1251, либо осуществлять перекодирование "на лету". Первый вариант меня абсолютно не устраивает. Поэтому мы пойдем по второму. В некоторых фтп-серверах, например в pure-ftpd есть такая возможность "из коробки", а вот в столь любимом мной proftpd ее нет :(. Зато к версиям 1.2.10 и 1.3.0 есть патчик от наших японских друзей, который сию функциональность добавляет. Все было хорошо, даже в родном фряшном порте появилась опция, позволяющая наклыдвать этот патч прям из порта, поставил крестик - и доволен :). Но с приходом в мир версии 1.3.1 опция изчезла, а старые патчи не накладывались. Сначала не захотел возиться с кодом proftpd и разбираться почему не патчится, попробовал мигрировать на pure-ftpd, но прошел месяц, и я в очередной раз осознал, что функциональности этого сервера мне не хватает, слишком уж много у меня заморочек, большая их часть правда еще в проекте :). Итак было принято героическое решение разобраться и пропатчить таки proftpd. По привычке полез в гугл, вдруг кто уже все сделал, так нет, всем лень или никто не хочет делиться. Чтож, полез сам, оказалось все намного проще, чем думал :).

Как это было

Итак, идем в порт ftp/proftpd и делаем там make extract. Попутно качая патчи для версии 1.3.0 (ссылку на них я не привожу - лежат на каждом втором сервере, если надо - гугл вас спасет :)). Патчим, что-то где-то ругается. Говорим make. И очень быстро вылетаем с ошибкой в mod_ls.c, говорят, что переменную buf2 компилятор первый раз в глаза видит, а ей уже сто-то присваивают, даже не объявив, не хорошо. Идем разбираться. Открываем любимым текстовым редактором файл work/proftpd-1.3.1/modules/mod_ls.c (в моем случае это vim, но это так, к слову) и топаем к строке с ошибкой. В соседней консоли внимательно смотрим в соответствующий diff. Оказывается немного изменили строки выше, и объявления из патча просто не нашли куда себя вставлять :). Дописываем и продолжаем сборку. И о чудо! Все собралось, поставилось и даже заработало :). (В опциях порта я выбрал CYRFIX, чтоб не вырезать руками кусок netio.c).

После такого быстрого успеха руки зачесались, потому я сделал патч для новой версии, патч уже включает в себя патч CYRFIX, потому тот накладывать уже не надо.

Делаем порт
Все просто, правим Makefile порта, убираем из опций CYRFIX, и соответственно добавляем нашу секцию ICONV. Получаем вот такой вот Makefile:



# New ports collection makefile for: proftpd # Date created: 26 January 1998 # Whom: Stephane Legrand # # $FreeBSD: ports/ftp/proftpd/Makefile,v 1.129 2008/03/03 22:12:52 beech Exp $ # PORTNAME= proftpd DISTVERSION= 1.3.1 PORTREVISION= 9 CATEGORIES= ftp MASTER_SITES= ftp://ftp.proftpd.org/distrib/source/ \ ftp://ftp.fastorama.com/mirrors/ftp.proftpd.org/distrib/source/ \ ftp://ftp.dataguard.no/ftp/pub/proftpd/distrib/source/ \ ftp://spirit.bentel.sk/mirrors/Proftpd/distrib/source/ \ ftp://proftpd.networkedsystems.co.uk/distrib/source/ \ http://mirrors.ibiblio.org/pub/mirrors/proftpd/distrib/source/ \ http://www.mirrorservice.org/sites/ftp.proftpd.org/distrib/source/ \ CENKES:clam \ http://www.smartftp.com/oss/proftpd/:digest \ http://lev.serebryakov.spb.ru/mod_comb/:comb\ http://labratsoftware.com/mod_sql_tds/:sql_tds \ LOCAL/beech:digest \ LOCAL/beech:comb \ LOCAL/beech:sql_tds DISTFILES= ${DISTNAME}${EXTRACT_SUFX} EXTRACT_ONLY= ${DISTNAME}${EXTRACT_SUFX} MAINTAINER?= beech@FreeBSD.org COMMENT?= Highly configurable ftp daemon CONFLICTS= proftpd-[0-9]*] MAN1= ftpcount.1 ftpwho.1 ftptop.1 MAN5= xferlog.5 MAN8= proftpd.8 ftpshut.8 ftpdctl.8 PORTDOCSdoc= Configuration.html faq.html PORTDOCScontrib=mod_ifsession.html mod_radius.html mod_rewrite.html \ mod_tls.html mod_wrap2.html mod_wrap2_file.html mod_wrap2_sql.html \ mod_ban.html mod_quotatab_radius.html ftpasswd.html PORTDOCSreadme= README README.DSO README.FreeBSD README.IPv6 README.LDAP README.PAM \ README.capabilities README.classes README.facl README.modules \ README.ports RELEASE_NOTES PORTDOCS= ${PORTDOCSdoc} ${PORTDOCScontrib} ${PORTDOCSreadme} PORTEXAMPLES= ASCII.html CreateHome.html Filters.html SQL.html Umask.html \ AuthFiles.html DNS.html Globbing.html SSH.html Upgrade.html \ Authentication.html DSO.html Limit.html Scoreboard.html Vhost.html \ BCP.html Debugging.html ListOptions.html ServerType.html \ VirtualUsers.html Chroot.html Directory.html Logging.html Stopping.html \ index.html Classes.html DisplayFiles.html NAT.html TLS.html ConfigFile.html \ FTP.html Quotas.html Timestamps.html Controls.html \ FXP.html Regex.html Tracing.html USE_GMAKE= yes USE_BZIP2= yes USE_AUTOTOOLS= autoconf:261 GNU_CONFIGURE= yes USE_RC_SUBR= proftpd.sh CONFIGURE_ARGS= --localstatedir=/var/run \ --sysconfdir=${PREFIX}/etc \ --disable-sendfile OPTIONS= IPV6 "Use IPv6" off \ LDAP "Use LDAP" off \ LDAP_TLS "Use LDAP TLS (Requires LDAP, OPENSSL)" off\ MYSQL "MySQL auth (Can be combined with PGSQL)" off \ PGSQL "Postgres auth (Can be combined with MYSQL)" off \ TDS "FreeTDS - Sybase & MS-SQL auth (Exclusive)" off \ OPENSSL "Include mod_tls" on \ QUOTA "Include mod_quota" off \ IFSESSION "Include mod_ifsession" on \ README "Include mod_readme" on \ RATIO "Include mod_ratio" on \ CTRLS "Include controls" off \ REWRITE "Include mod_rewrite" on \ WRAP "Include mod_wrap2" on \ WRAP_FILE "Include mod_wrap2_file" off \ WRAP_SQL "Include mod_wrap2_sql" off \ RADIUS "Include mod_radius" on \ QUOTATAB_RADIUS "include mod_quotatab_radius" off \ BAN "Include mod_ban (Requires CTRLS)" off \ NLS "Use nls (builds mod_lang)" off \ CLAMAV "Include mod_clamav" off \ DIGEST "Include mod_digest" off \ COMB "Include mod_comb (multistream upload)" off \ ICONV "Transcode" on MODULES?= LIBDIRS?= INCLUDEDIRS?= .include <bsd.port.pre.mk> .if !defined(WITHOUT_RATIO) MODULES:=${MODULES}:mod_ratio .endif .if !defined(WITHOUT_README) MODULES:=${MODULES}:mod_readme .endif .if !defined(WITHOUT_REWRITE) MODULES:=${MODULES}:mod_rewrite .endif .if !defined(WITHOUT_WRAP) MODULES:=${MODULES}:mod_wrap2 INCLUDEDIRS:=${INCLUDEDIRS}:${WORKDIR}/include LIBDIRS:=${LIBDIRS}:${LOCALBASE}/lib PLIST_FILES+= include/proftpd/mod_wrap2.h .endif .if defined(WITH_WRAP_FILE) INCLUDEDIRS:=${INCLUDEDIRS}:${LOCALBASE}/include LIBDIRS:=${LIBDIRS}:${LOCALBASE}/lib MODULES:=${MODULES}:mod_wrap2_file .endif .if defined(WITH_WRAP_SQL) INCLUDEDIRS:=${INCLUDEDIRS}:${LOCALBASE}/include LIBDIRS:=${LIBDIRS}:${LOCALBASE}/lib MODULES:=${MODULES}:mod_wrap2_sql .endif .if defined(WITH_RADIUS) MODULES:=${MODULES}:mod_radius .endif .if defined(WITH_QUOTATAB_RADIUS) MODULES:=${MODULES}:mod_quotatab_radius .endif .if defined(WITH_BAN) MODULES:=${MODULES}:mod_ban .endif .if defined(WITH_SETPASSENT) CONFIGURE_ARGS+= --enable-force-setpassent .endif .if defined(WITHOUT_PAM) CONFIGURE_ARGS+= --disable-auth-pam .endif .if defined(WITH_IPV6) CONFIGURE_ARGS+= --enable-ipv6 .endif .if !defined(WITH_IPV6) CONFIGURE_ARGS+= --disable-ipv6 .endif .if defined(WITH_NLS) INCLUDEDIRS:=${INCLUDEDIRS}:${LOCALBASE}/include LIBDIRS:=${LIBDIRS}:${LOCALBASE}/lib CONFIGURE_ARGS+= --enable-nls USE_GETTEXT=yes PROFTPD_LIBS+= -lintl -L${LOCALBASE}/lib .endif #allow user to override MODULES?= mod_ratio:mod_readme:mod_rewrite:mod_wrap2:mod_ifsession INCLUDEDIRS?= LIBDIRS?= .if defined(WITH_LDAP) USE_OPENLDAP= yes MODULES:=${MODULES}:mod_ldap INCLUDEDIRS:=${INCLUDEDIRS}:${LOCALBASE}/include LIBDIRS:=${LIBDIRS}:${LOCALBASE}/lib .endif # Добавляем перекодировку "на лету" .if defined(WITH_ICONV) USE_ICONV= yes EXTRA_PATCHES+= ${PATCHDIR}/extra-patch-iconv-netio.c EXTRA_PATCHES+= ${PATCHDIR}/extra-patch-iconv-mod_codeconv.c EXTRA_PATCHES+= ${PATCHDIR}/extra-patch-iconv-mod_df.c EXTRA_PATCHES+= ${PATCHDIR}/extra-patch-iconv-mod_ls.c MODULES:=${MODULES}:mod_codeconv INCLUDEDIRS:=${INCLUDEDIRS}:${LOCALBASE}/include LIBDIRS:=${LIBDIRS}:${LOCALBASE}/lib PROFTPD_LIBS+= -liconv -L${LOCALBASE}/lib .endif .if defined(WITH_MYSQL) USE_MYSQL= yes MODULES:=${MODULES}:mod_sql_mysql INCLUDEDIRS:=${INCLUDEDIRS}:${LOCALBASE}/include:${LOCALBASE}/include/mysql LIBDIRS:=${LIBDIRS}:${LOCALBASE}/lib/mysql .endif .if defined(WITH_PGSQL) USE_PGSQL= yes MODULES:=${MODULES}:mod_sql_postgres INCLUDEDIRS:=${INCLUDEDIRS}:${LOCALBASE}/include LIBDIRS:=${LIBDIRS}:${LOCALBASE}/lib .endif .if ${MODULES:M*mod_sql_*} MODULES:=mod_sql${MODULES} PLIST_FILES+= include/proftpd/mod_sql.h .endif .if defined(WITH_OPENSSL) .include <${PORTSDIR}/Mk/bsd.openssl.mk> CFLAGS+= -DHAVE_OPENSSL -I${OPENSSLINC} PROFTPD_LIBS+= -lssl -lcrypto -L${OPENSSLLIB} MODULES:=${MODULES}:mod_tls .endif .if defined(WITH_CTRLS) CONFIGURE_ARGS+= --enable-ctrls PLIST_FILES+= sbin/ftpdctl .if !defined(WITHOUT_CTRLS_ADMIN) MODULES:=${MODULES}:mod_ctrls_admin .endif .endif .if defined(WITH_QUOTA) MODULES:=${MODULES}:mod_quotatab:mod_quotatab_file PLIST_FILES+= include/proftpd/mod_quotatab.h .if defined(WITH_LDAP) MODULES:=${MODULES}:mod_quotatab_ldap .endif .if defined(WITH_PGSQL) || defined(WITH_MYSQL) MODULES:=${MODULES}:mod_quotatab_sql .endif .endif .if defined(WITH_CLAMAV) #http://www.uglyboxindustries.com/mod_clamav_new.c DISTFILES+= mod_clamav-0.5.1.tar.bz2:clam EXTRACT_ONLY+= mod_clamav-0.5.1.tar.bz2 USE_CLAMAV= yes MODULES:=${MODULES}:mod_clamav LIB_DEPENDS+= clamav.3:${PORTSDIR}/security/clamav INCLUDEDIRS:=${INCLUDEDIRS}:${LOCALBASE}/include LIBDIRS:=${LIBDIRS}:${LOCALBASE}/lib .endif .if defined(WITH_DIGEST) DISTFILES+= mod_digest.c:digest MODULES:=${MODULES}:mod_digest .endif .if defined(WITH_COMB) COMB_VERSION= 0.1 DISTFILES+= mod_comb-${COMB_VERSION}.tar.bz2:comb EXTRACT_ONLY+= mod_comb-${COMB_VERSION}.tar.bz2 MODULES:=${MODULES}:mod_comb PORTDOCScontrib+=mod_comb.html PORTDOCSreadme+=README.mod_comb .endif .if defined(WITH_TDS) DISTFILES+= mod_sql_tds-4.5.tar.bz2:sql_tds EXTRACT_ONLY+= mod_sql_tds-4.5.tar.bz2 MODULES:=${MODULES}:mod_sql_tds MODULES:=mod_sql${MODULES} PLIST_FILES+= include/proftpd/mod_sql.h INCLUDEDIRS:=${INCLUDEDIRS}:${LOCALBASE}/include LIBDIRS:=${LIBDIRS}:${LOCALBASE}/lib LIB_DEPENDS+= sybdb.5:${PORTSDIR}/databases/freetds .endif # mod_ifsession should be the last item in the modules list .if !defined(WITHOUT_IFSESSION) MODULES:=${MODULES}:mod_ifsession .endif # Keep this here below, in case similar constructs need to be made CONFIGURE_ENV+= "LIBS=${PROFTPD_LIBS}" .if !empty(MODULES) CONFIGURE_ARGS+= --with-modules=${MODULES} .endif .if !empty(INCLUDEDIRS) CONFIGURE_ARGS+= --with-includes=${INCLUDEDIRS} .endif .if !empty(LIBDIRS) CONFIGURE_ARGS+= --with-libraries=${LIBDIRS} .endif MODULES!=${ECHO} ${MODULES} | ${SED} -e 's,^:,,' -e 's,:$$,,' post-extract: .if defined(WITH_CLAMAV) @${MV} ${WRKDIR}/mod_clamav_new.c ${WRKSRC}/modules/mod_clamav.c .endif .if defined(WITH_DIGEST) @${CP} ${DISTDIR}/${DIST_SUBDIR}/mod_digest.c ${WRKSRC}/modules/ .endif .if defined(WITH_COMB) @${MV} ${WRKDIR}/mod_comb-${COMB_VERSION}/mod_comb.c ${WRKSRC}/contrib/ @${MV} ${WRKDIR}/mod_comb-${COMB_VERSION}/README ${WRKSRC}/README.mod_comb @${MV} ${WRKDIR}/mod_comb-${COMB_VERSION}/mod_comb.html ${WRKSRC}/doc/contrib/ .endif .if defined(WITH_TDS) @${MV} ${WRKDIR}/mod_sql_tds.c ${WRKSRC}/contrib/ .endif post-patch: .if defined(WITH_NLS) @${REINPLACE_CMD} -e 's|-lsupp|-lsupp -lintl|g' ${WRKSRC}/Makefile.in .endif .if defined(WITH_LDAP_TLS) @${REINPLACE_CMD} -e 's:/\* #define USE_LDAP_TLS \*/:#define USE_LDAP_TLS:' \ ${WRKSRC}/contrib/mod_ldap.c .endif @${REINPLACE_CMD} -e 's|proftpd\.conf|proftpd.conf.sample|g' ${WRKSRC}/Makefile.in pre-configure: @${ECHO_MSG} "==> Configuring with ${MODULES}" post-configure: ${REINPLACE_CMD} -e 's: -lnsl::' ${WRKSRC}/Make.rules ${REINPLACE_CMD} -e 's:/usr/sbin:${PREFIX}/sbin:' \ -e 's:/usr/bin:${PREFIX}/bin:' \ ${WRKSRC}/src/proftpd.8 ${WRKSRC}/utils/ftpshut.8 \ ${WRKSRC}/utils/ftpcount.1 post-install: @cd ${PREFIX}/etc/ && ${CP} -n proftpd.conf.sample proftpd.conf .if !defined(NOPORTDOCS) @${INSTALL} -d ${DOCSDIR}/ @cd ${WRKSRC}/doc/ && ${INSTALL_DATA} ${PORTDOCSdoc} ${DOCSDIR}/ @cd ${WRKSRC}/doc/contrib && ${INSTALL_DATA} ${PORTDOCScontrib} ${DOCSDIR}/ @cd ${WRKSRC} && ${INSTALL_DATA} ${PORTDOCSreadme} ${DOCSDIR}/ .endif .if !defined(NOPORTEXAMPLES) @${INSTALL} -d ${EXAMPLESDIR}/ @cd ${WRKSRC}/doc/howto/ && ${INSTALL_DATA} ${PORTEXAMPLES} ${EXAMPLESDIR}/ .endif .if defined(WITH_CTRLS) @${INSTALL_PROGRAM} ${WRKSRC}/ftpdctl ${PREFIX}/sbin/ @${INSTALL_MAN} ${WRKSRC}/src/ftpdctl.8 ${MAN8PREFIX}/man/man8/ .endif .include <bsd.port.post.mk>

Складываем патчи в каталог files. Порт готов :).


Накладываем патч на родной порт:

Идем все туда же - ftp/proftpd, make extract, распаковываем архив с патчами в work, собственно накладываем патч :). Дальше make config install. Галку на пункте CYRFIX можно не ставить. Вуаля!

Ленивые обладатели FreeBSD могут сильно не думать, а сразу скачать архив с готовым портом, распаковать, и с помощью привычных make install && make clean, проставив нужные галки, получить готовый Proftpd. (Опция, включающая перекодирование - ICONV)


Файлы:

Переделанный патч, ничего после него править руками не надо, все сам делает, умный :)
Берем его здесь

Собственно порт берем здесь

added by lissyara
ftp автора частенько лежит, поэтому выкладываю и у себя

размещено: 2008-03-21,
последнее обновление: 2008-03-21,
автор: moonug

  Этот информационный блок появился по той простой причине, что многие считают нормальным, брать чужую информацию не уведомляя автора (что не так страшно), и не оставляя линк на оригинал и автора — что более существенно. Я не против распространения информации — только за. Только условие простое — извольте подписывать автора, и оставлять линк на оригинальную страницу в виде прямой, активной, нескриптовой, незакрытой от индексирования, и не запрещенной для следования роботов ссылки.
  Если соизволите поставить автора в известность — то вообще почёт вам и уважение.

© lissyara 2006-10-24 08:47 MSK