Как преобразовать EST/EDT в GMT?

Самый простой и надежный известный мне способ конвертации между часовыми поясами — использовать сторонний модуль pytz:

import pytz
import datetime as dt

utc=pytz.utc
eastern=pytz.timezone('US/Eastern')
fmt='%Y-%m-%d %H:%M:%S %Z%z'

text='''\
10/1/2010   0:0:0
10/1/2010   0:6:0
10/1/2010   23:54:0
10/3/2010   0:0:0
'''

for datestring in text.splitlines():
    date=dt.datetime.strptime(datestring,"%m/%d/%Y %H:%M:%S")
    date_eastern=eastern.localize(date,is_dst=None)
    date_utc=date_eastern.astimezone(utc)
    print(date_utc.strftime(fmt))

дает:

2010-10-01 04:00:00 UTC+0000
2010-10-01 04:06:00 UTC+0000
2010-10-02 03:54:00 UTC+0000
2010-10-03 04:00:00 UTC+0000

Однако обратите внимание, что ваши данные не указывают, находится ли дата и время в часовом поясе EST или EDT. Есть несколько случаев, когда вы не указываете EST или EDT. Например, «27.10.2002 1:30:00» будет двусмысленным:

>>> eastern.localize(datetime(2002, 10, 27, 1, 30, 00), is_dst=None)
AmbiguousTimeError: 2002-10-27 01:30:00

так как это время произошло дважды из-за перехода на летнее время. Также некоторые даты, такие как 2002-04-07 02:30:00, не существуют. См. эту ссылку для обсуждения этих и даже более странных проблем, возникающих при работе с местное время.

Если вы готовы не обращать внимания на эти запутанные угловые случаи, и если ваша машина настроена на местный часовой пояс (например, EST/EDT), существует способ преобразования между местным часовым поясом и часовым поясом UTC, который не требует установки pytz. Идея состоит в том, чтобы преобразовать datetime -> timetuple -> timestamp -> UTC datetime. Цепочка преобразований выполняется с

dt.datetime.utcfromtimestamp(time.mktime(date.timetuple()))

Например:

import time
import datetime as dt
import pytz

utc=pytz.utc
eastern=pytz.timezone('US/Eastern')
fmt='%Y-%m-%d %H:%M:%S %Z%z'

text='''\
10/1/2010   0:0:0
10/1/2010   0:6:0
10/1/2010   23:54:0
10/3/2010   0:0:0
3/13/2011   1:55:0
3/13/2011   3:00:0
'''
for datestring in text.splitlines():
    date=dt.datetime.strptime(datestring,"%m/%d/%Y %H:%M:%S")
    date_est=eastern.localize(date,is_dst=None)
    date_utc=date_est.astimezone(utc)
    date_utc2=dt.datetime.utcfromtimestamp(time.mktime(date.timetuple()))
    print('{d} --> {d_utc}    {d_utc2}'.format(
        d=date.strftime(fmt),
        d_utc=date_utc.strftime(fmt),
        d_utc2=date_utc2.strftime(fmt),
        ))
    assert date_utc.hour == date_utc2.hour

урожаи

2010-10-01 00:00:00 EDT-0400 --> 2010-10-01 04:00:00 UTC+0000    2010-10-01 04:00:00 
2010-10-01 00:06:00 EDT-0400 --> 2010-10-01 04:06:00 UTC+0000    2010-10-01 04:06:00 
2010-10-01 23:54:00 EDT-0400 --> 2010-10-02 03:54:00 UTC+0000    2010-10-02 03:54:00 
2010-10-03 00:00:00 EDT-0400 --> 2010-10-03 04:00:00 UTC+0000    2010-10-03 04:00:00 
2011-03-13 01:55:00 EST-0500 --> 2011-03-13 06:55:00 UTC+0000    2011-03-13 06:55:00 
2011-03-13 03:00:00 EDT-0400 --> 2011-03-13 07:00:00 UTC+0000    2011-03-13 07:00:00 

Последние две даты, проверенные выше, показывают, что преобразование работает правильно, даже если время близко к переключению между EST и EDT.

Таким образом, используя альтернативный метод (без pytz), вот как преобразовать объекты datetime, представляющие местное время, в объекты datetime, представляющие время по Гринвичу, и наоборот:

In [83]: import datetime as dt
In [84]: import time
In [85]: import calendar

In [86]: date=dt.datetime(2010,12,1,0,0,0)    
In [87]: date
Out[87]: datetime.datetime(2010, 12, 1, 0, 0)

In [88]: date_utc=dt.datetime.utcfromtimestamp(time.mktime(date.timetuple()))    
In [89]: date_utc
Out[89]: datetime.datetime(2010, 12, 1, 5, 0)

In [90]: date_local=dt.datetime.fromtimestamp(calendar.timegm(date_utc.timetuple()))    
In [91]: date_local
Out[91]: datetime.datetime(2010, 12, 1, 0, 0)

Псевдокод для каждой записи:

сделать строку отметки времени: field[0].strip() + " " + field[1].strip()

используйте datetime.datetime.strptime(), чтобы преобразовать это в экземпляр datetime.datetime

добавить timedelta, например. timedelta(hours=-4) к вашей метке времени

используйте timestamp.strftime() для создания любого строкового представления, которое вы хотите для вывода.

Для случая, когда поле времени пусто: если это означает 0:0:0, измените вышеприведенное в соответствии с требованиями. Если это означает «время неизвестно», вам нужно будет сделать что-то еще...

Предположим, что у нас есть строка даты и времени как «2019-04-09T23:59:55ET» по американскому/восточному времени. Вот функция для преобразования строки в UTC:

from datetime import datetime
import pytz

eastern = pytz.timezone('US/Eastern')

def convent_est_to_utc(datetime_str):
    dt = datetime.strptime(datetime_str, '%Y-%m-%dT%H:%M:%SET')
    return dt.replace(tzinfo=eastern).astimezone(pytz.utc)

# testing
convent_est_to_utc("2019-04-09T23:59:55ET")

# The result: 2019-04-10 04:55:55+00:00

Без связанного времени часовой пояс не имеет значения ... и дату нельзя перевести в другой часовой пояс. Есть ли связанное время в другом столбце?

РЕДАКТИРОВАТЬ: Хорошо, теперь, когда ЕСТЬ время, я позволю гуру Python вступить во владение. ;]

Мне пришлось создать пользовательскую функцию на Python для преобразования EST в GMT, вот код, который я написал:

#convert est time to gmt. Make sure you assign the current EST values
#to the following variables
        est_year
        est_month
        est_day
        est_hour
        est_min

        gmt_year = est_year
        gmt_month = est_month
        gmt_day = est_day
        gmt_hour = est_hour + 5 #gmt is ahead by 5 hrs
        gmt_min = est_min

        if gmt_hour > 23:
          gmt_hour = gmt_hour - 23
          gmt_day = est_day + 1

        days_in_month = calendar.monthrange(est_year,est_month)[1] #in case the no days becomes 32..

        if gmt_day > days_in_month:
          gmt_day = 1
          gmt_month = gmt_month + 1

        if gmt_month > 12:
          gmt_month = 1
          gmt_year = gmt_year + 1

        gmttime = datetime.datetime(gmt_year, gmt_month, gmt_day, gmt_hour, gmt_min, 0)

Я не добавил поддержку EDT. В настоящее время февраль, и EST отслеживается. Любые изменения и исправления приветствуются!

Вы можете использовать pandas.DataFrame.tz_convert() следующим образом. :

import pandas as pd
from datetime import datetime

df = pd.read_csv("your_data_file_path.csv", index_col=False, engine='python')
df['Date'] = pd.to_datetime(df['Date'])
df['Date'] = df['Date'].dt.tz_localize('US/Eastern').dt.tz_convert('UTC')
df['Date'] = df['Date'].apply(lambda x: datetime.replace(x, tzinfo=None))

Что делает последняя строка, так это удаляет информацию о часовом поясе из объекта datetime, поэтому вы можете работать только с датой и временем (не волнуйтесь, это не меняет часовой пояс снова, он просто удаляет его из строки метки времени).